CN113518147B - 使用多个分立显示器增加显示区域的系统、电子设备以及方法 - Google Patents

使用多个分立显示器增加显示区域的系统、电子设备以及方法 Download PDF

Info

Publication number
CN113518147B
CN113518147B CN202110926774.7A CN202110926774A CN113518147B CN 113518147 B CN113518147 B CN 113518147B CN 202110926774 A CN202110926774 A CN 202110926774A CN 113518147 B CN113518147 B CN 113518147B
Authority
CN
China
Prior art keywords
electronic device
consumer
display
agent
screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110926774.7A
Other languages
English (en)
Other versions
CN113518147A (zh
Inventor
B·维格纳
M·乔达里
M·达默诺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
STMICROELECTRONICS INTERNATIONAL NV
STMicroelectronics lnc USA
Original Assignee
STMICROELECTRONICS INTERNATIONAL NV
STMicroelectronics lnc USA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by STMICROELECTRONICS INTERNATIONAL NV, STMicroelectronics lnc USA filed Critical STMICROELECTRONICS INTERNATIONAL NV
Publication of CN113518147A publication Critical patent/CN113518147A/zh
Application granted granted Critical
Publication of CN113518147B publication Critical patent/CN113518147B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01P—MEASURING LINEAR OR ANGULAR SPEED, ACCELERATION, DECELERATION, OR SHOCK; INDICATING PRESENCE, ABSENCE, OR DIRECTION, OF MOVEMENT
    • G01P1/00—Details of instruments
    • G01P1/07—Indicating devices, e.g. for remote indication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1446—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display display composed of modules, e.g. video walls
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0492—Change of orientation of the displayed image, e.g. upside-down, mirrored
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2356/00—Detection of the display position w.r.t. other display screens
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/04—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller
    • G09G2370/042—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller for monitor identification
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/04—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller
    • G09G2370/045—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller using multiple communication channels, e.g. parallel and serial
    • G09G2370/047—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller using multiple communication channels, e.g. parallel and serial using display data channel standard [DDC] communication

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Environmental & Geological Engineering (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

方法包括在主代理处接收来自候选消费者代理的声明，该声明指示候选消费者代理的存在。每个声明包括对应的候选消费者代理的显示器的显示参数。方法进一步包括在主代理处接收来自生产者代理的内容参数，该内容参数定义了将由消费者代理提供的内容的特性。基于所接收的声明和内容参数来配置拼接屏幕。拼接屏幕的配置包括选择消费者代理中的针对接收到声明的消费者代理，以及基于消费者代理中的选择的消费者代理的内容参数和显示参数生成内容分配参数。生成的内容分配参数被提供给消费者代理。

Description

使用多个分立显示器增加显示区域的系统、电子设备以及 方法
本申请是中国专利申请号为201810837161.4、申请日为2018年7 月26日、优先权日为2017年7月31日和2018年7月25日的发明专利申请的分案申请。
技术领域
本公开涉及集成诸如多个手持电子设备的多个分立显示器、以在多个显示器上显示一个图像或者多个图像的系统和方法，其中每个显示器呈现图像的唯一部分。
背景技术
手持电子设备随处可见。绝大多数人具有一个或多个移动或手持电子设备，每个设备具有不同的屏幕或者显示器尺寸。人们已经开始将这些手持电子设备集成到它们日常的面对面交互中，例如与朋友和家人分享照片或者在办公室或商业环境中进行演示。有时，单个屏幕或显示器太小而无法完全了解图像、文档或者演示的细节。
发明内容
本公开涉及允许多个分立设备的用户将设备定位成彼此相邻来创建一个更大的显示器的系统和方法。例如，单个图像可以在四个相邻的设备上被显示，以增加在其上观察该图像的显示器的尺寸。视频可以在多个设备上被显示。这可以在分享静态图像或者视频时增强用户体验。
附图说明
图1是根据本公开的实施例的第一和第二移动电子设备的视图；
图2是根据本公开的被包括在移动电子设备内的部件的框图；
图3A-3B是根据本公开的实施例的第一和第二移动电子设备的视图；
图4是根据本公开的实施例的不同尺寸的第一和第二移动电子设备；
图5是根据本公开的实施例的使用的多个电子设备；
图6是根据本公开的一个实施例的、示出提供通过多个移动电子设备的多个单独屏幕形成的拼接屏幕的方法的功能框图。
图7A和7B是根据本公开的一个实施例的、更详细地示出由图6 的主代理和生产者代理实施的设置以及生产者内容分配过程的流程图；以及
图8是以像素级别示出由图6中的多个消费者代理形成的拼接屏幕的像素的配置或布置的图。
具体实施方式
图1包括第一移动电子设备100和第二移动电子设备102。在标准移动电子设备中，图像104存储在移动电子设备100、102中的一个上，并且仅在存储该图像的一个移动设备上是可显示的，使得当仅在存储该图像的一个移动设备的屏幕上显示时，图像104相对较小。如果两个用户一起观察该图像时，则以更大的格式(例如，在两个屏幕上)观察图像104可以是有优势的。本公开为用户提供了在观察图像104时的这种灵活性。
本公开还涉及在多个显示器上显示单个图像或者视频，其中的显示器相互之间进行关于定向以及屏幕分辨率的通信并且确定如何在多个显示器上划分并且显示图像或视频。例如，显示器可以是“智能监视器”或者“智能屏幕”，其中每个显示器包括定向传感器(例如，加速度计或陀螺仪)以及用以传输和交换各自定向和显示器性质的无线通信电路。
多个显示器，无论是相邻蜂窝手机上的多个屏幕还是布置在墙上的多个监视器，图像104可以以若干个部分被显示，例如，在图1中，其在第一移动电子设备100上示出了第一部分104a并且在第二移动电子设备102上示出了第二部分104b。本文所用的术语“移动电子设备”是指可以在不同位置之间容易地进行传递的任何类型的便携式电子设备。
首先，移动电子设备可以包括蜂窝手机、移动手机、具有或者不具有物理键盘的膝上型计算机、平板计算机、或者是具有显示器的任何电子设备，例如监视器或者屏幕。许多当前的移动电子设备通过限制移动电子设备四周边缘的结构框架来最大化显示区域。例如，在图 1中，移动电子设备100、102具有扩展到框架112的边缘110的显示区域108。这种显示区域可以被称为无边框设计。无论在移动电子设备边缘处存在多大的框架，本公开都提供了通过利用多个相邻的显示器来增加显示区域。
每个移动电子设备都包括提供移动电子设备的功能的多个电子芯片或者部件。例如，如图2所示，电子设备200包括处理器202。该处理器可以是单个的处理器或者是包括多个处理器，例如，中央处理器、图形处理单元、微处理器、或者单独或一起提供电子设备的功能的其他任何类型的集成电路或者专用集成电路。
电子设备200还包括多个传感器204，其包括陀螺仪206、加速度计208、麦克风210、图像传感器212(例如，相机)、以及飞行时间(TOF)(范围检测传感器)中的一个或多个。这些传感器中的每一个与处理器进行通信。
电子设备200包括无线通信模块216以及蜂窝通信模块218。一些无线通信选项包括蓝牙、WIFI、以及近场通信(NFC)。设备200 包括存储器220和电源管理模块222。
显示模块224包括触摸屏或者其他屏幕，其中的触摸屏或者其他屏幕向用户提供可视化交互界面以及任何其他图形用户界面，用户可以在可视化交互界面上查看文档、图像(静态或者视频)。显示器可以能够或者被配置为接收来自用户的手指或者触摸笔的输入。
移动电子设备包括用以操作移动电子设备的合适的软件、硬件、以及固件。软件包括通过使用移动设备中的各种传感器接收关于环境的数据和来自用户的输入的指令以及算法。每个移动设备可以具有嵌入在移动设备中的操作系统，该操作系统提供了使用与移动电子设备内的传感器以及其他部件集成的应用(app)的功能。
图3A是具有框架302的第一移动手机300的示例。屏幕304被定位在框架302内并且是交互式触摸显示屏幕，其中用户可以使用其手指或者触摸笔进行选择或者与屏幕进行交互。框架具有与第二端 308相对的第一端306。第一端306包括穿过框架的开口，该开口暴露内部印刷电路板的容纳了各种电子部件(诸如相对于图2所描述的那些电子部件)的部分。扬声器310居中地定位在第一端306。相机或者图像传感器模块312被定位在扬声器310的一侧，并且飞行时间传感器314被定位到扬声器310的另一侧。
第二端308包括按键316，其可以是将显示返回到主页界面或者默认界面的“主页”按键。在第二端308上存在其他交互式表面318、 320。麦克风322被定位成通过第二端的外部表面来接收声音。
移动手机300的框架的第一侧324包括按键326。框架的第二侧 328包括两个按键：330、332，其可以是音量控制按键。与第一端和第二端的表面区域相比，第一侧和第二侧具有少量的框架区域。这些电子设备的边缘可以被称为边框。
图3A被示出为具有直升机尾部的一部分的图像330，其尾部上显示有呼号N407VS。用户可以选择与另一个用户共享该图像。图3B 包括两部手机，来自图3A的第一手机300以及第二手机332。在图 3B中的第一手机和第二手机是相同类型的手机，即，由相同的制造商制造并且具有相同的屏幕尺寸和内部部件。注意，可以使用不同屏幕尺寸和不同制造商的手机来实施本公开，这将在以下进行详细描述。
在图3B中，来自图3A中的第一手机300的图像329的第一部分 330A被显示在第一手机300上并且第二部分330B被显示在第二手机 332上。通过使用两部相邻的手机加倍了屏幕或者显示器尺寸。下文中详细描述用于在两部手机或者在两部以上手机之间传送此过程的方法。
图4具有与第三手机350相邻的来自图3A和3B的第一手机300，其中第三手机350与第一手机300相比，具有不同的屏幕或者显示器尺寸。本公开中描述的方法和系统允许第一手机与第三手机关于其各自的显示器尺寸以及定向中的每一项进行无线通信。多个手机中的一部手机是在两个或更多的屏幕上显示图像的发起或者控制手机。发起手机将发送回显信息(ping)或者以其他方式来确定在发起手机的阈值距离内的手机数目。然后，发起手机将收集来自阈值距离内的手机的定向和屏幕尺寸信息，以及来自阈值距离内的每个手机的其他信息，例如，手机屏幕的长宽比、屏幕的像素密度、以及表示了指示屏幕的水平和垂直尺度的像素尺度的像素术语。然后，发起手机处理图像以确定其图像可以被分割以在多个手机上显示图像的部分的数目。
例如，在图4中，第一手机300可以是的发起手机，其具有在多于一个手机上显示来自图3A的图像329的用户指令。第一手机300 标识第三手机350在第一手机的阈值距离或者范围内。第三手机350 将显示器尺寸和定向信息传输到第一手机。显示器尺寸信息将取决于当前在手机上激活的应用以及用户指令。定向信息由被包括在第三手机350中的陀螺仪和加速度计收集以及输出。可以使用蓝牙、近场通信、或者其他无线传输技术来传送此信息。
在第一手机收集关于第一手机和第三手机的不同操作参数的信息时，作为发起手机的第一手机确定了第三手机的屏幕尺寸小于第一手机的屏幕尺寸。第一手机的处理器或者操作系统确定图像329的第一部分352用于在第一手机上显示以及图像329的第二部分354用于在第二手机350上显示。发起手机，此例中的第一手机，随后将图像信息传输到第二手机。该信息可以是将要被显示的图像的一部分或者可以是具有将使第三手机能够处理以及显示图像的正确部分的信息的整个图像。
第一手机300调整图像的第一部分352的尺寸，使得第一尺度356 和第二尺度358对应于第三手机350的第一尺度360和第二尺度362。
图5是多个设备的额外配置，其中多个设备一起可以在多个设备上显示单个图像或者视频。多个设备包括第一手机500、第二手机502、第三手机504、以及第四手机506。多个手机被布置成第二手机502 定位在第一手机500的右侧。第三手机504被定位在第一手机500的底侧。第四手机506被定位在第二手机502的底侧并且在第三手机504 的右侧。设想了其他布置，并且可以包括以线性方式对准的多个设备，这可以有益于观看详细的全景照片。另外，代替四个手机，多个设备可以是多个平板计算机或者是手机、平板计算机，以及其他电子设备的混合。
由处于共享显示操作模式的设备确定多个设备的布置。手机可以自动标识其接近或者物理地触碰到另一个支持显示的设备。这样，共享显示操作模式可以被启用，以在满足多个共享显示参数时自动激活共享显示。备选地，共享显示操作模式可以是由用户激活的特征，例如在图像查看应用中或者在设备的设置部分中。
共享显示参数可以包括用户激活的共享屏幕设置，或者其可以被自动激活(例如，当两个能够共享屏幕的设备被定位在彼此邻近处时)。例如，基于从各自的多个传感器手机的信息，每个移动电子设备可以确定该移动电子设备是否定位在桌子上而不是被保持在用户的手中或者在用户的口袋内。如果移动电子设备确定该移动电子设备处于稳定的阈值内，即，不在口袋或者包中，则满足了第一共享显示参数。稳定阈值可以包括移动范围，该移动范围包括以相对固定的位置保持在用户手中。
被启用的移动电子设备可以周期性的发送回显信息或者轮询周围的设备以查看其是否被启用以用于共享显示设置。如果两个或更多个电子设备确定其彼此接近(例如，彼此在一英寸以内)，并且被保持在稳定阈值以内，则其可以激活共享图像模式。这可以包括操作认证协议，该认证协议可以交换定向和显示分辨率信息，以准备在多个屏幕上显示图像。
一旦设备处于共享显示操作模式，则设备被激活以检测具有启用的共享显示操作模式的另一设备的存在。此模式可以被认为是“屏幕组合模式”。
在一个实施例中，由用户提供每个设备的位置。例如，在第一手机500上，用户可以点击右下角，例如，在X 508上。对于第二手机 502，用户点击屏幕的左下角，例如X 510。对于第三手机504，屏幕的右上角被触摸，例如X 512。类似地，对于第四手机506，屏幕的左上角被触摸，例如X 514。此功能可以由被包括在大多数现代智能手机中的触摸屏幕传感器来提供，使得可以标识触摸的一般位置，这可以指示四个手机的定向。
备选地，每个手机的加速度计可以检测屏幕上的点击或者相应手机的框架。加速度计可以确定来自用户的点击的位置，例如与左下角相比的右上角。
加速度计、陀螺仪、麦克风以及其他传感器的组合可以备选地检测手机到手机的碰触，即，代替用户点击屏幕或者框架的一部分来标识每个手机相对于彼此的定向，手机可以检测其已经被定位成彼此相邻。在处理器或者相关的专用集成电路中处理的加速度计和陀螺仪算法可以确定接触是沿着设备的与屏幕相对的表面产生的。
例如，在图5中，在第一手机500和第二手机502之间的边界或者交互表面516可以由在每个手机中的各自的加速度计或者陀螺仪来标识。结合麦克风，麦克风可以检测并且确定彼此接触(与将手机设置在表面上相比)的金属框架或者壳体之间的差异。例如，沿着第二手机502的左手侧检测到的碰触结合由麦克风检测到的金属或者壳体到壳体类型声音的读取可以向手机指示其位于另一手机的相邻位置。结合共享显示操作模式的该指示将为手机提供足够的信息以继续下一阶段的分析，以沿着此路径来创建使用相邻手机的更大的显示器。
将要在更大的显示器中使用的每个手机相对于其他手机的定向和相对位置将被至少传送到发起手机。备选地，手机中的每一个可以与其他手机进行关于其各自定向的通信。另外，手机将传送其各自具有的参数，例如屏幕分辨率、屏幕区域、处理器信息，例如任何相关的图像处理和显示参数，以及无线通信协议参数。
一旦图像被选择以共享，则图像被从发起设备传送到其他参与的设备。发起设备可以从其他参与设备收集全部数据，并且可以标识将在每个设备上显示的图像部分。备选地，设备中的每一个可以收集全部信息并且基于每个设备的参数来确定显示图像的哪个部分。
每个电子设备具有图形用户界面框架以及显示驱动器，图形用户界面以及显示驱动器都具有操作参数。如果所分享图像是视频，则每个电子设备将包括可以被使用的帧缓存。操作参数被传送到相邻的其他设备以共享显示器。每个设备将具有存储器，该存储器存储了或者将访问设置用于从多个较小的显示器建立更大显示器的认证协议的指令。
如上所述，图像可以是静态图像或者可以是视频。如果是视频被选择，则发起手机可以是输出任何声音的唯一手机或者设备。对于视频，设备将传送帧速率，使得每个设备以适当的速率进行从每个图像的转换，以确保视频在各种设备上平滑地显示。
鉴于每个设备可以是由不同实体制造的不同类型的手机或者平板计算机，因此操作系统可以是不同的，使得每个设备具有不同的平台以及操作参数。一旦完成适当的认证，例如确认全部的相邻设备被启用屏幕共享模式，则各种设备的平台交换屏幕信息(例如，尺寸、定向、相对位置和分辨率)。尺寸和相对位置被用于计算更大的屏幕并且确定将在哪个设备上显示图像的哪个部分。借助每个设备的尺寸、定向、相对位置、以及分辨率，更大的组合屏幕的尺度和分辨率被计算出。
每个设备的帧缓存计算该设备上的更大的屏幕的相关部分。如果使用各个无边框(屏幕周围的边框非常小)或者缩小边框的设备来实现组合，当使用更大的显示器时，这种解决方案将提供改善的用户体验。
在本公开的进一步实施例中，在图1-5的实施例中的发起设备通过无线网络进行通信(例如，Wi-Fi网络)，以标识发起设备可以与之通信来在多个设备上显示图像的设备。无论设备与发起设备之间的距离如何，耦合到无线网络的手机或者其他移动电子设备是在这些实施例中与发起设备一起操作以在多个设备上显示图像的候选设备。当然，在某些时候必须使所标识的设备在物理上彼此接近并且与发起设备接近，以在全部设备上显示图像。
图6是根据本公开的一个实施例的、示出提供由多个移动电子设备的多个单独屏幕形成的拼接屏幕600的方法的功能框图。在图6的实施例中，多个移动电子设备实现该方法，其中每个移动电子设备被指定为主代理602、生产者代理604或者消费者代理606a-f中的一个，这取决于移动电子设备在实现该方法时提供的功能。多个移动电子设备中的每一个可以是任何合适类型的这种移动电子设备，例如，智能手机、平板计算机等。该方法利用一起形成拼接屏幕600的一个主代理602、一个生产者代理604(其可以是与主代理相同的移动电子设备)、以及多个消费者代理606a-f。多个消费者代理606a-f中的每一个显示整个拼接屏幕600的一部分，其中由特定消费者代理显示的整个拼接屏幕的一部分在以下描述中被称为子屏幕或者子拼接。主代理 602、生产者代理603以及消费者代理606中的每一个可以被认为是具有对应功能的对应移动电子设备，或者是对应的电路，其可以包括移动电子设备的硬件、软件、固件或者其任何组合。
图6中的虚线表示在方法的设置部分过程期间主代理602、生产者代理604以及消费者代理606a-f之间的通信，而实线610表示在该方法的生产者内容分配过程部分期间生产者代理和消费者代理之间的通信，其将在下面更详细的描述。代理602、604、606在合适的无线网络(例如，Wi-Fi网络)上彼此通信，并且利用合适的协议来实现该方法的设置过程以及生产者内容分配过程部分。
在图6的示例中，拼接屏幕600由六个消费者代理606a-f形成，这六个消费者代理如图所示被布置成三行以及两列。消费者代理606 a-f的这种数目和布置仅以示例的形式来提供本公开普遍实施例的理解。考虑到本说明书中提供的教导和定义，本领域技术人员将理解包括以替代方式布置以形成拼接屏幕600的更少的或者更多的消费者代理606的实施例，并且因此，尽管本文并未明确描述，但是这些实施例在本发明的范围内。另外，注意，在本说明书中，当总体引用消费者代理606a-f中任一个或者全部时，使用引用“606”；而当引用消费者代理中的特定一个时，将使用数字和字母标号两者(例如，606d)。
主代理602管理会话的全部操作，包括会话建立或者启动到会话的终止，该会话被创建以在由多个消费者代理606a-f形成的拼接屏幕 600上显示由生产者代理604提供的内容。首先，主代理602实施如上所述方法的设置过程部分，其中此设置过程部分在以下描述中被简称为设置过程或者子过程。在设置过程期间，主代理602标识或者检测包含将在拼接屏幕600上显示的内容的生产者代理604，并且还标识或者检测邻近于主代理和生产者代理的消费者代理606，该消费者代理可以因此被选择来提供拼接屏幕。这是由主代理602执行的拼接合成算法的一部分，该拼接合成算法收集关于将在拼接屏幕600上显示的生产者代理604的内容的信息，以及关于消费者代理606中的每个的屏幕尺寸、分辨率、显示速率(例如、帧每秒)等的信息。
利用从邻近的消费者代理600收集的信息以及关于从生产者代理 604收集的内容的信息，主代理602执行拼接合成算法以选择消费者代理来提供拼接屏幕，并且通知未被选择的任何邻近的消费者代理，使这些未被选择的消费者代理可以参与由邻近该消费者代理的另一个主代理提供的另一个拼接屏幕的形成。每个消费者代理606只可以参与到与对应的主代理602的单个会话中。拼接合成算法还确定被选择来形成该拼接屏幕600的消费者代理606的布置或者相对定位，以及要在每个消费者代理上显示的拼接屏幕上显示的整个图像的子拼接或者一部分，并且将此信息传送到每个消费者代理。如上所述，主代理602管理被建立来在拼接屏幕600上显示内容的会话，包括在生产代理604提供的期望内容已经被观察之后(或者由于其他原因)的会话终止，以下将对此进行更详细的描述。
如上所述，生产者代理604在设置过程期间，与主代理602进行关于将在拼接屏幕600上显示的内容的信息的通信。此内容可以对应于单个图像(例如，照片)、将在拼接屏幕600上显示的视频图像流、或者对应于正在主代理602的屏幕或显示器上显示的内容的图像(使得拼接屏幕镜像主代理的显示)。一旦主代理602已设置了会话，生产者代理604管理由生产者代理提供的内容的分配，该内容将在拼接屏幕600上显示。此内容分配包括建立生产者代理604与每个消费者代理606a-f之间的通信信道，以及定义用于向消费者代理发送内容的帧的协议以及相关的内容分配或者帧缓存参数，以供每个消费者代理显示由拼接屏幕600显示的整个图像的正确部分或者子拼接。生产者代理604还可以实施同步协议，消费者代理606a-f使用该同步协议来同步由多个消费者代理提供的整个图像的子拼接，以避免或者至少最小化在拼接屏幕600上显示的整个图像中的抖动影响，如果整个图像的全部部分或者子拼接的显示不同步，则将发生该抖动。在由生产者代理604提供的内容包括音频数据的情况下，多个消费者代理中的每一个都可以播放该内容的此音频部分。备选地，主代理602或生产者代理604可以选择全部消费者代理606的子集来播放该音频数据，而全部消费者代理用于显示内容的可视数据的对应部分。
消费者代理606中的每一个与主代理602和生产者代理606组合操作，以提供拼接屏幕600的对应部分。更具体地，每个消费者代理 606通过相关的无线网络进行通信以使其存在是已知的。这使主代理 602能够在设置过程期间检测邻近该主代理的消费者代理606。消费者代理606向主代理602提供关于消费者代理的信息，主代理随后在选择消费者代理时以及在布置消费者代理时使用该消息来形成拼接屏幕600。该消费者代理606的“布置”指每个消费者代理在拼接屏幕600中的位置，以在给定全部所选消费者代理的特性的情况下在拼接屏幕上最佳地显示期望图像，以下将进行更详细描述。每个消费者代理606从主代理602接收是否该消费者代理已被选择的指示，并且，如果被选择，则接收在形成拼接屏幕600中定义消费者代理的操作的参数。这些由每个消费者代理606从主代理602接收的参数包括将在拼接屏幕600上显示的帧缓存或者图像的部分，使得消费者代理在从生产者代理接收将被显示的帧缓存或者图像时，可以显示该图像的正确部分以形成拼接屏幕600，以下将进行更详细的描述。
如上所述，由生产者代理604提供的内容的类型可以是单个图像、视频、或者主代理602屏幕的镜像。在设置过程期间，主代理602利用内容的类型来选择和定义消费者代理606的布置，以形成拼接屏幕 600。所提供的内容的类型可以由不同内容参数来定义，包括内容的分辨率和帧速率(例如，帧每秒)。主代理602在合适的无线网络(例如，如前文提到的Wi-Fi网络)上与生产者代理604和消费者代理606 进行通信，并且使用与将显示的内容的类型相关的这些内容参数与从消费者代理接收的显示参数结合来形成或者配置拼接屏幕600。主代理602从消费者代理606接收的显示参数涉及用于显示可视化内容的消费者代理的规范，例如消费者代理的帧速率、消费者代理的屏幕尺寸、分辨率、消费者代理的像素格式(例如，色深和色彩空间 (RGB,YPbPr，YCbCr等))，以及任何其他这种有关参数。这种在主代理602和生产者代理604和消费者代理606之间的通过无线网络的参数的通信可以使用合适的现有数据交换协议来完成，例如，如本领域技术人员所理解的JavaScript ObjectNotation(JSON)或者Google’s Protocol Buffers。
图7A和7B是根据本公开的实施例的、更详细地示出由图6的主代理602和生产者代理604实施的设置过程以及生产者内容分配过程的流程图。在图7A中，该过程开始于步骤700，并且进行到步骤702，在步骤702中每个消费者代理606声明其耦合到无线网络，其中主代理602和生产者代理604也耦合到该无线网络。每个消费者代理606 的“声明”指示该消费者代理被耦合到或者存在于该无线网络上，并且在会话中可以被使用以形成拼接屏幕600(图6)。由每个候选消费者代理606提供的声明还包括提供消费者代理的屏幕或者显示器的规范的消费者代理显示参数。在此实施例中，消费者代理606通过无线网络以合适数据分组的形式向主代理602提供对应的声明，该合适的数据分组通过无线网络发送并且由主代理602接收。在其他实施例中，耦合到无线网络的消费者代理606可以首先侦听来自主代理602的传输请求，其请求可用的消费者代理进行响应，并且此后响应于接收到这种传输请求而宣告其存在。
过程从步骤702进行至步骤704，并且主代理602创建了已经声明其存在于无线网络上并且可用于会话来形成拼接屏幕600的所有可用的消费者代理606的注册表。在本说明书中，这些可用的消费者代理606可以被称为候选消费者代理。作为候选消费者代理606的注册的一部分，主代理602还从每个候选消费者代理接收提供了消费者代理的屏幕或者显示器的规范的显示参数。主代理602还在注册表中存储每个候选消费者代理606的这些显示参数，其中该显示参数包括消费者代理的帧速率、消费者代理的屏幕尺寸、以及消费者代理的像素格式(例如，如前文所述的色深和色彩空间)。在步骤704中已经创建该注册表之后，过程进行到步骤706。
在步骤706中，主代理602响应于从候选消费者代理606接收到声明以及在步骤704中生成注册表，生成或者发布正在被配置以形成拼接屏幕600的会话的会话号。然后，该过程进行到步骤708，并且主代理602向在注册表中的候选消费者代理的每一个分配唯一的标识符(ID)。然后，过程从步骤708进行至步骤710，并且主代理602 与生产者代理604(图6)进行通信，以获得由生产者代理604提供并且在拼接屏幕600上显示的内容的内容参数。这些内容参数包括定义了将由消费者代理606提供的内容的特性的参数，例如如前文所述将提供的内容的分辨率和帧速率。在生产者代理604位于与主代理 602分离的移动电子设备上的情况下，步骤710包括标识该生产者代理并且与生产者代理通信以获得内容参数。
一旦主代理602在步骤710中已从生产者代理604获得内容参数，则过程进行至步骤712，并且主代理执行拼接合成算法以配置拼接屏幕600，并且确定内容分配或者帧缓存的参数，该内容分配或者帧缓存的参数控制由生产者代理604所提供的内容在多个消费者代理606 上的显示以形成拼接屏幕。在配置拼接屏幕600中，主代理602在拼接屏幕600的像素和特性方面确定整体屏幕尺寸。主代理602还执行从注册表中的候选消费者代理中选择消费者代理606以及排除消费者代理606的处理。此处理的细节可以变化，但是作为过程的一部分，主代理602使用存储在注册表中的候选消费者代理606的显示参数来选择这些候选消费者代理中的一些，以将其包括在提供拼接屏幕600 的会话中。回顾前文，这些显示参数通常包括屏幕尺寸、分辨率、帧速率以及消费者代理606的屏幕的像素格式。主代理602可以基于在注册表中的消费者代理的屏幕尺寸、分辨率、帧速率、色深以及色彩空间来选择候选消费者代理606，并且相反地可以基于这些相同的参数从会话中排除消费者代理。例如，如果一个或者若干个消费者代理具有与注册表中的大多数其他消费者代理不同的帧速率或者色彩空间，则主代理602可以在形成拼接屏幕600的会话中排除这一个或者若干个消费者代理的使用。主代理602还使用消费者代理606的显示参数来确定每个消费者代理的子拼接，其中的子拼接是在由消费者代理显示的拼接屏幕600上显示的整个图像的一部分。总之，在步骤712 中，主代理602执行了拼接合成算法，以通过确定要被提供的拼接屏幕600的尺寸和特性来配置拼接屏幕600，从在注册表中的候选消费者代理之中选择消费者代理606，定义拼接映射以指示每个选择的消费者代理将显示的整个图像的部分(即，将被显示的子拼接)，以及向每个选择的消费者代理分配子拼接坐标来定义消费者代理在拼接屏幕(由全部选择的消费者代理形成)内的物理位置。
过程从步骤712进行至步骤714，并且生成包含的或者选择的消费者代理606的列表，以及随后进行到步骤716，并且生成排除的或者未选择的消费者代理的列表。过程从步骤716进行至步骤718，并且主代理602终止与未选择的消费者代理606的当前会话。这些未选择的消费者代理606，在步骤718中与主代理的当前会话终止之后，随后可以参与到与耦合到该无线网络的其他主代理的其他会话中。在步骤718之后，过程随后进行至步骤720，并且主代理602向生产者代理604发送由拼接合成算法计算的内容分配或者帧缓存参数。此后，生产者代理604将在向选择的消费者代理606分配内容时，使用这些内容分配或者帧缓存参数以形成拼接屏幕600。更具体地，在对于由每个选择的消费者代理606正确显示内容的部分是必要的情况下，生产者代理604将基于帧缓存参数来编码将在拼接屏幕600上显示的内容。
在步骤720之后，过程进行至步骤722，并且主代理602向每个选择的消费者代理606发送包含子拼接坐标的内容分配参数。这些内容分配参数针对每个所选消费者代理606标识在拼接屏幕600上显示的整个图像将由该消费者代理显示的部分。每个选择的消费者代理 606的内容分配参数将在下文中参考图8进行详细描述。然后，过程进行至步骤724，并且每个选择的消费者代理606确认从主代理602 接收到内容分配参数，指示消费者代理准备好开始显示从生产者代理 604接收的内容的正确部分。
过程从步骤724进行至步骤726，并且执行过程以物理地布置选择的消费者代理606以形成图6的拼接屏幕600。此物理布置当然取决于注册表中候选消费者代理606的数目(步骤704)以及这些候选消费者代理的特性。在图6的示例中，主代理602选择六个消费者代理606a-f以形成拼接屏幕600。所选择的消费者代理606a-f中的每一个必须相对于其他所选择消费者代理物理地定位，使得当每个消费者代理显示对应的内容时，拼接屏幕600的正确的整个图像被形成。如上所述，由主代理602针对每个所选择的消费者代理606a-f计算的子拼接坐标针对每个消费者代理606标识在拼接屏幕600上显示的整个图像中将由该消费者代理显示的部分，并且还指示消费者代理相对于形成拼接屏幕的其他所选择的消费者代理的相对物理位置。
每个所选择的消费者代理606的这些子拼接坐标也在步骤726中执行的过程中使用，其中所选择的消费者代理被物理地布置成彼此相邻以形成拼接屏幕600。在步骤726中完成这一点的精确方式在本公开的不同实施例中有所变化，但是将在代理602-606的一个或多个用户的协助下达成。例如，在一个实施例中，在步骤722中从主代理602 接收到子拼接坐标时，每个选择的消费者代理606在该消费者代理的屏幕上提供指示消费者代理在拼接屏幕600内的正确位置的可视化指示符。针对消费者代理606的拥有者或者用户的指令也可以显示在每个消费者代理的屏幕上，告知用户如何安排消费者代理以形成拼接屏幕。在图6的示例中，在消费者代理606的屏幕上的可视化指示符可以仅仅是数字1-6，其中也在每个消费者代理的屏幕上提供指令来布置消费者代理，以在三行消费者代理中按顺序显示1-6，其中每行有两个消费者代理，并且其中数字1在拼接屏幕600的左下角，并且数字6在拼接屏幕600的右上角。备选地，消费者代理606中的每一个可以显示配置图像的一部分，其中消费者代理的用户然后正确地布置消费者代理，使得配置图像正确地显示在拼接屏幕600上，并且以此种方式正确地将消费者代理中的每一个定位在拼接屏幕内。在本公开的其他实施例中，在步骤726中执行其他过程，以通过将消费者代理相对于彼此物理地布置以正确形成拼接屏幕600来正确配置消费者代理606。
在步骤726中已经正确地定位或者布置所选择消费者代理以形成拼接屏幕600之后，过程进行至步骤728，在步骤728中生产者代理 604向所选择的消费者代理606提供内容。在步骤728中，生产者代理604管理通过无线网络到每个所选择消费者代理606的、将在拼接屏幕600上显示的内容的流传输。这包括通过无线网络使用合适的协议建立通信信道，以向所选择的消费者代理606传送内容。在本公开的实施例中，生产者代理604使用合适的媒体服务器流传输协议，例如实时流传输协议(RTSP)或者实时传输协议(RTP)和RTP控制协议(RTCP)，来向消费者代理606流传输将在拼接屏幕600上显示的内容。如上所述，如果对于在所选择的消费者代理606中的每一个上进行正确显示是必须的，则生产者代理604还对流传输的内容进行编码，其中该编码被确定为在步骤712中由主代理602执行的拼接合成算法的一部分。生产者代理604的这种编码还管理正在被提供的初始内容与拼接屏幕600之间的尺寸以及形状变化，以保持由生产者代理提供的初始内容与在拼接屏幕600上该内容的显示之间的形状比例。在流传输中，通过无线网络向消费者代理606提供除该内容之外的其他方式包括提供音频数据，其中该内容例如是视频。
在步骤728之后，过程进行至步骤730，并且接收了由生产者代理604流传输或者以其他方式提供的内容的所选消费者代理606共同呈现所接收的内容，从而在拼接屏幕600上提供期望的一个或者多个图像。在一个实施例中，每个消费者代理606包括媒体服务器客户端，该媒体服务器客户端从生产者代理604接收将在拼接屏幕600上显示的全部或者整个图像，并且此后基于消费者代理的子拼接坐标来呈现分配给该消费者代理的整个图像的正确部分。一旦由生产者代理604 提供的期望内容已经在拼接屏幕600上进行呈现，则过程进行至步骤 732，并且主代理602与生产者代理和消费者代理进行通信以终止会话。步骤732中的这个确定可以涉及所选择消费者代理606中的每一个在消费者代理的显示器上提供了某种可视化指示符，该可视化指示符向形成了拼接屏幕600的所选择的消费者代理的用户指示该会话已经终止，并且信号通知这样的用户中的每一个：他或者她应当取回其消费者代理。过程从步骤732进行至步骤734并且终止。
图8是以像素级别示出由图6中的多个消费者代理606a-f形成的拼接屏幕600的像素的配置或者布置的图。在以下讨论中，消费者代理606a-f可以替代地被称为子拼接或者子拼接屏幕606a-f以简化图8 的描述。拼接屏幕600是由M×N个子拼接屏幕形成的，其中M是子拼接屏幕的行的数目以及N是列的数目。因此，在图8的示例中， M＝3并且N＝2。拼接屏幕600包括总共K个屏幕，其中K＝M×N。如上述讨论，拼接屏幕600在像素方面的屏幕尺寸由主代理602计算。在图8的示例中，拼接屏幕600的尺寸是X像素乘以Y像素，其中X 像素沿着与图中X轴平行的水平方向，并且Y像素沿着与Y轴平行的垂直方向。该拼接屏幕是X×Y像素的，其中在该屏幕左下角处的像素被指定为像素(0,0)。因此，在该屏幕左上角处的像素是像素 (0,Y-1)，在该屏幕右下角处的像素是像素(X-1,0)，在像素右上角处的像素是像素(X-1,Y-1)，如图8中所有这些像素所示。因此，该拼接屏幕600包括沿着屏幕的水平方向的像素0至(X-1)，以及沿着屏幕垂直方向的像素0至(Y-1)。
每个子拼接或则消费者代理606a-f的屏幕由子拼接位置坐标(j,k) 标识，其指示了拼接屏幕600中的消费者代理相对于其他消费者代理的位置。子拼接位置坐标j从0变化至(N-1)，并且子拼接位置坐标 k从0变化至(M-1)。子拼接位置坐标j指示给定的消费者代理606 在M×N拼接屏幕600中所处的列，而子拼接位置坐标k指示消费者代理在M×N拼接屏幕中所处的行。在图8的示例中，其中M＝3并且 N＝2，则j从0变化至1，并且k从0变化至2。消费者代理606a由子拼接位置坐标(0,0)标识，并且位于拼接屏幕600的左下角。消费者代理606b由子拼接位置坐标(N-1,0)标识，其在图8的示例中是 (1,0)，因为N＝2。类似地，其余消费者代理606c-f的子拼接位置坐标在图8中示出，其中通过子拼接位置坐标(N-1,M-1)标识消费者代理606f被定位在拼接屏幕600的右上角。
现在将更详细的描述与每个消费者代理660a-f相关联的像素。在图8的示例中，消费者代理606a-f的子拼接屏幕被假设成全部是相同尺寸。此子拼接屏幕尺寸由子拼接屏幕坐标(x,y)定义，其中x＝X/N 以及y＝Y/M。图8示出了与消费者代理606b相邻的子拼接屏幕的垂直高度y＝Y/M，以及与消费者代理606e相邻的子拼接屏幕的水平宽度x＝X/N。子拼接屏幕中的每一个由其在拼接屏幕600的子拼接位置坐标(j,k)以及子拼接屏幕的子拼接屏幕坐标来标识。更具体地，每个子拼接屏幕606a-f的子拼接屏幕坐标标识子拼接屏幕的相对角部 (左下和右上)中的像素。每个子拼接屏幕606a-f的这些子拼接屏幕坐标的公式由以下通式给出：
[(x*j,y*k),(x*(j+1)-1,y*(k+1)-1] (公式1)
这些子拼接位置坐标(j,k)以及子拼接屏幕坐标标识拼接屏幕600 中的每个子拼接屏幕606a-f。例如，如图8所示，子拼接屏幕606a 由子拼接位置坐标(j＝0,k＝0)以及由公式1给出的子拼接屏幕坐标 [(0,0),(x-1,y-1)]来标识。每个子拼接屏幕606a-f是x乘以y像素的，并且因此对于左下角像素指定在像素(0,0)处的子拼接屏幕606a，右上角中的像素位于(x-1,y-1)以定义子拼接屏幕坐标[(0,0),(x-1, y-1)]。类似地，对于子拼接屏幕606b，当左下角像素是像素(x,0) 并且右上角中的像素是像素(X-1,y-1)的同时，由子拼接位置坐标 (j＝1,k＝0)来标识子拼接屏幕606b。因此子拼接屏幕606b的子拼接屏幕坐标是[(x,0),(X-1,y-1)]，因为N＝2并且因此图8中所示的(N-1) x变为x。消费者代理606a-f中的每一个从生产者代理604接收将在拼接屏幕600上显示的整个图像，以及然后使用这些子拼接位置和屏幕坐标来呈现该整个图像的正确部分，使得消费者代理606a-f共同呈现整个图像。对于每个消费者代理606(图6)，子拼接位置坐标(j,k) 和由(公式1)给出的子拼接屏幕坐标对应于该消费者代理的内容分配或者帧缓存参数。每个消费者代理606使用这些内容分配或者帧缓存参数来呈现在拼接屏幕600上呈现的整个图像的正确部分。
可以组合上述各种实施例以提供进一步的实施例。本说明书中参考和/或在申请数据表中列出的全部美国专利、美国专利申请、外国专利、外国专利申请和非专利出版物通过引用将其全部内容并入本文。如果需要，可以修改实施例的各方面以采用各种专利、申请和出版物的概念来提供其他实施例。
根据以上详细描述，可以对实施例进行这些和其他改变。通常，在以下权利要求中，所使用的术语不应被解释为将权利要求限制于说明书和权利要求中公开的特定实施例，而是应该被解释为包括所有可能的实施例以及这些权利要求所赋予的等同物的全部范围。因此，权利要求不受本公开的限制。

Claims (20)

1.一种方法，包括：
基于第一移动电子设备的邻近于第二移动电子设备的第一碰触点，检测所述第二移动电子设备处于距所述第一移动电子设备的阈值距离内、或者物理地接触所述第一移动电子设备中的至少一项，所述第一移动电子设备具有第一显示器，所述第一显示器具有第一显示尺寸和第一定向；
由所述第一移动电子设备将所述第一移动电子设备的所述第一显示器的所述第一显示尺寸和所述第一定向发送至所述第二移动电子设备；
由所述第一移动电子设备从所述第二移动电子设备接收图像的第一部分的数据，所述图像的所述第一部分的所述数据被配置为以所述第一移动电子设备的所述第一显示尺寸和所述第一定向而被显示，所述图像的所述第一部分的所述数据包括所述图像的帧速率；以及
将所述图像的所述第一部分作为第一显示部分显示在所述第一显示器上，所述第一显示部分包括第一边界，所述第一边界邻近所述第二移动电子设备，并与显示在所述第二移动电子设备的第二显示器上的所述图像的第二显示部分的第二边界相匹配。
2.如权利要求1所述的方法，包括：使用包括在所述第一移动电子设备中的第一定向传感器来检测所述第一移动电子设备的所述第一定向。
3.如权利要求1所述的方法，其中检测所述第二移动电子设备处于距所述第一移动电子设备的阈值距离内、或者物理地接触所述第一移动电子设备中的至少一项包括：检测处于距所述第一移动电子设备的所述阈值距离内的附加移动电子设备。
4.如权利要求1所述的方法，其中发送所述第一定向信息包括：发送包括所述第一移动电子设备的角速度和加速度的所述第一定向信息。
5.如权利要求1所述的方法，其中从所述第二移动电子设备接收所述图像的所述第一部分的所述数据包括：接收所述图像的第二部分，所述图像的所述第二部分被配置为显示在所述第二移动电子设备的所述第二显示器上。
6.如权利要求5所述的方法，包括在所述第一移动电子设备上标识所述图像的所述第一部分。
7.一种电子设备，包括：
具有第一显示尺寸的第一显示器；
耦合至所述第一显示器的存储器；
传感器套件，包括加速度计、陀螺仪、麦克风中的一个或多个；
收发器；
耦合到所述存储器、所述传感器套件、所述收发器和所述第一显示器的处理器，其中所述处理器在运行中：
通过将至少来自所述传感器套件的第一测量与稳定阈限值相比较，确定所述电子设备是否处于稳定位置；
基于至少来自所述传感器套件的第二测量，确定所述电子设备的邻近于相邻的电子设备的第一碰触点；
检测来自所述传感器套件的第一定向信息；
响应于所述相邻的电子设备处于距所述电子设备的阈值距离内、或物理地接触所述电子设备中的至少一项，将所述第一定向信息和所述第一显示尺寸发送至所述相邻的电子设备，所述相邻的电子设备处于距所述电子设备的阈值距离内、或物理地接触所述电子设备是基于所述电子设备的所述第一碰触点以及所述相邻的电子设备的邻近于所述电子设备的第二碰触点；
从所述相邻的电子设备接收第一图像的第一部分；以及
基于所述第一定向信息和所述第一显示尺寸，在所述第一显示器上显示所述第一图像的所述第一部分。
8.如权利要求7所述的电子设备，其中所述处理器显示所述图像的所述第一部分以具有第一边界，所述第一边界与在所述相邻的电子设备的第二显示器上显示的所述第一图像的第二部分相匹配。
9.如权利要求8所述的电子设备，其中所述第一显示器的所述第一显示尺寸不同于所述相邻的电子设备的所述第二显示器的第二显示尺寸。
10.如权利要求7所述的电子设备，其中所述处理器从所述加速度计或所述陀螺仪中的至少一个获得所述第一定向信息。
11.如权利要求7所述的电子设备，其中所述处理器基于所述传感器套件的传感器读数来检测所述相邻的电子设备的存在。
12.一种系统，包括：
处理器；以及
与所述处理器电耦合的存储设备，该存储设备存储可执行指令，当所述可执行指令被所述处理器执行时，所述可执行指令使所述处理器能够实施包括以下项的动作：
基于主代理和消费者代理的运动传感器测量，确定所述主代理和所述消费者代理都处于稳定位置中；
基于所述主代理的第一音频传感器测量或第一运动传感器测量中的一个或多个，确定所述主代理上的邻近所述消费者代理的第一碰触点；
基于所述消费者代理的第二音频传感器测量或第二运动传感器测量中的一个或多个，确定所述消费者代理上的邻近所述主代理的第二碰触点；
在所述主代理处接收来自所述消费者代理的声明，所述声明指示所述消费者代理的存在，所述声明包括用于所述消费者代理的显示器的显示参数，所述显示参数包括所述消费者代理的所述显示器关于所述主代理的显示器的定向；
在所述主代理处接收来自生产者代理的内容参数，所述内容参数包括将由所述消费者代理显示的内容的特性；
基于所接收的声明和所述内容参数配置拼接屏幕，所述配置包括基于所述内容参数以及所述消费者代理的所述显示参数生成内容分配参数；以及
将所生成的内容分配参数提供给所述消费者代理。
13.如权利要求12所述的系统，其中所述动作包括：
基于所述内容分配参数，由所述消费者代理编码将被显示的所述内容；以及
向所述消费者代理提供所述内容，以用于在所述消费者代理的所述显示器上显示以形成所述拼接屏幕。
14.如权利要求13所述的系统，其中所述动作包括使所述消费者代理相对于所述主代理物理地布置以形成所述拼接屏幕。
15.如权利要求12所述的系统，其中所述显示参数包括所述消费者代理的显示器的帧速率、屏幕尺寸、分辨率以及像素格式。
16.如权利要求15所述的系统，其中所述像素格式包括所述消费者代理的所述显示器的像素的色深和色彩空间。
17.如权利要求12所述的系统，其中所述内容参数包括将由所述消费者代理显示的所述内容的分辨率以及帧速率。
18.如权利要求12所述的系统，其中所述内容分配参数包括子拼接位置坐标并且包括子拼接屏幕坐标，所述子拼接位置坐标指示所述消费者代理在所述拼接屏幕中的位置，所述子拼接屏幕坐标指示整个图像的将要显示在所述消费者代理的所述显示器上的一部分作为所述拼接屏幕的一部分。
19.如权利要求12所述的系统，其中所述系统位于所述主代理或所述消费者代理中的一个或多个中。
20.如权利要求19所述的系统，其中所述系统分布在所述主代理和所述消费者代理中。
CN202110926774.7A 2017-07-31 2018-07-26 使用多个分立显示器增加显示区域的系统、电子设备以及方法 Active CN113518147B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201762538988P 2017-07-31 2017-07-31
US62/538,988 2017-07-31
US16/045,269 US11093197B2 (en) 2017-07-31 2018-07-25 System and method to increase display area utilizing a plurality of discrete displays
US16/045,269 2018-07-25
CN201810837161.4A CN109327602B (zh) 2017-07-31 2018-07-26 使用多个分立显示器增加显示区域的系统以及方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201810837161.4A Division CN109327602B (zh) 2017-07-31 2018-07-26 使用多个分立显示器增加显示区域的系统以及方法

Publications (2)

Publication Number Publication Date
CN113518147A CN113518147A (zh) 2021-10-19
CN113518147B true CN113518147B (zh) 2022-05-27

Family

ID=65038777

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201810837161.4A Active CN109327602B (zh) 2017-07-31 2018-07-26 使用多个分立显示器增加显示区域的系统以及方法
CN202110926774.7A Active CN113518147B (zh) 2017-07-31 2018-07-26 使用多个分立显示器增加显示区域的系统、电子设备以及方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201810837161.4A Active CN109327602B (zh) 2017-07-31 2018-07-26 使用多个分立显示器增加显示区域的系统以及方法

Country Status (2)

Country Link
US (3) US11093197B2 (zh)
CN (2) CN109327602B (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10732916B2 (en) * 2017-11-28 2020-08-04 Ncr Corporation Multi-device display processing
US10880685B2 (en) * 2018-01-08 2020-12-29 Facebook, Inc. Provisioning content across multiple devices
US11528678B2 (en) * 2019-12-20 2022-12-13 EMC IP Holding Company LLC Crowdsourcing and organizing multiple devices to perform an activity
JP2021196414A (ja) * 2020-06-10 2021-12-27 富士フイルムビジネスイノベーション株式会社 情報処理システム及びプログラム
US11924397B2 (en) * 2020-07-23 2024-03-05 Samsung Electronics Co., Ltd. Generation and distribution of immersive media content from streams captured via distributed mobile devices
CN112328193A (zh) * 2020-09-09 2021-02-05 深圳Tcl新技术有限公司 多终端屏幕组合方法、装置、设备和计算机存储介质
US20230409269A1 (en) * 2020-10-27 2023-12-21 Boe Technology Group Co., Ltd. Terminal control method, apparatus, and system
CN114546309A (zh) * 2020-11-27 2022-05-27 西安诺瓦星云科技股份有限公司 拼接屏的配屏方法及配屏装置、拼接屏
CN114968147A (zh) * 2021-02-27 2022-08-30 华为技术有限公司 一种拼接显示的方法、电子设备和系统
CN115145511A (zh) * 2021-03-30 2022-10-04 华为技术有限公司 一种拼接显示的方法、电子设备和系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102725726A (zh) * 2009-11-09 2012-10-10 高通股份有限公司 多屏幕图像显示
US9086837B1 (en) * 2013-07-30 2015-07-21 Microstrategy Incorporated Collaboration sessions
CN104869662A (zh) * 2014-02-25 2015-08-26 索尼公司 利用Wi-Fi或蓝牙信号强度确定候选同伴显示设备

Family Cites Families (101)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6331840B1 (en) * 1998-03-27 2001-12-18 Kevin W. Nielson Object-drag continuity between discontinuous touch screens of a single virtual desktop
US7068294B2 (en) * 2001-03-30 2006-06-27 Koninklijke Philips Electronics N.V. One-to-one direct communication
US7364313B2 (en) * 2002-12-27 2008-04-29 Barco N.V. Multiple image projection system and method for projecting multiple selected images adjacent each other
US9229474B2 (en) * 2010-10-01 2016-01-05 Z124 Window stack modification in response to orientation change
JP2007514978A (ja) * 2003-12-19 2007-06-07 スピーチギア，インコーポレイティド 表示装置の位置の関数としての視覚データの表示
US7525511B2 (en) * 2004-07-02 2009-04-28 Microsoft Corporation System and method for determining display differences between monitors on multi-monitor computer systems
US7557774B2 (en) * 2004-08-13 2009-07-07 Microsoft Corporation Displaying visually correct pointer movements on a multi-monitor display system
CA2577906A1 (en) * 2004-08-30 2006-03-09 Mitsubishi Denki Kabushiki Kaisha Screen synchronization control apparatus
US8606949B2 (en) * 2005-04-20 2013-12-10 Jupiter Systems Interconnection mechanism for multiple data streams
US20060282855A1 (en) * 2005-05-05 2006-12-14 Digital Display Innovations, Llc Multiple remote display system
US20070070046A1 (en) * 2005-09-21 2007-03-29 Leonid Sheynblat Sensor-based touchscreen assembly, handheld portable electronic device having assembly, and method of determining touch location on a display panel
US7782274B2 (en) * 2006-06-09 2010-08-24 Cfph, Llc Folding multimedia display device
US20080216125A1 (en) * 2007-03-01 2008-09-04 Microsoft Corporation Mobile Device Collaboration
US7729204B2 (en) * 2007-06-08 2010-06-01 Microsoft Corporation Acoustic ranging
KR101483455B1 (ko) 2008-07-01 2015-01-16 삼성전자 주식회사 멀티 디스플레이 시스템 및 멀티 디스플레이 방법
US20100053151A1 (en) * 2008-09-02 2010-03-04 Samsung Electronics Co., Ltd In-line mediation for manipulating three-dimensional content on a display device
US8803816B2 (en) * 2008-09-08 2014-08-12 Qualcomm Incorporated Multi-fold mobile device with configurable interface
US8644757B2 (en) * 2008-12-04 2014-02-04 Nokia Corporation Method and system for creation and control of virtual rendering devices
US20100328447A1 (en) * 2009-06-26 2010-12-30 Sony Computer Entertainment, Inc. Configuration of display and audio parameters for computer graphics rendering system having multiple displays
JP2011197776A (ja) * 2010-03-17 2011-10-06 Sony Corp 情報処理装置、情報処理方法およびプログラム
US10019216B2 (en) * 2010-04-07 2018-07-10 Lenovo Innovations Limited (Hong Kong) Information processing terminal and control method thereof
WO2011125629A1 (ja) * 2010-04-07 2011-10-13 日本電気株式会社 情報処理端末およびその制御方法
US9213480B2 (en) * 2010-04-08 2015-12-15 Nokia Technologies Oy Method, apparatus and computer program product for joining the displays of multiple devices
US10234902B2 (en) * 2010-08-10 2019-03-19 Lepton Computing Llc Reconfigurable touch screen computing device
US20120050314A1 (en) * 2010-09-01 2012-03-01 Panavio Technology Limited Automatic split-screen controller
US9047041B2 (en) * 2010-09-15 2015-06-02 Lenovo (Singapore) Pte. Ltd. Combining multiple slate displays into a larger display matrix
US9001149B2 (en) * 2010-10-01 2015-04-07 Z124 Max mode
US20120225694A1 (en) * 2010-10-01 2012-09-06 Sanjiv Sirpal Windows position control for phone applications
US9405444B2 (en) * 2010-10-01 2016-08-02 Z124 User interface with independent drawer control
WO2012046890A1 (ko) * 2010-10-06 2012-04-12 엘지전자 주식회사 이동단말기, 디스플레이 장치 및 그 제어 방법
US9298362B2 (en) * 2011-02-11 2016-03-29 Nokia Technologies Oy Method and apparatus for sharing media in a multi-device environment
JP6015656B2 (ja) * 2011-06-21 2016-10-26 日本電気株式会社 情報処理装置、情報処理システム、サーバ、情報処理方法、および、コンピュータ・プログラム
US9342205B2 (en) * 2011-09-05 2016-05-17 Lenovo (Beijing) Co., Ltd. Display method, terminal device and multi-terminal device system
US8711091B2 (en) * 2011-10-14 2014-04-29 Lenovo (Singapore) Pte. Ltd. Automatic logical position adjustment of multiple screens
US9098133B2 (en) * 2011-12-30 2015-08-04 Linkedin Corporation Mobile device pairing
US9131333B2 (en) * 2011-12-30 2015-09-08 Linkedin Corporation Systems and methods for mobile device pairing
KR101881925B1 (ko) * 2012-01-06 2018-07-26 삼성전자주식회사 복수의 휴대 단말들을 이용하여 멀티 비전 시스템을 구축하는 방법 및 이를 위한 장치
US8786517B2 (en) * 2012-02-21 2014-07-22 Blackberry Limited System and method for displaying a user interface across multiple electronic devices
US9104367B2 (en) * 2012-03-02 2015-08-11 Realtek Semiconductor Corp. Multimedia interaction system and related computer program product capable of avoiding unexpected interaction behavior
US9105221B2 (en) * 2012-03-02 2015-08-11 Realtek Semiconductor Corp. Multimedia interaction system and related computer program product capable of blocking multimedia interaction commands that against interactive rules
US9077843B2 (en) * 2012-04-06 2015-07-07 Realtek Semiconductor Corp. Video playback system and related computer program product for jointly displaying video with multiple screens
US20130297604A1 (en) * 2012-05-01 2013-11-07 Research In Motion Limited Electronic device and method for classification of communication data objects
US9052866B2 (en) * 2012-05-10 2015-06-09 Htc Corporation Method, apparatus and computer-readable medium for image registration and display
WO2013175770A1 (ja) * 2012-05-25 2013-11-28 パナソニック株式会社 情報処理装置、情報処理方法、および情報処理プログラム
US9092184B2 (en) * 2012-06-22 2015-07-28 Harborside Press, LLC Interactive synchronized multi-screen display
JP5768777B2 (ja) * 2012-07-27 2015-08-26 コニカミノルタ株式会社 手書き入力システム、入力内容管理サーバ、入力内容管理プログラム
US20140095600A1 (en) * 2012-09-28 2014-04-03 Bradford H. Needham Multiple-device screen capture
KR102063952B1 (ko) * 2012-10-10 2020-01-08 삼성전자주식회사 멀티 디스플레이 장치 및 멀티 디스플레이 방법
KR101951228B1 (ko) * 2012-10-10 2019-02-22 삼성전자주식회사 멀티 디스플레이 장치 및 그 촬상 방법
WO2014064824A1 (ja) * 2012-10-26 2014-05-01 Ｎｅｃディスプレイソリューションズ株式会社 識別子制御装置、識別子制御システム、多画面表示システム、識別子制御方法及びプログラム
KR102028336B1 (ko) * 2012-12-03 2019-10-04 삼성전자주식회사 복수 스크린을 표시하는 디스플레이 장치 및 그 제어 방법
US9190017B2 (en) * 2013-01-02 2015-11-17 International Business Machines Corporation Proportional pointer transition between multiple display devices
US9197734B2 (en) * 2013-01-04 2015-11-24 Samsung Electronics Co., Ltd. Apparatus and method for sharing screens from multiple mobile devices
US9600220B2 (en) 2013-02-18 2017-03-21 Disney Enterprises, Inc. Multi-device display configuration
EP2966556B1 (en) * 2013-03-05 2019-10-09 NEC Corporation Mobile terminal apparatus, image generation method, and non-transitory computer-readable medium storing program
US9858031B2 (en) * 2013-03-11 2018-01-02 International Business Machines Corporation Colony desktop hive display: creating an extended desktop display from multiple mobile devices using near-field or other networking
US9823890B1 (en) * 2013-03-14 2017-11-21 Amazon Technologies, Inc. Modifiable bezel for media device
US9417835B2 (en) * 2013-05-10 2016-08-16 Google Inc. Multiplayer game for display across multiple devices
US9727298B2 (en) * 2013-05-28 2017-08-08 Sony Corporation Device and method for allocating data based on an arrangement of elements in an image
US9058763B2 (en) * 2013-07-01 2015-06-16 Symbol Technologies, Llc System and method for automatic aggregation of multiple physical display devices into a single logical display surface
KR102288238B1 (ko) * 2013-09-03 2021-08-09 가부시키가이샤 한도오따이 에네루기 켄큐쇼 발광 장치
JP6255826B2 (ja) * 2013-09-13 2018-01-10 株式会社リコー システム、情報処理装置、画像表示方法、プログラム、記憶媒体
US9899002B2 (en) * 2013-09-27 2018-02-20 Lenovo (Bejing) Limited Information processing methods for displaying parts of an object on multiple electronic devices
US9727134B2 (en) * 2013-10-29 2017-08-08 Dell Products, Lp System and method for display power management for dual screen display device
KR102122476B1 (ko) * 2014-01-08 2020-06-12 삼성전자주식회사 화면의 회전을 컨트롤할 수 있는 전자 장치 및 방법
KR102358935B1 (ko) * 2014-02-12 2022-02-04 가부시키가이샤 한도오따이 에네루기 켄큐쇼 전자 기기
JP6500890B2 (ja) * 2014-03-03 2019-04-17 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
KR20150126193A (ko) * 2014-05-02 2015-11-11 삼성전자주식회사 복수의 디스플레이를 이용한 컨텐츠 출력 방법 및 그 장치
US10235120B2 (en) * 2014-08-04 2019-03-19 Samsung Electronics Co., Ltd. Display apparatus, display system, and controlling method thereof
CN104144302A (zh) 2014-08-19 2014-11-12 深圳市晶日盛科技有限公司 一种异形拼接液晶显示器的显示处理系统和方法
US9557832B2 (en) * 2014-08-25 2017-01-31 Getac Technology Corporation Cursor control apparatus and cursor control method thereof
US9880799B1 (en) * 2014-08-26 2018-01-30 Sprint Communications Company L.P. Extendable display screens of electronic devices
WO2016052778A1 (ko) * 2014-10-01 2016-04-07 엘지전자 주식회사 포터블 디바이스 및 그 제어 방법
US10157032B2 (en) * 2014-12-04 2018-12-18 Henge Docks Llc Method for logically positioning multiple display screens
KR102372443B1 (ko) * 2015-02-02 2022-03-10 삼성전자주식회사 다중 디스플레이 기반 전자 장치
KR102252661B1 (ko) * 2015-03-12 2021-05-18 한화테크윈 주식회사 비디오 월 보안 시스템
US10078485B2 (en) * 2015-03-13 2018-09-18 Kabushiki Kaisha Toshiba Display apparatus and display system
WO2016147373A1 (ja) * 2015-03-19 2016-09-22 富士通株式会社 表示方法、情報処理装置、表示制御装置及びプログラム
TWI536363B (zh) * 2015-03-31 2016-06-01 建碁股份有限公司 拼接式顯示系統及其方法
JP6275075B2 (ja) * 2015-04-02 2018-02-07 キヤノン株式会社 投影装置、制御方法及びプログラム
CN106055221B (zh) * 2015-04-22 2019-05-31 昆山纬绩资通有限公司 多电子装置间屏幕画面互动的方法及电子系统
CN106303651A (zh) * 2015-05-15 2017-01-04 中强光电股份有限公司 显示系统及显示系统的显示方法
KR20170051950A (ko) * 2015-11-03 2017-05-12 삼성전자주식회사 전자 장치, 전자 장치의 디스플레이 제어 방법
US10129500B2 (en) * 2015-11-06 2018-11-13 Panasonic Intellectual Property Management Co., Ltd. Multi-display apparatus
US10061552B2 (en) * 2015-11-25 2018-08-28 International Business Machines Corporation Identifying the positioning in a multiple display grid
US10409542B2 (en) * 2016-01-04 2019-09-10 Rex HUANG Forming a larger display using multiple smaller displays
KR102418003B1 (ko) * 2016-01-04 2022-07-07 삼성전자주식회사 복수의 디스플레이 장치들을 이용한 콘텐츠의 디스플레이
KR20170087350A (ko) * 2016-01-20 2017-07-28 삼성전자주식회사 전자 장치 및 전자 장치의 동작 방법
US10620786B2 (en) * 2016-03-07 2020-04-14 Intel Corporation Technologies for event notification interface management
US11310298B2 (en) * 2016-03-07 2022-04-19 Intel Corporation Technologies for providing hints usable to adjust properties of digital media
US10209821B2 (en) * 2016-04-05 2019-02-19 Google Llc Computing devices having swiping interfaces and methods of operating the same
JP2018010109A (ja) * 2016-07-13 2018-01-18 キヤノン株式会社 表示装置、表示制御方法及び表示システム
JP6866591B2 (ja) * 2016-08-31 2021-04-28 セイコーエプソン株式会社 表示システム、表示システムの制御方法、及びプログラム
JP6598753B2 (ja) * 2016-10-07 2019-10-30 任天堂株式会社 ゲームシステム
JP1586458S (zh) * 2016-10-11 2017-12-18
US20190196707A1 (en) * 2016-12-13 2019-06-27 Nanoport Technology Inc. User interface for cross-device requests
US10133533B1 (en) * 2016-12-16 2018-11-20 Google Llc Automatic detection and correction of misalignment between display devices
US10198044B2 (en) * 2017-01-20 2019-02-05 Dell Products L.P. Flexible information handling system display user interface configuration and provisioning
US10635255B2 (en) * 2017-04-18 2020-04-28 Google Llc Electronic device response to force-sensitive interface
KR20180134215A (ko) * 2017-06-08 2018-12-18 한국전자통신연구원 스마트 사이니지를 이용한 컨텐츠 재생 방법 및 시스템
US20190034147A1 (en) * 2017-07-31 2019-01-31 Intel Corporation Methods and apparatus to detect user-facing screens of multi-screen devices

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102725726A (zh) * 2009-11-09 2012-10-10 高通股份有限公司 多屏幕图像显示
US9086837B1 (en) * 2013-07-30 2015-07-21 Microstrategy Incorporated Collaboration sessions
CN104869662A (zh) * 2014-02-25 2015-08-26 索尼公司 利用Wi-Fi或蓝牙信号强度确定候选同伴显示设备

Also Published As

Publication number Publication date
CN109327602B (zh) 2021-08-20
US20230106370A1 (en) 2023-04-06
US20210349672A1 (en) 2021-11-11
US11550531B2 (en) 2023-01-10
US20190034150A1 (en) 2019-01-31
CN113518147A (zh) 2021-10-19
CN109327602A (zh) 2019-02-12
US11093197B2 (en) 2021-08-17

Similar Documents

Publication Publication Date Title
CN113518147B (zh) 使用多个分立显示器增加显示区域的系统、电子设备以及方法
US20230037595A1 (en) Image management system, image management method, and computer program product
US9586147B2 (en) Coordinating device interaction to enhance user experience
KR101607419B1 (ko) 원격 제어 장치
TW201539296A (zh) 分享內容
US20150169085A1 (en) Information processing apparatus, program, information processing method, and information processing system
KR20130081068A (ko) 복수의 휴대 단말들을 이용하여 멀티 비전 시스템을 구축하는 방법 및 이를 위한 장치
CN112118477B (zh) 虚拟礼物展示方法、装置、设备以及存储介质
KR102623181B1 (ko) 무선 디바이스 및 무선 시스템
US20230328141A1 (en) Updating an Application at a Second Device Based on Received User Input at a First Device
EP3076588A1 (en) Communication management system, communication terminal, communication system, communication control method, and carrier means
EP4033771A1 (en) Live broadcast interactive method and device
CN113609358B (zh) 内容分享方法、装置、电子设备以及存储介质
CN109618055A (zh) 一种位置共享方法及移动终端
CN110990623A (zh) 音频字幕的显示方法及装置、计算机设备及存储介质
CN114546188B (zh) 基于互动界面的互动方法、装置、设备及可读存储介质
CN110996115B (zh) 直播视频播放方法、装置、设备、存储介质和程序产品
CN112311661B (zh) 消息处理方法、装置、设备及存储介质
US20220308680A1 (en) Methods, apparatus and systems using motion of various input devices for controlling consumer devices
KR20170027135A (ko) 이동단말기 및 그 제어방법
US9305514B1 (en) Detection of relative positions of tablet computers
KR101556179B1 (ko) 이동 단말기 및 이동 단말기의 제어방법
CN114466237B (zh) 显示方法、装置、计算机设备及介质
EP4210307A1 (en) Incoming call prompting method and electronic device
WO2024031282A1 (zh) 滑动验证方法、图像生成方法、装置、设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant