WO2014122796A1 - 表示処理装置、及び表示処理方法 - Google Patents

表示処理装置、及び表示処理方法 Download PDF

Info

Publication number
WO2014122796A1
WO2014122796A1 PCT/JP2013/058738 JP2013058738W WO2014122796A1 WO 2014122796 A1 WO2014122796 A1 WO 2014122796A1 JP 2013058738 W JP2013058738 W JP 2013058738W WO 2014122796 A1 WO2014122796 A1 WO 2014122796A1
Authority
WO
WIPO (PCT)
Prior art keywords
display
data
unit
portable terminal
icon
Prior art date
Application number
PCT/JP2013/058738
Other languages
English (en)
French (fr)
Inventor
山田　雅弘
Original Assignee
株式会社東芝
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社東芝 filed Critical 株式会社東芝
Priority to US14/194,145 priority Critical patent/US20140223359A1/en
Publication of WO2014122796A1 publication Critical patent/WO2014122796A1/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/64—Details of telephonic subscriber devices file transfer between terminals

Definitions

  • Embodiments of the present invention relate to a display processing apparatus and a display processing method.
  • a display processing device provided with a user interface by a touch panel.
  • the display processing device can transmit and receive data to and from another communication terminal by receiving an operation via the user interface.
  • An embodiment of the present invention is made in view of the above, and provides a display processing device and a display processing method capable of easily recognizing a communication state performed with a communication terminal.
  • the display processing device includes a display unit, a detection unit, a communication unit, and a display control unit.
  • the display unit has a display area.
  • the detection unit detects a touch in the display area.
  • the communication unit enables transmission and reception of data with the communication terminal.
  • the display control unit displays the display information representing the data transmitted and received by the communication unit when the detection unit detects a touch of the communication terminal in the display area and the communication unit transmits and receives data to and from the communication terminal.
  • An animation display is performed in which the position where the contact of the communication terminal is detected is moved as a reference.
  • FIG. 1 is a hardware configuration diagram of the display processing apparatus according to the embodiment.
  • FIG. 2 is a view showing a modified example of displaying on a wall surface using a projector.
  • FIG. 3 is a diagram showing a data structure of an icon data table stored in the icon storage unit according to the embodiment.
  • FIG. 4 is a hardware configuration diagram of the portable terminal according to the embodiment.
  • FIG. 5 is a diagram showing an example of a user interface screen when the terminal cooperation program is executed by the display processing apparatus according to the embodiment.
  • FIG. 6 is a diagram illustrating a timing chart when the cooperation processing between the display processing device according to the embodiment and the portable terminal is performed.
  • FIG. 7 is a diagram showing a timing chart when the cooperation processing between the display processing device according to the embodiment and the portable terminal is performed.
  • FIG. 1 is a hardware configuration diagram of the display processing apparatus according to the embodiment.
  • FIG. 2 is a view showing a modified example of displaying on a wall surface using a projector.
  • FIG. 8 is a diagram showing an example of screen transition by display control of the display control unit according to the embodiment.
  • FIG. 9 is a diagram showing an example of screen transition by display control of the display control unit according to the modification.
  • FIG. 10 is a diagram showing an example of the destination of the icon movement by the display control unit according to the embodiment.
  • FIG. 11 is a diagram showing an example of an area where uploading according to the modification is started.
  • FIG. 12 is a view showing the arrangement of portable terminals when data is downloaded from the display processing apparatus according to the embodiment.
  • FIG. 13 is a diagram illustrating an example of screen transition performed in display control by the display control unit according to the embodiment.
  • FIG. 14 is a diagram showing the reduction movement of the icon by the display control unit when the portable terminal is arranged at the upper left of the icon.
  • FIG. 15 is a diagram showing the reduction movement of the icon by the display control unit when the mobile terminal is arranged at the upper right of the icon.
  • FIG. 16 is a diagram showing the reduction movement of the icon by the display control unit when the portable terminal is arranged near the center of the icon.
  • FIG. 17 is a view showing a modified example in which a download button for downloading data indicated by an icon is displayed.
  • FIG. 18 is a diagram showing an example of screen transition by display control of the display control unit according to the modification.
  • FIG. 19 is a diagram showing an example of screen transition by display control of the display control unit according to the modification.
  • FIG. 20 is a diagram showing an example of screen transition by display control of the display control unit according to the modification.
  • FIG. 21 is a diagram showing display modes of the display processing device and the portable terminal during download.
  • FIG. 22 is a flowchart illustrating a procedure of processing until communication is started with the portable terminal in the display processing device according to the embodiment.
  • FIG. 23 is a flowchart illustrating a procedure of processing of activating a program and starting communication in the display processing device according to the embodiment.
  • FIG. 24 is a flowchart illustrating a procedure of processing in a case where the touched icon is associated with a moving image in the display processing device according to the embodiment.
  • FIG. 25 is a flowchart illustrating a procedure of processing when the touched icon is related to music in the display processing device according to the embodiment.
  • FIG. 22 is a flowchart illustrating a procedure of processing until communication is started with the portable terminal in the display processing device according to the embodiment.
  • FIG. 23 is a flowchart illustrating a procedure of processing of activating a program and starting communication in the display processing device according to the embodiment.
  • FIG. 24 is
  • FIG. 26 is a flowchart illustrating a procedure of processing in the case where the touched icon is associated with a photo in the display processing device according to the embodiment.
  • FIG. 27 is a flowchart showing a procedure of causing the portable terminal to download moving image data by the display processing device according to the embodiment.
  • FIG. 28 is a flowchart illustrating a procedure of processing in a case where the touched icon is associated with upload in the display processing device according to the embodiment.
  • FIG. 29 is a flow chart showing a procedure for receiving uploading of moving image data from the portable terminal in the display processing device according to the embodiment.
  • the display processing device displays a user interface screen on a touch panel display unit.
  • the display processing device executes a predetermined process by detecting a touch on the user interface screen.
  • the portable terminal is a portable communication terminal, and can use, for example, a smartphone or the like, but may use other dedicated devices.
  • the device may be shaped like a pen.
  • FIG. 1 is a hardware configuration diagram of the display processing device 1 according to the embodiment. As shown in FIG. 1, the display processing device 1 communicates with the display unit 11, the CPU 12, the display controller unit 13, the storage unit 14, the position acquisition unit 15, the position acquisition IF (interface) unit 16 and An IF (interface) unit 17 is provided.
  • the display processing device 1 communicates with the display unit 11, the CPU 12, the display controller unit 13, the storage unit 14, the position acquisition unit 15, the position acquisition IF (interface) unit 16 and An IF (interface) unit 17 is provided.
  • the display unit 11 includes a liquid crystal display panel or the like, and displays a user interface screen for the user.
  • the CPU 12 controls the entire display processing device 1.
  • the display controller unit 13 converts information and a user interface screen on the display unit 11 into an image format and draws the image according to control from the CPU 12.
  • the position acquisition unit 15 acquires position coordinates in contact with the display unit 11.
  • the position acquisition unit 15 is configured of a touch sensor film attached to the surface of the display unit 11.
  • sensors are arranged in the X-axis direction and the Y-axis direction, and when the user touches the screen with a hand, a finger, a portable terminal or the like, the touch sensor film detects these touches.
  • the detection signal including the touched position coordinate is output to the position acquisition IF unit 16.
  • it does not restrict
  • the position acquisition IF unit 16 outputs the detection signal (including the position coordinates detected by the touch sensor film) input from the position acquisition unit 15 to the CPU 12.
  • the position acquisition unit 15 may be an optical touch sensor.
  • the optical touch sensor may be a system that detects transmission or blocking of light to detect the presence of an object, or may be a system that detects the presence of an object from a captured image using a camera.
  • a television display device equipped with a touch panel can be considered, but the present invention is not limited to such a device.
  • FIG. 2 is a view showing a modified example of displaying an image on a wall surface using the projector 210 as the display unit 11.
  • the example shown in FIG. 2 is an example provided with optical touch sensors 201 and 202 as a position acquisition unit in order to detect a position when a touch is performed on a wall surface on which an image is projected. Even with such a modification, the same effect can be realized by the same processing as that of the embodiment.
  • the position acquisition unit is not limited to the optical touch sensors 201 and 202, and an imaging camera or the like may be used, or a touch sensor film may be used as in the first embodiment.
  • the display processing device is not limited to a device having a display device internally, and any device that performs display processing may be used.
  • the display processing device may be, for example, a set top box to which a display device having a touch sensor is externally attached, a computer, or the like.
  • a display device having a touch sensor is well known as a monitor of a computer. For example, a signal from the touch sensor is input to a display processing device through a USB terminal.
  • the communication IF unit 17 is an interface that transmits and receives data to and from another terminal of the display processing device 1.
  • the communication IF unit 17 performs data transmission / reception of a portable terminal by Bluetooth (registered trademark) or a wireless LAN, Internet communication by a wireless LAN, and the like.
  • the storage unit 14 is configured of a storage medium such as a ROM and a RAM capable of storing information, and includes an icon storage unit 21, a program group 22, and a terminal cooperation program 23.
  • the icon storage unit 21 includes image data of an icon unit to be displayed on the user interface screen, a program that performs processing when the icon is touched, and position information indicating a display position in the user interface of the display unit 11 of the icon unit. , Are associated and stored.
  • FIG. 3 is a diagram showing the data structure of the icon data table 300 stored in the icon storage unit 21.
  • the icon data table 300 is used for an icon ID which is identification information of the icon, (position) coordinates which is an example of a position when displayed on the display unit 11, an icon size, and an icon.
  • the object ID specifying the image data to be stored and the program activated for each attribute of the terminal are stored in association with one record.
  • the image data of the icon specified by the object ID is drawn at the position indicated by (position) coordinates on the display unit 11 under the control of the CPU 12.
  • the icon data table 300 is an attribute 1 program in the case where the touched portable terminal is attribute 1 and an attribute in the case where the touched portable terminal is the attribute 2 as a program activated when the icon contacts.
  • Two programs and three types of finger handling programs when other than the portable terminal (for example, the user's finger) contacts are stored in association with the icon ID.
  • the program referred to here is not limited to one in which execution codes are different, and even in the same execution code, ones which pass different arguments are also expressed as different programs. For example, each includes starting a web browser but passing different URLs, or passing a different message while being a message display program.
  • the program group 22 stores programs to be executed by the display processing device 1.
  • the program group 22 includes the attribute 1 program, the attribute 2 program, the finger handling program, and the like described above.
  • the terminal cooperation program 23 includes the communication control unit 101, the detection unit 102, the determination unit 103, the activation unit 104, and the display control unit 105, and when a touch on the display unit 11 is detected, Control to start the included program.
  • the communication control unit 101 establishes communication with a portable terminal, and transmits and receives data to and from the portable terminal. For example, the communication control unit 101 receives, from the mobile terminal, attribute information indicating an attribute of the mobile terminal. Furthermore, the communication control unit 101 receives an acceleration detection signal indicating an acceleration generated in the mobile terminal and a tilt detection signal.
  • the detection unit 102 detects a touch on the display area of the display unit 11 based on the detection signal input from the position acquisition unit 15 via the position acquisition IF unit 16. Furthermore, the detection unit 102 detects position coordinates at which a touch occurs in the display area of the display unit 11.
  • the determination unit 103 specifies the portable terminal in contact with the display unit 11 based on the time when the contact is detected by the detection unit 102 and the time when the communication control unit 101 receives the acceleration detection signal. In the present embodiment, when the time difference between the time when the detection unit 102 detects a touch and the time when the communication control unit 101 receives an acceleration detection signal is within a predetermined threshold, the determination unit 103 detects the acceleration. It determines as the terminal which contacted the portable terminal of the transmission destination of a signal.
  • a threshold shall be defined by the aspect of implementation.
  • the determination unit 103 specifies a program to be activated based on the specified attribute of the portable terminal, the icon data table 300, and the position coordinates included in the acceleration detection signal. This enables the activation of a program according to the attribute of the portable terminal.
  • the activation unit 104 activates the program specified by the determination unit 103. For example, in the example shown in FIG. 3, when a touch on “Icon 1” is detected, “program 1” corresponding to attribute 1 is activated if the portable terminal corresponds to “attribute 1 program”. Note that the position coordinates of the position at which the portable terminal has touched and the position coordinates associated with the icon do not necessarily match or overlap. For example, when these position coordinates are close to a distance within a predetermined value, the activation unit 104 may activate the program corresponding to the icon.
  • the display control unit 105 is indicated by the communication control unit 101 as an icon with the portable terminal.
  • animation display is performed in the display area of the display unit 11 to move the icon based on the position at which the touch of the mobile terminal is detected.
  • FIG. 4 is a hardware configuration diagram of the portable terminal 400 of the embodiment.
  • the portable terminal 400 includes a display unit 401, a CPU 402, a display controller unit 403, a storage unit 404, a position acquisition unit 405, a position acquisition IF (interface) unit 406, and a communication IF.
  • An (interface) unit 407, an acceleration detection unit 408, and a tilt detection unit 409 are provided.
  • the display unit 401, the CPU 402, the display controller unit 403, the position acquisition unit 405, the position acquisition IF (interface) unit 406, and the communication IF (interface) unit 407 included in the portable terminal 400 include the display unit 11 included in the display processing device 1, The description is omitted as the processing similar to that of the CPU 12, the display controller unit 13, the position acquisition unit 15, the position acquisition IF (interface) unit 16, and the communication IF (interface) unit 17 is performed.
  • the display unit 401 of the portable terminal 400 according to the present embodiment is an example in which the screen size is smaller than that of the display unit 11 of the display processing device 1.
  • the acceleration detection unit 408 detects an acceleration from an acceleration sensor provided in the portable terminal 400, and outputs acceleration information to the CPU 402.
  • the tilt detection unit 409 detects the tilt from the tilt sensor provided in the portable terminal 400, and outputs tilt information to the CPU 402.
  • the storage unit 404 is configured by a storage medium such as a ROM and a RAM capable of storing information, and includes an icon storage unit 412, a program group 411, and a display cooperation program 413.
  • the icon storage unit 412 displays image data of the icon unit displayed on the user interface screen, a program that performs processing when the icon is touched, and a display of the icon unit.
  • Position information representing a display position in the user interface of the unit 401 is stored in association with each other.
  • the program group 411 stores programs capable of reproducing and displaying data (for example, moving image data, audio data, picture data) on the portable terminal 400.
  • the display cooperation program 413 includes a control unit 421, a communication control unit 422, and a display control unit 423, is resident on the portable terminal 400, and performs control to cooperate with the display processing apparatus 1.
  • control unit 421 When transmitting data to the display processing device 1, the control unit 421 sets data reproduced and displayed in the program group 411 as a transmission target.
  • the communication control unit 422 performs control to transmit attribute information indicating an attribute of the portable terminal 400 when communication with the display processing device 1 is established. Further, when performing transmission control of data to the display processing device 1, the communication control unit 422 performs transmission control of data set by the control unit 421.
  • the attribute information includes, for example, a model name of the portable terminal 400, a terminal type such as a camera or an audio player, a format of set data, tilt information detected by the tilt detection unit 409 of the portable terminal 400, terminal authentication Contains information.
  • the display control unit 423 displays an icon representing data received by the communication control unit 422 from outside the display area of the display unit 401. Display moving animations. Further, when the communication control unit 422 transmits data with the display processing device 1, the display control unit 423 displays an icon representing the data transmitted by the communication control unit 422 in the display area of the display unit 401. Animate to move out.
  • Data transmission / reception is performed between the display processing apparatus 1 and the portable terminal 400 described above.
  • transmission and reception of data are triggered by an operation on the user interface screen of the display processing device 1.
  • FIG. 5 is a diagram showing an example of a user interface screen when the terminal cooperation program 23 is executed by the display processing device 1 of the present embodiment.
  • the display unit 11 of the display processing device 1 sets three moving image data, three music data, and two photo data stored in the storage unit 14 to different types. It is displayed by an icon.
  • the display unit 11 displays an upload icon 31 serving as a trigger for uploading data selected on the portable terminal 400 side.
  • upload icon 31 serving as a trigger for uploading data selected on the portable terminal 400 side.
  • the display processing device 1 specifies the mobile terminal 400 as a linked terminal, and uploading of the set moving image data is performed. The operation performed at that time will be described.
  • FIG. 6 is a diagram showing a timing chart when cooperation processing between the display processing device 1 and the portable terminal 400 is performed.
  • the portable terminals 400 and 450 start communication by approaching the display processing device 1.
  • communication is performed by a wireless LAN.
  • the portable terminals 400 and 450 enter the same LAN as the display processing apparatus 1, they acquire an IP address between them.
  • the display processing device 1 receives attribute information indicating the terminal attribute from each of the plurality of mobile terminals 400 and 450 (steps S601 and S602).
  • the first portable terminal 400 is placed on the upload icon 31 of the display unit 11, and the second portable terminal 450 exists at a position away from the display unit 11 of the display processing device 1. It shows the state.
  • the second portable terminal 450 can communicate with the display processing device 1, it may not be in the vicinity of the display processing device 1 and, for example, may be in a bag of another person. In this case, the display processing device 1 receives the attribute information of both portable terminals of the first portable terminal 400 and the second portable terminal 450.
  • the transmission of the attribute information by the first portable terminal 400 and the second portable terminal 450 according to the present embodiment is performed every time the settings of the first portable terminal 400 and the second portable terminal 450 are changed (for example, Each time the data is changed) (eg, step S603).
  • attribute information may be transmitted periodically with the display processing apparatus 1.
  • the first portable terminal 400 and the second portable terminal 450 receive a response indicating that the attribute information has been properly acquired.
  • the first portable terminal 400 and the second portable terminal 450 may display a message indicating that the mutual operation with the display processing device 1 has become possible on the screen of the terminal.
  • the communication control unit 422 of the first mobile terminal 400 transmits the acceleration information detected by the acceleration detection unit 408 to the display processing device 1 as an acceleration detection signal. (Step S604).
  • the detection unit 102 of the display processing device 1 detects that an object is in contact with or close to a position very near the upload icon 31 based on a detection signal (including position coordinates) transmitted from the position acquisition unit 15.
  • the acceleration detection signal is transmitted. It determines with the 1st portable terminal 400 having touched display part 11, and specifies the said 1st portable terminal 400 as cooperation object.
  • the determination unit 103 refers to the icon data table 300 and specifies a program to be executed among the plurality of programs associated with the upload icon 31 based on the attribute of the first portable terminal 400.
  • the activation unit 104 activates the program specified by the determination unit 103. Then, the started program transmits / receives data to / from the first portable terminal 400 via the communication IF unit 17.
  • the detection unit 102 receives the detection signal (including the position coordinates) via the position acquisition unit 15, thereby making contact of the portable terminal 450. To detect. Furthermore, the detection unit 102 acquires position coordinates of the touch. Then, the communication control unit 101 receives an acceleration detection signal from the portable terminal 450 (step S605). Then, the determination unit 103 identifies the mobile terminal 450 that has touched the upload icon 31, and performs the same processing as when the mobile terminal 400 contacts.
  • FIG. 7 shows that the time of the acceleration detection signal received from the first portable terminal 400 and the time of the acceleration detection signal received from the second portable terminal 450 are very close to the time when the detection signal is received (predetermined threshold Figure showing the case).
  • communication is started as in the example shown in FIG. 6, and transmission of attribute information (steps S701, S702, and S703) is performed.
  • the communication control unit 101 of the display processing device 1 receives the acceleration detection signal from the first portable terminal 400 and the acceleration detection signal from the second portable terminal 450 at substantially the same timing (steps S704 and S705). It shall be.
  • the acceleration detection signal is received from the first portable terminal 400 and the second portable terminal 450 within a predetermined threshold after the detection unit 102 detects a touch.
  • the timing at which the portable terminal 400 touches the display unit 11 of the display processing device 1 substantially matches the timing at which the portable terminal 450 in a bag collides somewhere with the bag and generates an acceleration.
  • the second mobile terminal 450 performs a completely different operation from the first mobile terminal 400, and the first mobile terminal 400 displays the display processing device at a timing when the user strongly taps the screen of the second mobile terminal 450. It may coincide with the timing when the display unit 11 of 1 is touched.
  • transmission / reception of data with the identified plurality of portable terminals 400 and 450 is performed in order to suppress transmission / reception control of data to the wrong terminal. Instead, a message such as "Please touch again” may be displayed on the screen to prompt the terminal to touch again. Thereby, it is possible to realize transmission and reception of data with the portable terminal desired by the user.
  • the determination unit 103 identifies a plurality of contact terminals, it is not limited to prompting the contact again, and it is considered that both contacts, and the corresponding programs are executed for both mobile terminals. You may Thus, the operation is determined according to the embodiment.
  • FIG. 5C shows an example of the screen after the upload is completed.
  • the program activated by the activation unit 104 determines the type of the uploaded data, and the data determines any one of a moving image, music, and a photo, and is appropriate according to the determination result. Give an icon.
  • photo data an example of image data
  • an icon 32 indicating the picture data uploaded from the first portable terminal 400 is additionally displayed in the area where the picture data is arranged.
  • the display control unit 105 when uploading data from the portable terminal 400, the display control unit 105 performs animation display such that data comes out from the position where the portable terminal 400 is detected.
  • FIG. 8 is a diagram showing an example of screen transition by display control of the display control unit 105. As shown in FIG. FIG. 8A shows a state in which the portable terminal 400 is arranged on the upload icon 31. In mobile terminal 400, it is assumed that data to be uploaded has already been selected.
  • the display control unit 105 causes the icon of the data to be uploaded to be enlarged and moved 801 according to the upload status of the data based on the position at which the portable terminal 400 is detected. I do. Note that the data icon is uploaded before uploading the data body. Then, the display control unit 105 performs display control so that the icon is enlarged based on the ratio of the data for which the upload is completed.
  • the mobile terminal 400 is moved in an enlarged manner centering on the position where the mobile terminal 400 is disposed.
  • the display control unit 105 makes the enlargement movement of the icon different according to the position where the portable terminal 400 is disposed.
  • the display control unit 105 displays, within the upload icon 31, an icon 802 of the data for which the upload is completed.
  • the display control unit 105 starts an animation display of moving the icon 803 to a storage destination corresponding to the type of data indicated by the icon.
  • the display control unit 105 ends the movement of the icon 804.
  • the display control unit 105 moves the icon based on the position at which the portable terminal 400 is detected, according to the situation in which the display control unit 105 is receiving the data. I do.
  • this embodiment does not limit the aspect of animation display to the example shown in FIG.
  • FIG. 9 is a diagram showing an example of screen transition by display control of the display control unit 105 according to the modification.
  • the picture data stored in the portable terminal 400 is displayed as an icon on the screen of the portable terminal 400. Then, when the portable terminal 400 touches the display unit 11 of the display processing device 1, data transfer is started.
  • the display control unit 105 responds to the progress of data transfer, specifically to the ratio of the amount of transferred data to the total capacity of the data. Animate to change the proportion of displayed icons. In the display control unit 105, the proportion of icons displayed increases as the upload progresses.
  • the display control unit 423 of the portable terminal 400 causes the ratio of the displayed icon to change in accordance with the amount of untransferred data with respect to the total amount of data.
  • the proportion of the displayed icons decreases as the upload progresses. Thereby, the icons displayed between the display processing device 1 and the portable terminal 400 are synchronized.
  • the position of the icon displayed by the display control unit 105 is determined based on the position coordinates of the first portable terminal 400 acquired by the position acquisition unit 15.
  • the position of the icon displayed by the display control unit 105 of the display processing device 1 is matched with the position of the icon displayed by the display control unit 423 of the first mobile terminal 400.
  • the mobile terminal 400 transmits tilt information to the display processing apparatus 1 in order to synchronize the position and the like of the icon.
  • the portable terminal 400 transmits model information for specifying the portable terminal 400, screen size, resolution, and the like to the display processing apparatus 1.
  • the display processing device 1 according to the modification is output from the outer side of the portable terminal 400 specified from the received tilt information and the model information (or the size of the portable terminal 400). You may display an icon as it comes.
  • the display control unit 423 displays an icon 32 representing the data when the data transfer is completed. Thereafter, the display control unit 423 moves the icon 32 in accordance with the type of data.
  • the display control unit 423 performs the above-described display control, whereby the user can recognize the communication state of data.
  • the terminal cooperation program 23 detects that the first mobile terminal 400 contacts the display unit 11, the terminal cooperation program 23 does not immediately start data transfer, but displays a confirmation dialog on the first mobile terminal 400. The user may be asked to confirm the operation. This makes it possible to suppress data transfer contrary to the user's intention when the determination as to whether or not the first portable terminal 400 has touched is erroneous.
  • the size of the icon may be adjusted so that the size matches the icon displayed on the portable terminal 400. Good. Thereby, the icons can be displayed in the same or substantially the same size on the portable terminal 400 and the display processing device 1.
  • the display control unit 105 performs the dialog of “transfer lock” and “transfer stop” as shown in FIGS. 9A and 9B. You may display it. If the display processing device 1 does not receive the selection for the dialog, the data transfer is stopped when the portable terminal 400 is released from the display unit 11 after the transfer is started. On the other hand, when the selection of “transfer lock” is received, data transfer is continued even when the portable terminal 400 is separated from the display unit 11. Thus, data transfer according to the user's request can be realized.
  • the display processing device 1 receives the selection of “transfer interruption”
  • data transfer between the display processing device 1 and the portable terminal 400 is interrupted. That is, when the selection of “transfer lock” is received, the data transfer is not interrupted only by releasing the portable terminal 400 from the display unit 11, but when the selection of “transfer interruption” is received from the user, the data transfer is performed. It can be interrupted. Thus, data transfer can be interrupted by selecting “transfer interruption” when the user still wants to interrupt data transfer despite selecting “transfer lock”.
  • FIG. 10 is a diagram showing an example of the movement destination of the icon by the display control unit 105.
  • the display control unit 105 moves the icon of the moving image data to the position 1003.
  • the display control unit 105 moves the icon of the music data to the position 1002.
  • the display control unit 105 moves the icon of the photo data to the position 1001.
  • the area where the upload is started when the portable terminal 400 contacts is not limited to the upload icon 31.
  • FIG. 11 shows an example of the area where the upload according to the modification is started. It may be within the display area of the display unit 11 as in the upload area 1101 of FIG.
  • FIG. 12 is a diagram showing the arrangement of the portable terminal 400 when downloading data from the display processing device 1. As shown in FIG. 12, by arranging the portable terminal 400 on the icon 1201, downloading of the photo data indicated by the icon 1201 is started.
  • the display control unit 105 also performs animation display in which the icon moves to the portable terminal 400 even when downloading.
  • FIG. 13 is a diagram showing an example of screen transition performed in display control by the display control unit 105 according to the present embodiment. As shown in FIG. 13A, it is assumed that the portable terminal 400 is placed on the icon 1301. Thus, the detection unit 102 detects a touch of the portable terminal 400, and data indicated by the icon 1301 in contact with the portable terminal 400 is specified as a download target.
  • the display control unit 105 performs display control so that the icon 1301 is reduced and moved around the position where the portable terminal 400 is disposed, in accordance with the download status between the display processing device 1 and the portable terminal 400. .
  • the display control unit 105 performs display control so that the icon moves in a reduced size as the download to the portable terminal 400 proceeds.
  • the display control unit 105 performs display control so that the icon indicating the data to be downloaded is reduced toward the mobile terminal 400.
  • the display control unit 105 makes the animation of the reduction movement of the icons different according to the position of the portable terminal 400.
  • FIG. 14 is a diagram illustrating the reduction movement of the icon 1401 performed by the display control unit 105 when the portable terminal 400 is disposed at the upper left of the icon 1401. As shown by the arrow 1410 in FIG. 14, the icon 1401, the icon 1402, and the icon 1403 are displayed in the order of reduction toward the portable terminal 400.
  • FIG. 15 is a diagram illustrating the reduction movement of the icon 1501 performed by the display control unit 105 when the portable terminal 400 is disposed at the upper right of the icon 1501. As shown by an arrow 1510 in FIG. 15, the icon 1501, the icon 1502, and the icon 1503 are displayed in the order of reduction toward the portable terminal 400.
  • FIG. 16 is a diagram illustrating the reduction movement of the icon 1601 performed by the display control unit 105 when the portable terminal 400 is disposed near the center of the icon 1601. As shown by the arrow 1610 in FIG. 16, the icon 1601, the icon 1602, and the icon 1603 are displayed in the order of reduction toward the portable terminal 400.
  • the display control unit 105 causes the user to visually recognize that data has been downloaded from the display processing device 1 to the portable terminal 400 by performing the above-described animation display. Can.
  • the display control unit 105 can cause the user to recognize the progress of the download by reducing the icon according to the download status.
  • FIG. 17 is a view showing a modified example in which the download button 1711 for the data indicated by the icon 1701 is displayed.
  • the display control unit 105 performs animation display in which the icons 1701, 1702, and 1703 are reduced in order of the icons 1701, 1702, and 1703 toward the position where the portable terminal 400 is in contact.
  • FIG. 18 is a diagram showing an example of screen transition performed in display control by the display control unit 105 according to the modification. As shown in FIG. 18A, it is assumed that the portable terminal 400 contacts on the icon 1801. Thereby, the detection unit 102 detects a touch of the portable terminal 400, and the data indicated by the icon 1801 in contact with the portable terminal 400 is specified as a download target.
  • the display control unit 105 moves the icon 1801 in a contracted manner only in the horizontal axis direction based on the position where the portable terminal 400 is in contact. Yes, control display.
  • the display control unit 105 displays the icon so as to move in a contracted manner only in the horizontal axis direction as downloading to the portable terminal 400 proceeds. Control. Further, when the icon 1801 is configured of a plurality of images, the design of the icon may be changed according to the download status. In FIG. 18, the contents of the icon are gradually crushed, and an example of displaying the animation such that the facial expression in the inside is drawn is used.
  • FIG. 19 is a diagram showing an example of screen transition due to luminance change by the display control unit 105 according to the modification. As shown in FIG. 19A, it is assumed that the portable terminal 400 contacts on the icon 1901. Thereby, the detection unit 102 detects a touch of the portable terminal 400, and the data indicated by the icon 1901 with which the portable terminal 400 is in contact is specified as the download target.
  • the display control unit 105 makes the icon 1901 an area farthest from the reference based on the position where the portable terminal 400 is in contact. To perform animation display to change the brightness and color.
  • the display control unit 105 is separated from the position in contact with the portable terminal 400 as the download to the portable terminal 400 proceeds.
  • the animation is displayed by gradually increasing the luminance from the left side (changing the color to white). As a result, animation is displayed such that the pattern disappears with the passage of time. Therefore, the user can be made to recognize the data indicated by the icons 1901 to 1903 as they enter the portable terminal 400.
  • FIG. 20 is a diagram showing an example of screen transition by display control of the display control unit 105 according to the modification. As shown in FIG. 20A, it is assumed that the portable terminal 400 contacts on the icon 2000. Thereby, the detection unit 102 detects a touch of the portable terminal 400, and the data indicated by the icon 2000 with which the portable terminal 400 is in contact is specified as a download target.
  • the display control unit 105 displays an animation that reduces the size of the icon according to the screen size and resolution of the portable terminal 400.
  • the portable terminal 400 transmits the screen size and the resolution to the display processing apparatus 1 in advance. Further, the display processing device 1 may specify the screen size and the resolution based on the model information received from the portable terminal 400.
  • the display control unit 105 displays the icon 2003 as a portable terminal. Animate to move 400 to the detected position.
  • the display control unit 423 of the portable terminal 400 ends the display of the icon representing the data that has been downloaded when the download is completed. , And the entire icon 2004 representing the downloaded data is displayed. This allows the user to recognize that the data download is complete.
  • FIG. 21 is a diagram showing display modes of the display processing device 1 and the portable terminal 400 during download.
  • the portable terminal 400 transmits tilt information ( ⁇ ), a screen size, and a resolution to the display processing device 1. Thereafter, it is assumed that the display processing device 1 generates icon data for the portable terminal 400 to display on the portable terminal 400 and transmits the icon data to the portable terminal 400. Furthermore, the display processing device 1 notifies the portable terminal 400 that an animation display for inserting an icon from the left side is to be performed.
  • the display control unit 105 of the display processing device 1 reduces the icon 2101 according to the screen data of the portable terminal 400.
  • the display control unit 105 of the display processing device 1 rotates the reduced icon 2102 by the inclination ( ⁇ ). Thereafter, the display control unit 105 uses the position in the display unit 11 corresponding to the left side of the portable terminal 400 as a base point, and the part 2110 of the rotated icon corresponds to the portable terminal 400. Animate as you move to
  • the display control unit 423 of the portable terminal 400 displays an animation of a part 2111 of the icon from the left side of the display area according to the ratio of the data that has been downloaded.
  • the display control unit 423 of the portable terminal 400 and the display control unit 105 of the display processing device 1 change the icon to be displayed according to the download status. Thereby, the display of the icons can be synchronized by the portable terminal 400 and the display processing device 1.
  • the determination unit 103 It is determined that the icon is touched by something other than the portable terminal (for example, a hand or a finger), and reproduction and display of data (for example, moving image data or photo data) indicated by the icon are performed.
  • FIG. 22 is a flowchart showing the procedure of the above-described processing in the display processing device 1 according to the present embodiment.
  • the communication IF unit 17 detects whether there is a portable terminal that can communicate (step S2201). If not detected (step S2201: No), the process of step S2201 is repeated until a communicable portable terminal is detected. On the other hand, when the communication IF unit 17 detects a communicable portable terminal (step S2201: Yes), communication is started with each of the detected portable terminals. Then, the terminal cooperation program 23 acquires attribute information of each portable terminal via the communication IF unit 17 (step S2202).
  • the detection unit 102 determines whether a touch on the display unit 11 is detected (step S2203). If the detection unit 102 determines that the touch on the display unit 11 is detected (step S2203: Yes), the detection unit 102 acquires position coordinates at which the touch is detected based on the detection signal (step S2204). On the other hand, when it is determined that the touch on the display unit 11 is not detected (step S2203: No), the process of step S2203 is repeated.
  • the communication control unit 101 determines whether an acceleration detection signal has been received from the portable terminal via the communication IF unit 17 (step S2205).
  • the acceleration detection signal is not received (Step S2205: No)
  • the portable terminal is not in contact, but it is considered that the finger of the person or the like is in contact, and the finger of the person or the like is in contact
  • the process (program) in the case of having been performed is specified (step S2209).
  • the activation unit 104 executes the specified processing (program) (step S2210).
  • specified processing for example, reproduction, display or the like of data (moving image data, music data, picture data) associated with an icon present at the touched position is used.
  • step S2205 when the communication control unit 101 receives an acceleration detection signal (step S2205: Yes), the time when the determination unit 103 detects a touch based on the detection signal and the acceleration occurred in the portable terminal based on the acceleration detection signal It is determined whether the time is within a predetermined threshold, in other words, whether or not the occurrence timing is near (step S2206). If it is determined that it is not within the predetermined threshold (step S2206: No), the process is performed from step S2209.
  • a predetermined threshold in other words, whether or not the occurrence timing is near
  • step S2206 determines that the portable terminal that has transmitted the acceleration detection signal is touched, and the portable terminal is identified as data transmission / reception (step S2207). ).
  • the determination unit 103 specifies a program corresponding to the position coordinates at which the contact has occurred and the attribute information of the portable terminal to which data is to be transmitted / received. Then, the activation unit 104 activates the identified program. Thus, communication is started between the display processing device 1 and the portable terminal (step S2208). At this time, processing according to the attribute information of the portable terminal is performed. Also, in step S2208, the attribute information of the portable terminal may be acquired again.
  • FIG. 23 is a flowchart showing the procedure of the above-described processing in the display processing device 1 according to the present embodiment.
  • the determination unit 103 acquires attribute information of the portable terminal specified as the data transmission / reception target (step S2301).
  • the information included in the attribute information is, for example, a compatible data format, a screen size, an executable function, and a communication method.
  • the display processing device 1 stores the acquired attribute of the portable terminal.
  • the determination unit 103 may acquire attribute information via a network (including the Internet) or may acquire it from a database in the display processing device 1.
  • the determination unit 103 and the activation unit 104 perform processing in the case where the icon touched (or present near the touched position) is associated with the moving image (step S2302). In addition, for example, after performing conversion etc. for enabling reproduction with a portable terminal, it transfers.
  • the determination unit 103 and the activation unit 104 perform processing in the case where the icon touched (or present in the vicinity of the touched position) is associated with music (step S2303). For example, after performing conversion for enabling reproduction on a portable terminal, etc., transfer is performed.
  • the determination unit 103 and the activation unit 104 perform processing in the case where the icon touched (or present in the vicinity of the touched position) is associated with the photo (step S2304).
  • the determination unit 103 and the activation unit 104 perform processing in the case where the icon touched (or present near the touched position) is associated with the upload (step S2305).
  • the communication means for transferring data may be changed based on whether the transfer destination portable terminal can communicate by wireless LAN or can communicate by Bluetooth (registered trademark).
  • FIG. 24 is a flowchart showing the procedure of processing in the case where the touched icon is associated with a moving image in the display processing device 1 according to the present embodiment.
  • the determination unit 103 determines whether the icon touched by the portable terminal 400 is the file Video 1 from the position coordinates included in the detection signal (step S2401). If it is determined that the file is the file Video 1 (Step S 2401: Yes), the determination unit 103 sets the transfer target to the file Video 1 (Step S 2402). Thereafter, the process proceeds to step S2407.
  • step S 2401 determines whether the icon touched by the portable terminal 400 is not the file Video 1 (step S 2401: No)
  • step S 2403 determines whether the touched icon is the file Video 3 (step S 2405). If it is determined that the file is the video 3 (step S2405: YES), the determination unit 103 sets the transfer target to the file Video 3 (step S2406). Thereafter, the process proceeds to step S2407.
  • step S2405: No it is assumed that the process relating to the moving image is not particularly performed.
  • step S2402 the determination unit 103 determines whether reproduction is possible with the display size 1920 ⁇ 1080 on the portable terminal to which the moving image data is transmitted based on the acquired attribute information (step S2407) .
  • the resolution of the file Video1, the file Video2 and the file Video3 is 1920 ⁇ 1080.
  • step S2407: YES If the determination unit 103 determines that reproduction is possible with the display size 1920 ⁇ 1080 on the portable terminal (step S2407: YES), the process proceeds to step S2409.
  • the determination unit 103 determines that reproduction can not be performed with the display size 1920 ⁇ 1080 on the mobile terminal (step S2407: No)
  • the activation unit 104 activates a reduction program for reducing moving image data, and the reduction program is the moving image data Is reduced to 640 ⁇ 480 (step S2408).
  • the activation unit 104 activates the moving image transfer program. Then, the moving picture transfer program starts moving picture data transfer set as a transfer target (step S2409).
  • FIG. 25 is a flowchart showing a procedure of processing in the case where the touched icon relates to music in the display processing device 1 according to the present embodiment.
  • the determination unit 103 determines, from the position coordinates included in the detection signal, whether the touched icon is the file Audio 1 (step S 2501). If it is determined that the file is Audio1 (Yes at Step S2501), the determining unit 103 sets the transfer target to the file Audio1 (Step S2502). Thereafter, the process proceeds to step S2507.
  • step S 2501 determines that the touched icon is not the file Audio 1 (step S 2501: No)
  • step S 2503 it is determined whether the touched icon is the file Audio 2 (step S 2503). If it is determined that the file is Audio2 (Yes at Step S2503), the determining unit 103 sets the transfer target to the file Audio2 (Step S2504). Thereafter, the process proceeds to step S2507.
  • step S 2503 determines that the touched icon is not the file Audio 2 (step S 2503: No)
  • the determination unit 103 determines whether reproduction is possible only in the first data format (for example, AAC) based on the acquired attribute information (step S2507). It is assumed that there are multiple types of data format of music data (for example, AAC, MP3).
  • step S2507: NO If the determination unit 103 determines that reproduction is possible even in a format other than the first data format (step S2507: NO), the music data may be transmitted as it is, so the process proceeds to step S2509. If the determination unit 103 determines that the portable terminal can reproduce only in the first data format (step S2507: Yes), the activation unit 104 converts the music data data format into the first data format. The conversion program performs conversion processing of music data into a first data format (step S2508).
  • the activation unit 104 activates the music transfer program. Then, the music transfer program makes a transfer request to the portable terminal (step S2509). Thereafter, the music transfer program starts transfer of the music data set as the transfer target (step S 2510).
  • FIG. 26 is a flowchart showing the procedure of processing in the case where the touched icon is related to a photo in the display processing device 1 according to the present embodiment.
  • the determination unit 103 determines, from the position coordinates included in the detection signal, whether the touched icon is the file Photo 1 (step S 2601). If it is determined that the file is the file Photo1 (step S2601: YES), the determining unit 103 sets the transfer target to the file Photo1 (step S2602). Thereafter, the process proceeds to step S2605.
  • Step S 2601 determines whether the touched icon is the file Photo 1 (Step S 2601: No)
  • Step S 2603 determines whether the touched icon is the file Photo 2 (Step S 2603). If it is determined that the file is the photo 2 (step S 2603: YES), the determination unit 103 sets the transfer target to the file Photo 2 (step S 2604). Thereafter, the process proceeds to step S2605. If it is determined that the file is not the file Photo2 (step S2603: NO), it is assumed that no processing relating to a photo is performed.
  • the determination unit 103 determines whether the communication method of the portable terminal is a wireless LAN based on the acquired attribute information (step S2605).
  • the communication method of the portable terminal is a wireless LAN based on the acquired attribute information (step S2605).
  • two types of communication methods wireless LAN and Bluetooth (registered trademark), are selected.
  • step S2605 determines that communication via the wireless LAN is possible (step S2605: YES)
  • the transmission path is set to the wireless LAN (step S2606).
  • step S2605: No the transmission path is set to Bluetooth (registered trademark) (step S2607).
  • the activation unit 104 activates the photo transfer program.
  • the picture transfer program requests the portable terminal to start transfer of picture data (step S2608).
  • the photo transfer program starts transfer of the file (photo data) set as the transfer target (step S2609).
  • FIG. 27 is a flowchart showing a procedure in which the display processing device 1 according to the present embodiment causes the portable terminal 400 to download moving image data.
  • the communication control unit 101 cooperates with the moving image transfer program, and from the portable terminal 400, tilt information detected by the portable terminal 400, model information for identifying the portable terminal 400, screen size, resolution, Are received (step S2701).
  • the display processing apparatus 1 may specify the screen size and the resolution from the model information.
  • the moving image transfer program specifies an area where the portable terminal 400 is in contact on the display unit 11 from the position coordinates at which the detection unit 102 detects a touch and the received tilt information (step S2702).
  • the size or the like of the portable terminal 400 may be acquired.
  • the moving image transfer program After that, the moving image transfer program generates an icon representing moving image data to be transferred based on the screen size and resolution of the portable terminal 400 (step S2703).
  • the communication control unit 101 transfers the generated icon in cooperation with the moving image transfer program (step S2704).
  • the transferred icon is used to display the communication status on the portable terminal 400.
  • the communication control unit 101 notifies the moving direction of moving image data in the display unit 11 in cooperation with the moving image transfer program (step S2705). Thereby, the portable terminal 400 displays the animation of the icon so that the moving image data moves from the passing direction.
  • the display control unit 105 performs the animation display of the icon so that the moving image data is moved from the passing direction according to the transfer condition of the moving image data in cooperation with the moving image transfer program (step S2706).
  • FIG. 28 is a flowchart showing a procedure of processing in the case where the touched icon is related to upload in the display processing device 1 according to the present embodiment.
  • the determination unit 103 determines, from the position coordinates included in the detection signal, whether the touched icon is an upload icon (step S2801). If it is determined that the icon is not the upload icon (step S2801: NO), the process ends.
  • step S2801 when it is determined that the touched icon is the upload icon (step S2801: YES), the communication control unit 101 inquires the type of data set as the transmission target on the portable terminal 400 side (step S2802).
  • Step S2803 determines whether transfer data is set on the portable terminal 400 side. If it is determined that the setting is not made (Step S2803: No), the activation unit 104 activates a message display program. Then, the display program cooperates with the display control unit 105 to display a selection message such as “Please select data from the device you want to transfer data to this icon and then touch it” (step S2804). Thereafter, the process proceeds to step S2802.
  • step S2803 determines whether transfer data is set (step S2803: YES)
  • step S2805 determines whether the transfer data is moving image data. If it is determined to be moving image data (step S2805: YES), the activation unit 104 activates a moving image transfer program. Then, the moving image transfer program designates the moving image data folder as the transfer destination (step S2806), and the process proceeds to step S2813.
  • step S2807 it is determined whether the transfer data is music data. If it is determined that the transfer data is music data (step S2807: YES), the activation unit 104 activates a music transfer program. Then, the music transfer program designates the music data folder as the transfer destination (step S2808), and the process proceeds to step S2813.
  • step S2809 determines whether the transfer data is photo data. If it is determined that the transfer data is photograph data (step S2809: YES), the activation unit 104 activates a photograph transfer program. Then, the picture transfer program acquires the shooting date of the picture data for the picture data folder (step S2810). Thereafter, the photo transfer program designates the acquired date folder as the transfer destination (step S2811), and proceeds to the process of step S2813.
  • step S2809 determines that the transfer data is not photo data
  • step S2812 the start unit 104 starts the transfer program
  • step S2813 the transfer program designates another data folder as the transfer destination
  • step S2813 the activated various transfer programs display a data transfer confirmation screen. Then, it is determined whether the various transfer programs have accepted the selection of “OK” (step S2814). When the selection of "OK” is not received (step S2814: No), the process ends.
  • step S2814 Yes
  • data is transferred to and from the portable terminal 400 (step S2815).
  • the above-described processing procedure enables data transfer.
  • the program to be activated is the transfer program has been described.
  • the program to be activated is not limited to the transfer program.
  • a program for electronic payment may be used as another activated program.
  • FIG. 29 is a flow chart showing a procedure for accepting uploading of moving image data from the portable terminal 400 in the display processing device 1 according to the present embodiment.
  • the communication control unit 101 cooperates with the moving image transfer program, and from the portable terminal 400, tilt information detected by the portable terminal 400, model information for identifying the portable terminal 400, screen size, resolution, Are received (step S2901).
  • the display processing apparatus 1 may specify the screen size and the resolution from the model information.
  • the moving image transfer program specifies an area where the portable terminal 400 is in contact on the display unit 11 from the position coordinates at which the detection unit 102 detects a touch and the received tilt information (step S2902).
  • the size of the portable terminal 400 may be acquired.
  • the communication control unit 101 receives an icon representing moving image data to be transferred from the portable terminal 400 (step S2903).
  • the communication control unit 101 notifies the moving-out direction of moving image data in the display unit 11 in cooperation with the moving image transfer program (step S2904).
  • the portable terminal 400 displays an animation of the icon so that the moving image data moves in the extraction direction.
  • the communication control unit 101 starts receiving moving image data from the portable terminal 400 in cooperation with the moving image transfer program (step S2905).
  • the display control unit 105 performs the animation display of the icon so that the moving image data moves in the extraction direction in accordance with the moving state of the moving image data in cooperation with the moving image transfer program (step S2906).
  • the communication control unit 101 ends the reception of the moving image data from the portable terminal 400 (step S2907).
  • the icons are displayed in an animated manner according to the amount of transferred data.
  • the display mode of the icons is not limited to being proportional to the transfer amount.
  • the start of the animation display is not limited to the start of the data transfer at the same time as the start of the data transfer, and the timing may be any timing related to the data transfer operation.
  • the animation display may be started at the timing when the transfer ends, or the animation display may be started at the timing when the icon is touched.
  • the display information representing the data is not limited to the icons, but may be image data representing the data, for example, a thumbnail or the like.
  • thumbnails When thumbnails are used, it is easy for the user to recognize what the content of the data being transferred is.
  • the portable terminal 400 contacts by receiving tilt information of the portable terminal 400.
  • region which is carrying out was demonstrated.
  • the present invention is not limited to the case where the display unit 11 is arranged vertically, and may be arranged horizontally or the like. In this case, the area in which the portable terminal is in contact can be specified by acquiring the azimuth information from the portable terminal with the azimuth magnet function.
  • the display processing device 1 of the present embodiment described above when there is a touch on the icon of the display unit 11 by the portable terminal, the touched portable terminal is identified from the acquired acceleration detection signal, You have launched a program to transfer to your mobile device. Therefore, even when there are a plurality of portable terminals that can transmit to and receive from the display processing device 1, it is possible to transfer between the portable terminals intended by the user. As a result, erroneous transmission can be suppressed, and user convenience can be improved.
  • the program can execute the program according to the portable terminal, and convenience can be improved.
  • the user can easily grasp the transfer status by performing animation display according to the status of the transfer data. Furthermore, by making the display mode different according to the position where the portable terminal is placed, it becomes easy to intuitively recognize the process currently performed for the user.
  • the icons displayed between the display processing device 1 and the portable terminal 400 can be synchronized. This improves the visibility.

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Digital Computer Display Output (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

　実施形態の表示処理装置は、表示部と、検出部と、通信部と、表示制御部と、を有する。表示部は、表示領域を有する。検出部は、表示領域内で接触を検出する。通信部は、通信端末との間でデータの送受信を可能とする。表示制御部は、検出部により表示領域内に通信端末の接触が検出され、且つ通信部により通信端末との間でデータを送受信する場合に、通信部により送受信されるデータを表す表示情報を、通信端末の接触が検出された位置を基準に移動させる、アニメーション表示を行う。

Description

表示処理装置、及び表示処理方法
　本発明の実施形態は、表示処理装置、及び表示処理方法に関する。
　従来、タッチパネルによるユーザインタフェースを備えた表示処理装置が知られている。表示処理装置では、ユーザインタフェースを介した操作を受け付けることで、他の通信端末との間でデータを送受信することを可能としている。
ＷＯ２００３／０２１８７６号公報
　しかしながら、従来技術では、携帯端末と表示処理装置との間で行われる通信状況を視覚的に認識することが難しかった。
　本発明の実施形態は、上記に鑑みてなされたものであって、通信端末との間で行われる通信状況を容易に認識可能な表示処理装置、及び表示処理方法を提供する。
　実施形態の表示処理装置は、表示部と、検出部と、通信部と、表示制御部と、を有する。表示部は、表示領域を有する。検出部は、表示領域内で接触を検出する。通信部は、通信端末との間でデータの送受信を可能とする。表示制御部は、検出部により表示領域内に通信端末の接触が検出され、且つ通信部により通信端末との間でデータの送受信する場合に、通信部により送受信されるデータを表す表示情報を、通信端末の接触が検出された位置を基準に移動させる、アニメーション表示を行う。
図１は、実施形態にかかる表示処理装置のハードウェア構成図である。 図２は、プロジェクタを用いて壁面に表示する変形例を示した図である。 図３は、実施形態にかかるアイコン記憶部に記憶されるアイコンデータテーブルのデータ構造を示した図である。 図４は、実施形態にかかる携帯端末のハードウェア構成図である。 図５は、実施形態にかかる表示処理装置で端末連携プログラムを実行した時のユーザインタフェース画面の例を示した図である。 図６は、実施形態にかかる表示処理装置と携帯端末との連携処理が行われる際のタイミングチャートを示した図である。 図７は、実施形態にかかる表示処理装置と携帯端末との連携処理が行われる際のタイミングチャートを示した図である。 図８は、実施形態にかかる表示制御部の表示制御による画面遷移の例を示した図である。 図９は、変形例にかかる表示制御部の表示制御による画面遷移の例を示した図である。 図１０は、実施形態にかかる表示制御部によるアイコンの移動先の例を示した図である。 図１１は、変形例にかかるアップロードが開始される領域の例を示した図である。 図１２は、実施形態にかかる表示処理装置からデータをダウンロードさせる際の携帯端末の配置を示した図である。 図１３は、実施形態にかかる表示制御部による表示制御で行われる画面遷移の例を示した図である。 図１４は、アイコンの左上に携帯端末が配置された場合に、表示制御部によるアイコンの縮小移動を示した図である。 図１５は、アイコンの右上に携帯端末が配置された場合に、表示制御部によるアイコンの縮小移動を示した図である。 図１６は、アイコンの中央付近に携帯端末が配置された場合に、表示制御部によるアイコンの縮小移動を示した図である。 図１７は、アイコンで示されるデータをダウンロードするためのダウンロードボタンを表示した変形例を示した図である。 図１８は、変形例にかかる表示制御部の表示制御による画面遷移の例を示した図である。 図１９は、変形例にかかる表示制御部の表示制御による画面遷移の例を示した図である。 図２０は、変形例にかかる表示制御部の表示制御による画面遷移の例を示した図である。 図２１は、ダウンロード中の表示処理装置と携帯端末との表示態様を示した図である。 図２２は、実施形態にかかる表示処理装置における、携帯端末との間で通信を開始するまでの処理の手順を示すフローチャートである。 図２３は、実施形態にかかる表示処理装置における、プログラムを起動させて、通信を開始させるまでの処理の手順を示すフローチャートである。 図２４は、実施形態にかかる表示処理装置における、接触したアイコンが動画に関連する場合の処理の手順を示すフローチャートである。 図２５は、実施形態にかかる表示処理装置における、接触したアイコンが音楽に関連する場合の処理の手順を示すフローチャートである。 図２６は、実施形態にかかる表示処理装置における、接触したアイコンが写真に関連する場合の処理の手順を示すフローチャートである。 図２７は、実施形態にかかる表示処理装置が、携帯端末に動画データをダウンロードさせる手順を示すフローチャートである。 図２８は、実施形態にかかる表示処理装置における、接触したアイコンがアップロードに関連する場合の処理の手順を示すフローチャートである。 図２９は、実施形態にかかる表示処理装置における、携帯端末から動画データのアップロードを受け付ける際の手順を示すフローチャートである。
　以下に、表示処理装置及び表示処理方法を適用した実施形態を図面に基づいて説明する。なお、この実施形態によりこの発明が限定されるものではない。
　実施形態にかかる表示処理装置は、タッチパネル式の表示部にユーザインタフェース画面を表示する。表示処理装置は、ユーザインタフェース画面に対する接触を検出することで所定の処理を実行する。携帯端末は、携帯可能な通信端末であり、例えばスマートフォン等を利用することができるが、他の専用のデバイスを利用してもよい。例えば、ペンのような形状のデバイスであってもよい。
　図１は、実施形態の表示処理装置１のハードウェア構成図である。図１に示されるように、表示処理装置１は、表示部１１と、ＣＰＵ１２と、表示コントローラ部１３と、記憶部１４と、位置取得部１５と、位置取得ＩＦ（インターフェース）部１６と、通信ＩＦ（インターフェース）部１７とを備えている。
　表示部１１は、液晶表示パネル等で構成されており、利用者に対するユーザインタフェース画面を表示する。ＣＰＵ１２は、表示処理装置１全体を制御する。表示コントローラ部１３は、ＣＰＵ１２からの制御に従って、表示部１１に情報やユーザインタフェース画面を画像の形式に変換して描画する。
　位置取得部１５は、表示部１１に接触した位置座標を取得する。位置取得部１５は、表示部１１の表面に貼られたタッチセンサーフィルムにより構成される。タッチセンサーフィルムにはＸ軸方向、及びＹ軸方向にセンサーが並んでおり、利用者が手や指、又は携帯端末等で画面に接触した場合に、タッチセンサーフィルムがこれらの接触を検出して、接触した位置座標を含めた検出信号を、位置取得ＩＦ部１６に出力する。なお、実際に接触することに制限するものではなく、表示部１１に物体がほぼ接触した状態を、接触とみなしてもよい。
　位置取得ＩＦ部１６は、位置取得部１５から入力された検出信号（タッチセンサーフィルムが検出した位置座標を含む）を、ＣＰＵ１２に出力する。
　位置取得部１５は、光学式タッチセンサーであってもよい。光学式タッチセンサーは光が透過したり遮断されたりすることを検出して物体の存在を検出する方式でもよいし、またカメラを用いてその撮像画像から物体の存在を検出する方式でもよい。
　実施形態の表示処理装置１としては、例えばタッチパネルを搭載したテレビジョン表示装置などが考えられるが、このような装置に制限するものではない。
　図２は、表示部１１としてプロジェクタ２１０を用いて、壁面に画像を表示する変形例を示した図である。図２に示す例では、位置取得部として、画像が投影された壁面に対して、接触が行われた場合の位置を検出するために、光学式タッチセンサー２０１、２０２を備えた例である。このような変形例であっても、実施形態と同様の処理で、同様の効果を実現できる。また、位置取得部として、光学式タッチセンサー２０１、２０２に制限するものではなく、撮像カメラ等を用いてもよいし、第１の実施形態と同様に、タッチセンサーフィルムを用いてもよい。
　さらには、表示処理装置としては、表示装置を内部に備えた装置に制限するものではなく、表示処理を行う装置であればよい。表示処理装置としては、例えば、タッチセンサーを有する表示装置を外付けするセット・トップ・ボックスや、コンピュータ等であってもよい。タッチセンサーを有する表示装置としては、コンピュータのモニターとしてよく知られており、例えばタッチセンサーからの信号はＵＳＢ端子を介して表示処理装置に入力される。
　図１に示される実施形態に戻り、通信ＩＦ部１７は、表示処理装置１の他の端末との間のデータの送受信を行うインターフェースとする。例えば、通信ＩＦ部１７は、Bluetooth（登録商標）や無線ＬＡＮによる携帯端末のデータ送受信や、無線ＬＡＮによるインターネット通信等を行う。
　記憶部１４は、情報を記憶可能なＲＯＭ及びＲＡＭなどの記憶媒体で構成され、アイコン記憶部２１と、プログラム群２２と、端末連携プログラム２３とを備えている。
　アイコン記憶部２１は、ユーザインタフェース画面上に表示するアイコン部の画像データと、アイコンが接触された場合に処理を行うプログラムと、アイコン部の表示部１１のユーザインタフェースにおける表示位置を表す位置情報と、を対応付けて記憶している。　　　
　図３は、アイコン記憶部２１に記憶されるアイコンデータテーブル３００のデータ構造を示した図である。図３に示されるように、アイコンデータテーブル３００は、アイコンの識別情報であるアイコンＩＤと、表示部１１で表示する際の位置の一例である（位置）座標と、アイコンサイズと、アイコンに用いられる画像データを指定するオブジェクトＩＤと、端末の属性毎に起動するプログラムと、を１レコードに対応付けて記憶している。　　　
　オブジェクトＩＤによって規定されるアイコンの画像データは、ＣＰＵ１２の制御に従って、表示部１１に、（位置）座標で示された位置に描画される。また、本実施形態にかかるアイコンデータテーブル３００は、当該アイコンが接触した際に起動するプログラムとして、接触した携帯端末が属性１の場合の属性１プログラム、接触した携帯端末が属性２の場合の属性２プログラム、及び携帯端末以外（例えば利用者の指）が接触した場合の指対応プログラムの３種類を、アイコンＩＤと対応付けて記憶している。
　ここでいうプログラムとは、実行コードが異なるものに限るわけではなく、同じ実行コードであっても異なる引数を渡すものも異なるプログラムと表現する。例えば、どれもウェブブラウザを起動するがそれぞれ異なるＵＲＬを渡す、あるいはメッセージ表示プログラムでありながら、異なるメッセージを渡す、というものを含んでいる。
　図１に戻り、プログラム群２２は、表示処理装置１が実行するプログラムが格納されている。例えば、プログラム群２２には、上述した属性１プログラム、属性２プログラム、及び指対応プログラム等を含んでいる。
　端末連携プログラム２３は、通信制御部１０１と、検出部１０２と、判定部１０３と、起動部１０４と、表示制御部１０５とを含み、表示部１１に対する接触を検出した場合に、プログラム群２２に含まれているプログラムを起動させるための制御を行う。
　通信制御部１０１は、携帯端末との間で通信を確立し、当該携帯端末との間でデータの送受信を行う。例えば、通信制御部１０１は、携帯端末から、当該携帯端末の属性が示された属性情報を受信する。さらには、通信制御部１０１は、当該携帯端末で生じた加速度を示した加速度検出信号や、傾き検出信号を受信する。
　検出部１０２は、位置取得ＩＦ部１６を介して、位置取得部１５から入力された検出信号に基づいて、表示部１１の表示領域に対する接触を検出する。さらには、検出部１０２は、表示部１１の表示領域内における、接触が生じた位置座標を検出する。
　判定部１０３は、検出部１０２により接触が検出された時刻と、通信制御部１０１が加速度検出信号を受信した時刻と、に基づいて、表示部１１に接触した携帯端末を特定する。本実施形態では、判定部１０３が、検出部１０２により接触が検出された時刻と、通信制御部１０１が加速度検出信号を受信した時刻と、の時間差が所定の閾値以内の場合に、当該加速度検出信号の送信先の携帯端末を接触した端末として判定する。なお、閾値は実施の態様により定められるものとする。
　さらに、判定部１０３は、特定された携帯端末の属性と、アイコンデータテーブル３００と、加速度検出信号に含まれている位置座標と、に基づいて起動するプログラムを特定する。これにより、携帯端末の属性に応じたプログラムの起動が可能となる。
　起動部１０４は、判定部１０３により特定されたプログラムを起動する。例えば、図３に示す例において、“Icon1”に対する接触を検出した場合に、携帯端末が“属性１プログラム”に対応するものであれば、属性１に対応する“プログラム１”を起動させる。なお、携帯端末が接触した位置の位置座標と、アイコンに対応付けられた位置座標とは、必ずしも一致、もしくは重なっている必要はない。例えば、これらの位置座標が、所定値以内の距離に近接している場合に、起動部１０４が、アイコンに対応するプログラムを起動させてもよい。
　表示制御部１０５は、判定部１０３による判定結果により、アイコンに対する携帯端末（携帯可能な通信端末）の接触が検出された後、通信制御部１０１により当該携帯端末との間で、アイコンで示されるデータの送受信する場合に、携帯端末の接触が検出された位置を基準に当該アイコンを移動させるアニメーション表示を、表示部１１の表示領域内で行う。
　図４は、実施形態の携帯端末４００のハードウェア構成図である。図４に示されるように、携帯端末４００は、表示部４０１と、ＣＰＵ４０２と、表示コントローラ部４０３と、記憶部４０４と、位置取得部４０５と、位置取得ＩＦ（インターフェース）部４０６と、通信ＩＦ（インターフェース）部４０７と、加速度検出部４０８と、傾き検出部４０９とを備えている。
　携帯端末４００が備える表示部４０１、ＣＰＵ４０２、表示コントローラ部４０３、位置取得部４０５、位置取得ＩＦ（インターフェース）部４０６、及び通信ＩＦ（インターフェース）部４０７は、表示処理装置１が備える表示部１１、ＣＰＵ１２、表示コントローラ部１３、位置取得部１５、位置取得ＩＦ（インターフェース）部１６、及び通信ＩＦ（インターフェース）部１７と同様の処理を行うものとして、説明を省略する。なお、本実施形態にかかる携帯端末４００の表示部４０１は、表示処理装置１の表示部１１と比べて画面サイズが小さい例とする。
　加速度検出部４０８は、携帯端末４００に設けられた加速度センサーから加速度を検出し、加速度情報をＣＰＵ４０２に出力する。
　傾き検出部４０９は、携帯端末４００に設けられた傾きセンサーから傾きを検出し、傾き情報をＣＰＵ４０２に出力する。
　記憶部４０４は、情報を記憶可能なＲＯＭ及びＲＡＭなどの記憶媒体で構成され、アイコン記憶部４１２と、プログラム群４１１と、表示連携プログラム４１３とを備えている。
　アイコン記憶部４１２は、表示処理装置１のアイコン記憶部２１と同様に、ユーザインタフェース画面上に表示するアイコン部の画像データと、アイコンが接触された場合に処理を行うプログラムと、アイコン部の表示部４０１のユーザインタフェースにおける表示位置を表す位置情報と、を対応付けて記憶している。
　プログラム群４１１は、携帯端末４００でデータ（例えば動画データ、音声データ、写真データ）を再生、表示可能なプログラムを記憶する。
　表示連携プログラム４１３は、制御部４２１と、通信制御部４２２と、表示制御部４２３と、を備え、携帯端末４００に常駐し、表示処理装置１と連携するための制御を行う。　　　
　制御部４２１は、表示処理装置１にデータを送信する際に、プログラム群４１１で再生、表示されているデータを送信対象として設定する。
　通信制御部４２２は、表示処理装置１との間で通信が確立した際に、携帯端末４００の属性を示した属性情報を送信する制御を行う。また、通信制御部４２２は、表示処理装置１に対してデータの送信制御を行う際に、制御部４２１により設定されたデータの送信制御を行う。
　属性情報には、例えば、携帯端末４００の機種名、カメラなのかオーディオプレーヤーなのかなどの端末種類、設定されているデータの形式、携帯端末４００の傾き検出部４０９で検出した傾き情報、端末認証情報を含んでいる。
　表示制御部４２３は、通信制御部４２２により表示処理装置１との間でデータの受信が行われる場合に、通信制御部４２２により受信されるデータを表すアイコンが、表示部４０１の表示領域外から移動してくるアニメーション表示を行う。また、表示制御部４２３は、通信制御部４２２により表示処理装置１との間でデータの送信が行われる場合に、通信制御部４２２により送信されるデータを表すアイコンが、表示部４０１の表示領域外に移動していくアニメーション表示を行う。
　上述した表示処理装置１及び携帯端末４００との間でデータの送受信が行われることになる。本実施形態では、データの送受信を、表示処理装置１のユーザインタフェース画面に対する操作をトリガーとして行う。
　図５は、本実施形態の表示処理装置１で端末連携プログラム２３を実行した時のユーザインタフェース画面の例を示した図である。図５（ａ）に示されるように、表示処理装置１の表示部１１は、記憶部１４に記憶されている３つの動画データ、３つの音楽データ、及び２つの写真データを、それぞれ異なる種類のアイコンで表示している。さらに、表示部１１は、携帯端末４００側で選択されているデータをアップロードさせるトリガーとなるアップロードアイコン３１を表示している。本実施形態では、携帯端末４００のデータをアップロードする際（図５（ａ）で示す段階で）、当該データの選択がなされているものとする。
　複数の携帯端末４００、４５０のうち、表示部１１のユーザインタフェース画面に対して携帯端末４００で接触する場合について説明する。本実施形態にかかる表示処理装置１は、携帯端末４００を連携する端末として特定し、設定された動画データのアップロードが行われる。その際に行われる動作について説明する。
　図６は、表示処理装置１と携帯端末４００との連携処理が行われる際のタイミングチャートを示した図である。
　携帯端末４００、４５０は、表示処理装置１に近づくことで、通信を開始する。本実施形態では、無線ＬＡＮで通信が行われる例とする。携帯端末４００、４５０が、表示処理装置１と同じＬＡＮの圏内に入ることで、相互間でＩＰアドレスを取得する。
　表示処理装置１は、複数の携帯端末４００、４５０のそれぞれから、その端末属性を示した属性情報を受信する（ステップＳ６０１、Ｓ６０２）。
　図５（ｂ）の例では、第１携帯端末４００が、表示部１１のアップロードアイコン３１上に置かれ、第２携帯端末４５０が、表示処理装置１の表示部１１から離れた位置に存在した状態を示している。なお、第２携帯端末４５０は、表示処理装置１と通信可能であるが、表示処理装置１付近になく、例えば他の人のカバンの中に入った状態でも良い。この場合、表示処理装置１は、第１携帯端末４００、第２携帯端末４５０の双方の携帯端末の属性情報を受信する。
　図６に戻り、本実施形態にかかる第１携帯端末４００、第２携帯端末４５０による属性情報の送信は、第１携帯端末４００、第２携帯端末４５０の設定が変更される毎（例えば設定されているデータが変更される毎）に行う（例えばステップＳ６０３）。なお、本実施形態は属性情報の送信のタイミングを制限するものではなく、例えば、表示処理装置１と定期的に属性情報の送信を行っても良い。
　また、表示処理装置１が第１携帯端末４００、第２携帯端末４５０の属性情報を受信した後、適切に属性情報を取得した旨のレスポンスを第１携帯端末４００、第２携帯端末４５０が受信した場合に、第１携帯端末４００、第２携帯端末４５０が、当該端末が有する画面に表示処理装置１との相互動作が可能になった旨のメッセージを表示してもよい。
　第１携帯端末４００が、アップロードアイコン３１上に置かれた瞬間、第１携帯端末４００の通信制御部４２２は、加速度検出部４０８が検出した加速度情報を、加速度検出信号として表示処理装置１に送信する（ステップＳ６０４）。
　一方、表示処理装置１の検出部１０２は、位置取得部１５から送信された検出信号（位置座標含む）により、アップロードアイコン３１付近に物体が接触もしくは非常に近い位置に接触したことを検出する。
　そして、判定部１０３が、検出信号を受信した時間と、第１携帯端末４００から加速度検出信号を受信した時間とが非常に近い場合（所定の閾値以内の場合）に、加速度検出信号を送信した第１携帯端末４００が表示部１１に接触したと判定し、当該第１携帯端末４００を連携対象として特定する。
　そして、判定部１０３は、アイコンデータテーブル３００を参照し、アップロードアイコン３１に関連付けられた複数のプログラムのうち、第１携帯端末４００の属性に基づいて、実行するプログラムを特定する。
　そして、起動部１０４が判定部１０３により特定されたプログラムを起動する。そして、起動したプログラムは、通信ＩＦ部１７を介して、第１携帯端末４００との間でデータの送受信を行う。
　その後、携帯端末４５０がアップロードアイコン３１上に置かれた場合に、検出部１０２が、位置取得部１５を介して検出信号（位置座標を含む）を受信することで、当該携帯端末４５０の接触を検出する。さらに、検出部１０２は、接触した位置座標を取得する。そして、通信制御部１０１が、携帯端末４５０から加速度検出信号を受信する（ステップＳ６０５）。そして、判定部１０３が、アップロードアイコン３１に接触した携帯端末４５０を特定し、携帯端末４００が接触した時と同様の処理を行う。
　図７は、検出信号を受信した時間に対して、第１携帯端末４００から受信した加速度検出信号の時間、及び第２携帯端末４５０から受信した加速度検出信号の時間が非常に近い（所定の閾値以内）場合を示した図である。図７に示す例では、図６に示す例と同様に通信が開始され、属性情報の送信（ステップＳ７０１、Ｓ７０２、Ｓ７０３）が行われているものとする。
　その後、表示処理装置１の通信制御部１０１が、第１携帯端末４００からの加速度検出信号と、第２携帯端末４５０からの加速度検出信号とが、ほぼ同じタイミングで受信した（ステップＳ７０４、Ｓ７０５）ものとする。換言すれば、検出部１０２が接触を検知してから所定の閾値以内に、第１携帯端末４００及び第２携帯端末４５０から加速度検出信号を受信している。
　例えば、携帯端末４００が表示処理装置１の表示部１１にタッチしたタイミングと、カバンに入った状態の携帯端末４５０が、カバンごとどこかに衝突し、加速度を発生したタイミングと、がほぼ一致した場合が考えられる。さらには、第２携帯端末４５０で第１携帯端末４００と全く別の操作を行っていて、第２携帯端末４５０の画面をユーザが強くたたいたタイミングが、第１携帯端末４００が表示処理装置１の表示部１１にタッチしたタイミングと一致した等もあり得る。
　このように、判定部１０３が接触した端末を複数特定した場合に、誤った端末にデータの送受信制御を行うことを抑止するために、特定した複数の携帯端末４００、４５０とデータの送受信を行わず、画面上に「もう一度タッチしなおしてください」などのメッセージを表示し、再度、端末の接触を促すことが考えられる。これにより、ユーザが所望する携帯端末との間でデータの送受信を実現できる。
　また、判定部１０３が接触した端末を複数特定した場合に、再度接触を促すことに制限するものではなく、両方とも接触したものとみなして、両方の携帯端末に対して、対応するプログラムを実行してもよい。このように実施態様に応じて動作を決定する。
　図５（ｃ）は、アップロードが終了した後の画面例を示している。まず、アップロード終了後に、起動部１０４により起動されたプログラムが、アップロードされたデータの種別を判定し、当該データが動画、音楽、及び写真のいずれかを判別して、判別結果に応じて適切なアイコンを付与する。図５（ｃ）に示す画面例では、写真データ（画像データの一例）がアップロードされた例とする。このため、写真データが配置されている領域に、第１携帯端末４００からアップロードされた写真データを示すアイコン３２が追加表示されている。
　本実施形態においては、携帯端末４００からデータをアップロードさせる際に、表示制御部１０５は、携帯端末４００が検出された位置からデータが出てくるようなアニメーション表示を行う。
　図８は、表示制御部１０５の表示制御による画面遷移の例を示した図である。図８（ａ）においては、アップロードアイコン３１に携帯端末４００が配置された状況を示している。なお、携帯端末４００では、すでにアップロード対象のデータは選択されているものとする。
　図８の（ｂ）に示されるように、表示制御部１０５は、携帯端末４００を検出した位置を基準として、アップロード対象のデータのアイコンを、データのアップロード状況に応じて、拡大移動８０１させる表示を行う。なお、データのアイコンは、データ本体のアップロードを行う前に、アップロードしておく。そして、表示制御部１０５は、アップロードが完了したデータの比率に基づいて、当該アイコンが拡大するように表示制御を行う。　　　
　図８の（ｂ）に示す例では、携帯端末４００が配置されている位置を中心に拡大移動する。このように、表示制御部１０５は、携帯端末４００が配置された位置に応じて、アイコンの拡大移動を異ならせる。
　データのアップロードが終了すると、図８の（ｃ）に示されるように、表示制御部１０５は、アップロードアイコン３１内に、アップロードが完了したデータのアイコン８０２を表示する。
　その後、図８の（ｄ）に示されるように、表示制御部１０５は、当該アイコン８０３を、当該アイコンで示されるデータの種類に応じた格納先に移動させるアニメーション表示を開始する。
　図８の（ｅ）に示されるように、表示制御部１０５は、格納先までアイコンを移動した後、当該アイコン８０４の移動を終了する。
　このように、本実施形態にかかる表示制御部１０５は、携帯端末４００が検出された位置を基準に、表示制御部１０５が当該データを受信している状況に応じて、アイコンを移動させるアニメーション表示を行う。なお、本実施形態は、アニメーション表示の態様を図８に示す例に制限するものではない。
　他の態様としては、例えば図９に示す態様が考えられる。図９は、変形例にかかる表示制御部１０５の表示制御による画面遷移の例を示した図である。図９（ａ）に示されるように、携帯端末４００に記憶されている写真データは、携帯端末４００の画面上にアイコンとして表示されている。そして、携帯端末４００が表示処理装置１の表示部１１に触れた際に、データ転送が開始される。
　次に、図９（ｂ）～（ｄ）に示されるように、表示制御部１０５は、データの転送の進行度合い、具体的にはデータの総容量に対する、転送完了したデータ量の割合に応じて、表示されているアイコンの割合が変化するようにアニメーションさせる。なお、表示制御部１０５側は、アップロードが進むにつれて表示されているアイコンの割合が大きくなっていく。
　これと同期するように、携帯端末４００の表示制御部４２３が、データの総容量に対する、未転送のデータ量に応じて、表示されているアイコンの割合が変化するようにアニメーションさせる。なお、携帯端末４００の表示制御部４２３側は、アップロードが進むにつれて表示されているアイコンの割合が小さくなっていく。これにより、表示処理装置１と携帯端末４００との間で表示されるアイコンが同期する。
　さらに、表示制御部１０５が表示するアイコンの位置は、位置取得部１５によって取得された第１携帯端末４００の位置座標を基準に決定される。表示処理装置１の表示制御部１０５が表示するアイコンの位置と、第１携帯端末４００の表示制御部４２３が表示するアイコンの位置と、を合わせる。アイコンの位置等を同期させるために、携帯端末４００は、傾き情報を表示処理装置１に送信しておく。さらには、携帯端末４００は、携帯端末４００を特定するための機種情報や、画面サイズ、解像度等も、表示処理装置１に送信しておく。
　そして、図９（ｂ）で示す様に、変形例にかかる表示処理装置１は、受信した傾き情報、及び機種情報（または携帯端末４００のサイズ）から特定される携帯端末４００の外辺から出てくるように、アイコンを表示してもよい。
　これにより、表示制御部４２３が表示するアイコンの第１の部分と、表示制御部４２３が表示するアイコンの第２の部分と、が組み合わさる。これにより、利用者は、一つのアイコンのように認識できる。
　そして、図９（ｅ）に示されるように、表示制御部４２３は、データの転送完了時に、当該データを表すアイコン３２を表示する。その後、表示制御部４２３は、当該アイコン３２を、データの種別に応じて移動させる。
　表示制御部４２３が、上述した表示制御を行うことで、ユーザは、データの通信状況を認識できる。
　なお、端末連携プログラム２３は、第１携帯端末４００が表示部１１に接触したことを検出した場合に、すぐにデータ転送を開始するのではなく、第１携帯端末４００に確認のダイアログを表示し、ユーザに動作の確認を求めてもよい。これにより、第１携帯端末４００が接触したか否かの判定を誤った時にユーザの意思に反したデータ転送を抑止できる。
　また、表示処理装置１が、携帯端末４００の機種情報、解像度、画面サイズの情報を受信した際に、携帯端末４００に表示されるアイコンとサイズが合うように、アイコンのサイズを調整してもよい。これにより、携帯端末４００及び表示処理装置１上で、アイコンを同一、又はほぼ同一サイズで表示できる。
　また、データ転送の途中で携帯端末４００が表示部１１から離れた場合、表示処理装置１及び携帯端末４００の間のデータ転送を中止する。このように、ユーザは特段のキャンセルのための操作をせずに、直感的にデータ転送の中止を指示できる。
　また、表示制御部１０５は、携帯端末４００との間のデータの転送の開始前、あるいは転送中に、図９（ａ）及び（ｂ）のような「転送ロック」「転送中断」のダイアログを表示してもよい。表示処理装置１が、当該ダイアログに対する選択を受け付けていない場合、転送を開始した後に、携帯端末４００が表示部１１から離された際、データ転送が中止される。一方、「転送ロック」の選択を受け付けている場合、携帯端末４００が表示部１１から離れた際であっても、データ転送が継続される。このように、ユーザの要求に応じたデータの転送が実現できる。
　また、表示処理装置１が「転送中断」の選択を受け付けた場合に、表示処理装置１及び携帯端末４００の間のデータ転送が中断される。つまり、「転送ロック」の選択を受け付けた場合、携帯端末４００を表示部１１から離しただけではデータ転送は中止されないが、ユーザから「転送中断」の選択を受け付けた場合には、データ転送を中断できる。これにより、ユーザが、「転送ロック」を選択したにも拘わらず、やはりデータ転送を中断したいと考えた時に、「転送中断」を選択することで、データ転送を中断できる。
　そして、表示制御部１０５は、データの転送が完了した後、データの種類に応じた位置まで、アイコンを移動させるアニメーション表示を行う。図１０は、表示制御部１０５によるアイコンの移動先の例を示した図である。図１０に示されるように、受信したデータが動画データの場合、表示制御部１０５は、当該動画データのアイコンを、位置１００３まで移動させる。受信したデータが音楽データの場合、表示制御部１０５は、当該音楽データのアイコンを、位置１００２まで移動させる。受信したデータが写真データの場合、表示制御部１０５は、当該写真データのアイコンを、位置１００１まで移動させる。
　また、本実施形態は、携帯端末４００が接触した場合にアップロードが開始される領域を、アップロードアイコン３１に制限するものではない。図１１は、変形例にかかるアップロードが開始される領域の例を示している。図１１のアップロード領域１１０１のように、表示部１１の表示領域内であれば良い。
　次に、表示処理装置１から携帯端末４００にデータをダウンロードさせる場合について説明する。表示処理装置１から、携帯端末４００にデータをダウンロードさせる場合、携帯端末４００で、表示部１１に表示されたアイコンに接触することで、当該アイコンで示されるデータのダウンロードが開始される。図１２は、表示処理装置１からデータをダウンロードさせる際の携帯端末４００の配置を示した図である。図１２に示す様に、携帯端末４００をアイコン１２０１上に配置することで、アイコン１２０１で示される写真データのダウンロードが開始される。
　表示制御部１０５は、ダウンロードさせる際も、アイコンが携帯端末４００に移動するようなアニメーション表示を行う。図１３は、本実施形態にかかる表示制御部１０５による表示制御で行われる画面遷移の例を示した図である。図１３（ａ）に示されるように、携帯端末４００が、アイコン１３０１上に置かれたものとする。これにより、検出部１０２が、携帯端末４００の接触を検出し、当該携帯端末４００が接触しているアイコン１３０１で示されるデータが、ダウンロード対象として特定される。
　そして、表示制御部１０５は、表示処理装置１と携帯端末４００との間のダウンロード状況に応じて、アイコン１３０１を、携帯端末４００が配置されている位置を中心に縮小移動するよう、表示制御する。
　つまり、図１３（ｂ）のアイコン１３０２、（ｃ）のアイコン１３０３で示されるように、表示制御部１０５は、携帯端末４００に対するダウンロードが進むにつれて、アイコンが縮小移動するように表示制御する。
　本実施形態にかかる表示制御部１０５は、ダウンロード対象のデータを示すアイコンが、携帯端末４００に向かって縮小移動していくよう表示制御する。換言すれば、表示制御部１０５は、携帯端末４００の位置に応じて、アイコンの縮小移動のアニメーションを異ならせる。
　図１４は、アイコン１４０１の左上に携帯端末４００が配置された場合に、表示制御部１０５が行う当該アイコン１４０１の縮小移動を示した図である。図１４の矢印１４１０で示されるように、携帯端末４００に向かって、アイコン１４０１、アイコン１４０２、アイコン１４０３の順に縮小表示されていく。
　図１５は、アイコン１５０１の右上に携帯端末４００が配置された場合に、表示制御部１０５が行う当該アイコン１５０１の縮小移動を示した図である。図１５の矢印１５１０で示されるように、携帯端末４００に向かって、アイコン１５０１、アイコン１５０２、アイコン１５０３の順に縮小表示されていく。
　図１６は、アイコン１６０１の中央付近に携帯端末４００が配置された場合に、表示制御部１０５が行う当該アイコン１６０１の縮小移動を示した図である。図１６の矢印１６１０で示されるように、携帯端末４００に向かって、アイコン１６０１、アイコン１６０２、アイコン１６０３の順に縮小表示されていく。
　本実施形態にかかる表示制御部１０５は、上述したアニメーション表示を行うことで、ユーザに対して視覚的にデータが、表示処理装置１から携帯端末４００にダウンロードが行われていることを認識させることができる。また、表示制御部１０５が、ダウンロード状況に応じて、アイコンを縮小させることで、ユーザに対してダウンロードの進行度合いを認識させることもできる。
　本実施形態は、アイコンに携帯端末４００が接触した場合にダウンロード、アップロードが開始されることに制限するものではなく、様々な態様が考えられる。例えば、図１７は、アイコン１７０１で示されるデータのためのダウンロードボタン１７１１を表示した変形例を示した図である。図１７に示す例では、ダウンロードボタン１７１１に携帯端末４００が接触した場合に、アイコン１７０１で示されるデータのダウンロードが開始される。このような変形例の場合でも、表示制御部１０５は、携帯端末４００が接触している位置に向かって、アイコン１７０１、１７０２、１７０３の順に縮小させるアニメーション表示を行う。
　また、本実施形態では、データの通信状況に応じて、アイコン全体を拡大、縮小させる例について説明したが、様々態様が考えられる。例えば、ダウンロードさせる携帯端末４００に向かって、アイコンの縦方向又は横方向に限り、拡大、縮小を行っても良い。
　図１８は、変形例にかかる表示制御部１０５による表示制御で行われる画面遷移の例を示した図である。図１８（ａ）に示されるように、携帯端末４００が、アイコン１８０１上で接触したものとする。これにより、検出部１０２が、携帯端末４００の接触を検出し、当該携帯端末４００が接触しているアイコン１８０１で示されるデータが、ダウンロード対象として特定される。
　そして、表示制御部１０５は、表示処理装置１と携帯端末４００との間のダウンロード状況に応じて、アイコン１８０１を、携帯端末４００が接触している位置を基準として、横軸方向のみ縮小移動するよう、表示制御する。
　つまり、図１８（ｂ）のアイコン１８０２、（ｃ）のアイコン１８０３で示されるように、表示制御部１０５は、携帯端末４００に対するダウンロードが進むにつれて、アイコンが横軸方向のみ縮小移動するように表示制御する。また、アイコン１８０１が複数枚の画像で構成されている場合、ダウンロード状況に応じて、アイコンの絵柄を変化させても良い。図１８では、アイコンの中身がだんだん押しつぶされて、中の顔の表情が引きつっていくようにアニメーション表示させる例とする。
　また、アイコンのアニメーション表示は、縮小、拡大制御に制限するものではなく、アイコンの色、輝度等を変化させてもよい。図１９は、変形例にかかる表示制御部１０５による輝度変化による画面遷移の例を示した図である。図１９（ａ）に示されるように、携帯端末４００が、アイコン１９０１上で接触したものとする。これにより、検出部１０２が、携帯端末４００の接触を検出し、当該携帯端末４００が接触しているアイコン１９０１で示されるデータが、ダウンロード対象として特定される。
　そして、表示制御部１０５は、表示処理装置１と携帯端末４００との間のダウンロード状況に応じて、アイコン１９０１を、携帯端末４００が接触している位置を基準に、当該基準から最も離れた領域から、輝度及び色を変化させるアニメーション表示を行う。
　つまり、図１９（ｂ）のアイコン１９０２、（ｃ）のアイコン１９０３で示されるように、表示制御部１０５は、携帯端末４００に対するダウンロードが進むにつれて、携帯端末４００と接触している位置から離れた左辺から徐々に輝度を高くしていく（色を白に変化させていく）アニメーション表示を行う。これにより、時間経過と共に、絵柄が無くなっていくようなアニメーション表示がなされる。よって、アイコン１９０１～１９０３で示されたデータが、携帯端末４００に入っていくように、ユーザに認識させることができる。
　ダウンロードする際に表示するアニメーションの別態様についても説明する。図２０は、変形例にかかる表示制御部１０５の表示制御による画面遷移の例を示した図である。図２０（ａ）に示されるように、携帯端末４００が、アイコン２０００上で接触したものとする。これにより、検出部１０２が、携帯端末４００の接触を検出し、当該携帯端末４００が接触しているアイコン２０００で示されるデータが、ダウンロード対象として特定される。
　次に、図２０（ｂ）のアイコン２００１、（ｃ）のアイコン２００２に示されるように、表示制御部１０５は、携帯端末４００の画面サイズ、解像度に合わせて、アイコンを縮小させるアニメーション表示を行う。この画面サイズ、解像度は、携帯端末４００が、予め表示処理装置１に送信しておく。また、表示処理装置１が、携帯端末４００から受信した機種情報に基づいて、画面サイズ、解像度を特定しても良い。
　図２０（ｄ）に示されるように、表示制御部１０５が、データの転送の進行度合い、具体的にはデータの総容量に対する、転送完了したデータ量の割合に応じて、アイコン２００３が携帯端末４００を検出された位置に移動していくように、アニメーション表示する。
そして、図２０（ｅ）に示されるように、表示制御部１０５は、ダウンロードが完了した時に、ダウンロードさせていた当該データを表すアイコンの表示を終了する一方、携帯端末４００の表示制御部４２３が、ダウンロードが完了したデータを表すアイコン２００４全体を表示する。これにより、ユーザはデータのダウンロードが完了したことを認識できる。
　次に、当該変形例にかかる表示処理装置１と携帯端末４００とにより、ダウンロード中に表示されるアイコンについて説明する。図２１は、ダウンロード中の表示処理装置１と携帯端末４００との表示態様を示した図である。
　図２１に示す例では、携帯端末４００が、表示処理装置１に対して傾き情報（θ）、画面サイズ、及び解像度を送信しているものとする。その後、表示処理装置１が、携帯端末４００に対して、携帯端末４００が表示するためのアイコンデータを生成し、携帯端末４００に送信しているものとする。さらには、表示処理装置１が、携帯端末４００に対して、左側からアイコンを挿入するアニメーション表示を行うことを通知しておく。
　まず、表示処理装置１の表示制御部１０５が、アイコン２１０１を、携帯端末４００の画面データに応じて縮小させる。
　その後、表示処理装置１の表示制御部１０５が、当該傾き（θ）だけ、縮小したアイコン２１０２を回転させる。その後、表示制御部１０５が、携帯端末４００の左辺に相当する表示部１１内の位置を基点に、ダウンロードしていないデータの割合に応じて、回転後のアイコンの一部２１１０が、携帯端末４００に移動していくようにアニメーション表示する。
　一方、携帯端末４００の表示制御部４２３は、表示領域の左側から、ダウンロード完了したデータの割合に応じて、アイコンの一部２１１１をアニメーション表示する。
　そして、携帯端末４００の表示制御部４２３、及び表示処理装置１の表示制御部１０５は、ダウンロード状況に応じて表示するアイコンを変化させる。これにより、携帯端末４００、及び表示処理装置１により、アイコンの表示を同期させることができる。
　上述した例では、携帯端末４００で表示処理装置１の表示領域に接触した場合について説明した。これに対し、表示部１１上に表示されているアイコンに対する接触を検出したにもかかわらず、どの携帯端末（携帯端末４００含む）からも加速度検出信号を受信していない場合、判定部１０３は、アイコンには携帯端末以外（例えば手、指）で接触したものと判定し、そのアイコンが示しているデータ（例えば、動画データ、又は写真データ）の再生、表示を行う。
　次に、本実施形態にかかる表示処理装置１における、携帯端末４００との間で通信を開始するまでの処理について説明する。図２２は、本実施形態にかかる表示処理装置１における上述した処理の手順を示すフローチャートである。
　通信ＩＦ部１７は、通信可能な携帯端末があるか否かを検出する（ステップＳ２２０１）。検出しなかった場合は（ステップＳ２２０１：Ｎｏ）、通信可能な携帯端末を検出するまでステップＳ２２０１の処理を繰り返す。一方、通信ＩＦ部１７が、通信可能な携帯端末を検出した場合（ステップＳ２２０１：Ｙｅｓ）、検出した携帯端末の各々と通信を開始する。そして、通信ＩＦ部１７を介して、端末連携プログラム２３が、携帯端末各々の属性情報を取得する（ステップＳ２２０２）。
　その後、検出部１０２が、位置取得部１５からの検出信号に基づいて、表示部１１に対する接触が検出されたか否かを判定する（ステップＳ２２０３）。検出部１０２が、表示部１１に対する接触が検出されたと判定した場合（ステップＳ２２０３：Ｙｅｓ）、検出部１０２は、検出信号に基づいて、接触が検出された位置座標を取得する（ステップＳ２２０４）。一方、表示部１１に対する接触が検出されなかったと判定した場合（ステップＳ２２０３：Ｎｏ）、ステップＳ２２０３の処理が繰り返される。
　次に、通信制御部１０１が、通信ＩＦ部１７を介して、携帯端末から加速度検出信号を受信したか否かを判定する（ステップＳ２２０５）。加速度検出信号を受信していない場合（ステップＳ２２０５：Ｎｏ）、携帯端末が接触したのではなく、人の指などが接触したものと見なして、位置座標に示される位置に人の指などが接触した場合の処理（プログラム）を特定する（ステップＳ２２０９）。そして、起動部１０４が、特定した処理（プログラム）を実行する（ステップＳ２２１０）。特定した処理としては、例えば、接触した位置に存在するアイコンで対応付けられたデータ（動画データ、音楽データ、写真データ）の再生、表示等とする。
　一方、通信制御部１０１が、加速度検出信号を受信した場合（ステップＳ２２０５：Ｙｅｓ）、判定部１０３が、検出信号に基づく接触を検出した時間と、加速度検出信号に基づく携帯端末で加速度が生じた時間と、が所定の閾値以内、換言すれば発生タイミングが近いか否かを判定する（ステップＳ２２０６）。所定の閾値以内でないと判定した場合（ステップＳ２２０６：Ｎｏ）、ステップＳ２２０９から処理を行う。
　一方、判定部１０３が所定の閾値以内と判定した場合（ステップＳ２２０６：Ｙｅｓ）、加速度検出信号を送信した携帯端末が接触したものとみなし、当該携帯端末をデータの送受信対象として特定する（ステップＳ２２０７）。
　そして、判定部１０３が、接触が生じた位置座標と、データの送受信対象の携帯端末の属性情報と、に対応するプログラムを特定する。そして、起動部１０４が、特定したプログラムを起動させる。これにより、表示処理装置１と携帯端末との間で通信が開始される（ステップＳ２２０８）。この際、携帯端末の属性情報に応じた処理が行われる。また、ステップＳ２２０８で、携帯端末の属性情報を再び取得しても良い。
　次に、本実施形態にかかるステップＳ２２０８で示した、プログラムを起動させて、通信を開始させるまでの処理について説明する。図２３は、本実施形態にかかる表示処理装置１における上述した処理の手順を示すフローチャートである。
　まずは、判定部１０３が、データの送受信対象として特定された携帯端末の属性情報を取得する（ステップＳ２３０１）。属性情報に含まれている情報としては、例えば対応可能なデータ形式、画面サイズ、実行可能な機能、及び通信方式等とする。表示処理装置１は、取得された携帯端末の属性を記憶する。なお、判定部１０３は、属性情報を、ネットワーク（インターネット含む）を介して取得してもよいし、表示処理装置１内のデータベースから取得しても良い。
　次に、判定部１０３、及び起動部１０４が、接触した（または接触した位置の近傍に存在する）アイコンが動画に関連している場合の処理を行う（ステップＳ２３０２）。なお、例えば、携帯端末で再生可能にするための変換等を行った後、転送する。
　そして、判定部１０３、及び起動部１０４が、接触した（または接触した位置の近傍に存在する）アイコンが音楽に関連している場合の処理を行う（ステップＳ２３０３）。例えば、携帯端末で再生可能にするための変換等を行った後、転送する。
　次に、判定部１０３、及び起動部１０４が、接触した（または接触した位置の近傍に存在する）アイコンが写真に関連している場合の処理を行う（ステップＳ２３０４）。
　そして、判定部１０３、及び起動部１０４が、接触した（または接触した位置の近傍に存在する）アイコンがアップロードに関連している場合の処理を行う（ステップＳ２３０５）。
　上述したように、携帯端末により接触があった場合、アイコンが指し示すデータの種類に応じた処理を行った後、転送を行う。また、転送先の携帯端末が無線ＬＡＮによる通信が可能か、Bluetooth（登録商標）による通信が可能か否かに基づいて、データを転送する際の通信手段を変更してもよい。
　次に、ステップＳ２３０２の具体的な処理を説明する。図２４は、本実施形態にかかる表示処理装置１における、接触したアイコンが動画に関連する場合の処理の手順を示すフローチャートである。
　まず、判定部１０３が、検出信号に含まれる位置座標から、携帯端末４００が接触したアイコンが、ファイルVideo1であるか否かを判定する（ステップＳ２４０１）。ファイルVideo1であると判定した場合（ステップＳ２４０１：Ｙｅｓ）、判定部１０３は、転送対象をファイルVideo1に設定する（ステップＳ２４０２）。その後、ステップＳ２４０７の処理に進む。
　一方、判定部１０３が、携帯端末４００が接触したアイコンが、ファイルVideo1ではないと判定した場合（ステップＳ２４０１：Ｎｏ）、接触したアイコンが、ファイルVideo2であるか否かを判定する（ステップＳ２４０３）。ファイルVideo2であると判定した場合（ステップＳ２４０３：Ｙｅｓ）、判定部１０３は、転送対象をファイルVideo2に設定する（ステップＳ２４０４）。その後、ステップＳ２４０７の処理に進む。
　一方、判定部１０３が、接触した位置に存在するアイコンが、ファイルVideo2でないと判定した場合（ステップＳ２４０３：Ｎｏ）、接触したアイコンが、ファイルVideo3であるか否かを判定する（ステップＳ２４０５）。ファイルVideo3であると判定した場合（ステップＳ２４０５：Ｙｅｓ）、判定部１０３は、転送対象をファイルVideo3に設定する（ステップＳ２４０６）。その後、ステップＳ２４０７の処理に進む。ファイルVideo3ではないと判定した場合（ステップＳ２４０５：Ｎｏ）、動画に関する処理は特に行わないものとする。
　ステップＳ２４０２、Ｓ２４０４又はＳ２４０６の後、判定部１０３が、取得した属性情報に基づいて、動画データの送信先の携帯端末において、表示サイズ1920×1080で再生可能か否かを判定する（ステップＳ２４０７）。なお、ファイルVideo1、ファイルVideo2、ファイルVideo3の解像度は、1920×1080とする。
　判定部１０３が、携帯端末において表示サイズ1920×1080で再生可能と判定した場合（ステップＳ２４０７：Ｙｅｓ）、ステップＳ２４０９に進む。判定部１０３が、携帯端末において表示サイズ1920×1080で再生できないと判定した場合（ステップＳ２４０７：Ｎｏ）、起動部１０４が、動画データを縮小させる縮小プログラムを起動し、当該縮小プログラムが、動画データを640×480に縮小処理する（ステップＳ２４０８）。
　ステップＳ２４０７、Ｓ２４０８の後、起動部１０４が、動画転送プログラムを起動する。そして、当該動画転送プログラムが、転送対象として設定された動画データ転送を開始する（ステップＳ２４０９）。
　次に、図２３のステップＳ２３０３の具体的な処理を説明する。図２５は、本実施形態にかかる表示処理装置１における、接触したアイコンが音楽に関連する場合の処理の手順を示すフローチャートである。
　まず、判定部１０３が、検出信号に含まれる位置座標から、接触したアイコンが、ファイルAudio1であるか否かを判定する（ステップＳ２５０１）。ファイルAudio1であると判定した場合（ステップＳ２５０１：Ｙｅｓ）、判定部１０３は、転送対象をファイルAudio1に設定する（ステップＳ２５０２）。その後、ステップＳ２５０７の処理に進む。
　一方、判定部１０３が、接触したアイコンが、ファイルAudio1ではないと判定した場合（ステップＳ２５０１：Ｎｏ）、接触したアイコンが、ファイルAudio2であるか否かを判定する（ステップＳ２５０３）。ファイルAudio2であると判定した場合（ステップＳ２５０３：Ｙｅｓ）、判定部１０３は、転送対象をファイルAudio2に設定する（ステップＳ２５０４）。その後、ステップＳ２５０７の処理に進む。
　一方、判定部１０３が、接触したアイコンが、ファイルAudio2ではないと判定した場合（ステップＳ２５０３：Ｎｏ）、接触したアイコンが、ファイルAudio3であるか否かを判定する（ステップＳ２５０５）。ファイルAudio3であると判定した場合（ステップＳ２５０５：Ｙｅｓ）、判定部１０３は、転送対象をファイルAudio3に設定する（ステップＳ２５０６）。その後、ステップＳ２５０７の処理に進む。ファイルAudio3ではないと判定した場合（ステップＳ２５０５：Ｎｏ）、音楽に関する処理は特に行わないものとする。
　ステップＳ２５０２、Ｓ２５０４、又はＳ２５０６の後、判定部１０３が、取得した属性情報に基づいて、第１のデータ形式（例えば、ＡＡＣ）でのみ再生可能か否かを判定する（ステップＳ２５０７）。音楽データのデータ形式は複数種類（例えばＡＡＣ、ＭＰ３）存在するものとする。
　判定部１０３が、第１のデータ形式以外でも再生可能と判定した場合（ステップＳ２５０７：Ｎｏ）、音楽データをそのまま送信すれば良いため、ステップＳ２５０９に進む。判定部１０３が、携帯端末が第１のデータ形式でのみ再生可能と判定した場合（ステップＳ２５０７：Ｙｅｓ）、起動部１０４が、音楽データのデータ形式を第１のデータ形式に変換させる変換プログラムを起動し、当該変換プログラムが、音楽データを第１のデータ形式に変換処理を行う（ステップＳ２５０８）。
　ステップＳ２５０７、Ｓ２５０８の後、起動部１０４が、音楽転送プログラムを起動する。そして、音楽転送プログラムが、携帯端末に対して転送の要求を行う（ステップＳ２５０９）。その後、音楽転送プログラムが、転送対象として設定された音楽データの転送を開始する（ステップＳ２５１０）。
　次に、図２３のステップＳ２３０４の具体的な処理を説明する。図２６は、本実施形態にかかる表示処理装置１における、接触したアイコンが写真に関連する場合の処理の手順を示すフローチャートである。
　まず、判定部１０３が、検出信号に含まれる位置座標から、接触したアイコンが、ファイルPhoto1であるか否かを判定する（ステップＳ２６０１）。ファイルPhoto1であると判定した場合（ステップＳ２６０１：Ｙｅｓ）、判定部１０３は、転送対象をファイルPhoto1に設定する（ステップＳ２６０２）。その後、ステップＳ２６０５の処理に進む。
　一方、判定部１０３が、接触したアイコンが、ファイルPhoto1ではないと判定した場合（ステップＳ２６０１：Ｎｏ）、接触したアイコンが、ファイルPhoto2であるか否かを判定する（ステップＳ２６０３）。ファイルPhoto2であると判定した場合（ステップＳ２６０３：Ｙｅｓ）、判定部１０３は、転送対象をファイルPhoto2に設定する（ステップＳ２６０４）。その後、ステップＳ２６０５の処理に進む。ファイルPhoto2ではないと判定した場合（ステップＳ２６０３：Ｎｏ）、写真に関する処理は特に行わないものとする。
　ステップＳ２６０２、又はＳ２６０４の後、判定部１０３が、取得した属性情報に基づいて、携帯端末の通信方式が無線ＬＡＮであるか否かを判定する（ステップＳ２６０５）。本実施形態では通信方式として、無線ＬＡＮとBluetooth（登録商標）の２種類から選択されるものとする。
　判定部１０３が、無線ＬＡＮで通信可能と判定した場合（ステップＳ２６０５：Ｙｅｓ）、伝送路を無線ＬＡＮに設定する（ステップＳ２６０６）。一方、判定部１０３が、無線ＬＡＮで通信できないと判定した場合（ステップＳ２６０５：Ｎｏ）、伝送路をBluetooth（登録商標）に設定する（ステップＳ２６０７）。
　そして、起動部１０４が、写真転送プログラムを起動する。写真転送プログラムは、写真データの転送の開始要求を携帯端末に要求する（ステップＳ２６０８）。そして、写真転送プログラムが、転送対象として設定されたファイル（写真データ）の転送を開始する（ステップＳ２６０９）。
　本実施形態では、データの転送時にアイコンのアニメーション表示を行う。そこで、次に、図２４のステップＳ２４０９の動画転送時の処理を説明する。図２７は、本実施形態にかかる表示処理装置１が、携帯端末４００に動画データをダウンロードさせる手順を示すフローチャートである。
　まず、通信制御部１０１が、動画転送プログラムと連携して、携帯端末４００から、携帯端末４００で検出された傾き情報と、当該携帯端末４００を識別する機種情報と、画面サイズと、解像度と、を受信する（ステップＳ２７０１）。なお、表示処理装置１側で、機種情報から画面サイズ、解像度を特定しても良い。
　次に、動画転送プログラムが、検出部１０２が接触を検出した位置座標、受信した傾き情報から、携帯端末４００が表示部１１上で接触している領域を特定する（ステップＳ２７０２）。また、携帯端末４００の接触している領域の特定の精度を向上するために、携帯端末４００のサイズ等を取得しても良い。
　その後、動画転送プログラムが、携帯端末４００の画面サイズ及び解像度に基づいて、転送対象となる動画データを表すアイコンを生成する（ステップＳ２７０３）。
　次に、通信制御部１０１が、動画転送プログラムと連携して、生成したアイコンを転送する（ステップＳ２７０４）。転送されたアイコンは、携帯端末４００で通信状況を表示するために用いられる。
　さらに、通信制御部１０１は、動画転送プログラムと連携して、表示部１１における、動画データの受け渡し方向を通知する（ステップＳ２７０５）。これにより、携帯端末４００は、受け渡し方向から動画データが移動してくるように、アイコンのアニメーション表示を行う。
　その後、表示制御部１０５は、動画転送プログラムと連携して、動画データの転送状況に応じて、受け渡し方向から動画データが移動してくるように、アイコンのアニメーション表示を行う（ステップＳ２７０６）。
　図２７では、動画データを転送する場合のアニメーション表示について説明したが、音楽データ、写真データについても同様の手順で処理を行うものとして、説明を省略する。　　　
　次に、図２３のステップＳ２３０５の具体的な処理を説明する。図２８は、本実施形態にかかる表示処理装置１における、接触したアイコンがアップロードに関連する場合の処理の手順を示すフローチャートである。
　まず、判定部１０３が、検出信号に含まれる位置座標から、接触したアイコンが、アップロードアイコンか否かを判定する（ステップＳ２８０１）。アップロードアイコンではないと判定した場合（ステップＳ２８０１：Ｎｏ）、処理を終了する。
　一方、接触したアイコンが、アップロードアイコンであると判定した場合（ステップＳ２８０１：Ｙｅｓ）、通信制御部１０１が、携帯端末４００側で送信対象として設定されているデータの種類を問い合わせる（ステップＳ２８０２）。
　そして、判定部１０３が、通信制御部１０１が受信した問い合わせ結果に基づいて、携帯端末４００側で転送データが設定されているか否かを判定する（ステップＳ２８０３）。設定されてないと判定した場合（ステップＳ２８０３：Ｎｏ）、起動部１０４が、メッセージの表示プログラムを起動する。そして、当該表示プログラムが、表示制御部１０５と連携して、「このアイコンにはデータ転送したいデバイスでデータを選択した後にタッチして下さい」等の選択メッセージを表示する（ステップＳ２８０４）。その後、ステップＳ２８０２の処理に進む。
　一方、判定部１０３が、転送データが設定されていると判定した場合（ステップＳ２８０３：Ｙｅｓ）、転送データが動画データであるか否かを判定する（ステップＳ２８０５）。動画データであると判定した場合（ステップＳ２８０５：Ｙｅｓ）、起動部１０４が、動画転送プログラムを起動する。そして、当該動画転送プログラムが、動画データフォルダを転送先に指定し（ステップＳ２８０６）、ステップＳ２８１３の処理に進む。
　一方、判定部１０３が、転送データが動画データでないと判定した場合（ステップＳ２８０５：Ｎｏ）、転送データが音楽データであるか否かを判定する（ステップＳ２８０７）。転送データが音楽データであると判定した場合（ステップＳ２８０７：Ｙｅｓ）、起動部１０４が、音楽転送プログラムを起動する。そして、当該音楽転送プログラムが、音楽データフォルダを転送先に指定し（ステップＳ２８０８）、ステップＳ２８１３の処理に進む。
　一方、判定部１０３が、転送データが音楽データでないと判定した場合（ステップＳ２８０７：Ｎｏ）、転送データが写真データであるか否かを判定する（ステップＳ２８０９）。転送データが写真データであると判定した場合（ステップＳ２８０９：Ｙｅｓ）、起動部１０４が、写真転送プログラムを起動する。そして、写真転送プログラムが、写真データフォルダ用に、写真データの撮影日付を取得する（ステップＳ２８１０）。その後、写真転送プログラムが、取得した日付フォルダを転送先に指定し（ステップＳ２８１１）、ステップＳ２８１３の処理に進む。
　一方、判定部１０３が、転送データが写真データでないと判定した場合（ステップＳ２８０９：Ｎｏ）、起動部１０４が、転送プログラムを起動し、転送プログラムが、その他のデータフォルダを転送先に指定し（ステップＳ２８１２）、ステップＳ２８１３の処理に進む。
　その後、起動された各種転送プログラムは、データ転送確認画面を表示する（ステップＳ２８１３）。そして、当該各種転送プログラムが、「ＯＫ」の選択を受け付けたか否かを判定する（ステップＳ２８１４）。「ＯＫ」の選択を受け付けなかった場合（ステップＳ２８１４：Ｎｏ）、処理を終了する。
　一方、各種転送プログラムが、「ＯＫ」の選択を受け付けた場合（ステップＳ２８１４：Ｙｅｓ）に、携帯端末４００との間でデータを転送する（ステップＳ２８１５）。
　上述した処理手順により、データの転送が可能となる。上述した処理の説明では、起動するプログラムが転送プログラムの場合について説明した。しかしながら、起動するプログラムを、転送プログラムに制限するものではない。例えば、他の起動されるプログラムとして、電子決済用のプログラムを用いても良い。
　本実施形態では、データの転送時にアイコンのアニメーション表示を行う。そこで、次に、図２８のステップＳ２８１５のデータ転送時の処理を説明する。図２９は、本実施形態にかかる表示処理装置１における、携帯端末４００から動画データのアップロードを受け付ける際の手順を示すフローチャートである。
　まず、通信制御部１０１が、動画転送プログラムと連携して、携帯端末４００から、携帯端末４００で検出された傾き情報と、当該携帯端末４００を識別する機種情報と、画面サイズと、解像度と、を受信する（ステップＳ２９０１）。なお、表示処理装置１側で、機種情報から画面サイズ、解像度を特定しても良い。
　次に、動画転送プログラムが、検出部１０２が接触を検出した位置座標、受信した傾き情報から、携帯端末４００が表示部１１上で接触している領域を特定する（ステップＳ２９０２）。また、携帯端末４００の接触している領域の特定の精度を向上するために、携帯端末４００のサイズ等を取得しても良い。
　その後、通信制御部１０１が、携帯端末４００から、転送対象の動画データを表すアイコンを受信する（ステップＳ２９０３）。
　さらに、通信制御部１０１は、動画転送プログラムと連携して、表示部１１における、動画データの取り出し方向を通知する（ステップＳ２９０４）。これにより、携帯端末４００は、取り出し方向に動画データが移動してくるように、アイコンのアニメーション表示を行う。
　そして、通信制御部１０１は、動画転送プログラムと連携して、携帯端末４００から、動画データの受信を開始する（ステップＳ２９０５）。
　その後、表示制御部１０５は、動画転送プログラムと連携して、動画データの転送状況に応じて、取り出し方向に動画データが移動していくように、アイコンのアニメーション表示を行う（ステップＳ２９０６）。
　そして、通信制御部１０１は、動画データを全て受信した後、携帯端末４００からの動画データの受信を終了する（ステップＳ２９０７）。
　なお、本実施形態では、転送完了したデータ量に応じて、アイコンをアニメーション表示する例について説明した。しかしながら、アイコンの表示態様を、転送量に比例させることに制限するものではない。
　本実施形態は、アニメーション表示の開始を、データの転送の開始と同時に行うことに制限するものではなく、データの転送動作と関連したタイミングであればよい。例えば、転送終了したタイミングでアニメーション表示を開始しても良いし、アイコンに接触したタイミングでアニメーション表示を開始しても良い。
　また、本実施形態では、データを表す表示情報をアイコンに制限するものではなく、データを表す画像データであれば良く、例えばサムネイル等であっても良い。サムネイルを用いた場合、転送中のデータの内容が何であるかを、ユーザに認識させるのが容易になる。
　また、本実施形態では、表示処理装置１が、テレビジョン表示装置のように、表示部１１が垂直に配置されているため、携帯端末４００の傾き情報を受信することで、携帯端末４００が接触している領域を特定する例について説明した。しかしながら、表示部１１が垂直に配置されている場合に制限するものではなく、水平等で配置されていてもよい。この場合、方位磁石機能付きの携帯端末から方位情報を取得することで、携帯端末が接触している領域を特定できる。
　以上に示した本実施形態の表示処理装置１では、携帯端末による表示部１１のアイコンへの接触があった場合に、取得した加速度検出信号から、接触された携帯端末を特定した上で、当該携帯端末に転送するためのプログラムを起動している。そのため、表示処理装置１と送受信可能な携帯端末が複数存在する場合でも、ユーザが意図する携帯端末との間で転送することを可能とした。これにより誤送信を抑止し、ユーザの利便性を向上させることができる。
　また、起動するプログラムに対して適切な携帯端末の属性情報を渡すことで、プログラムは携帯端末に応じてプログラムを実行することができ、利便性を向上させることができる。
　上述した表示処理装置１においては、転送データの状況に応じたアニメーション表示を行うことで、ユーザは転送状況を容易に把握できる。さらには、携帯端末が置かれた位置に応じて、表示態様を異ならせることで、ユーザに対して現在行われている処理を直感的に認識させることが容易になる。
　さらには、データ本体の転送を行う前に、当該データを表すアイコンの転送を行うことで、どのようなデータを転送するのかユーザに認識させるのが容易になる。さらには、表示処理装置１と携帯端末４００との間で表示するアイコンを同期させることができる。これにより、視認性が向上する。
　本発明の実施形態を説明したが、この実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。この新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。この実施形態やその変形は、発明の範囲や要旨に含まれるとともに、請求の範囲に記載された発明とその均等の範囲に含まれる。

Claims (9)

  1. 　表示領域を有する表示部と、
    　前記表示領域内で接触を検出する検出部と、
    　通信端末との間でデータの送受信を可能とする通信部と、
    　前記検出部により前記表示領域内に前記通信端末の接触が検出され、且つ前記通信部により前記通信端末との間でデータを送受信する場合に、前記通信部により送受信される前記データを表す表示情報を、前記通信端末の接触が検出された位置を基準に移動させる、アニメーション表示を行う表示制御部と、
    　を備える表示処理装置。
  2. 　通信端末との間でデータの送受信を可能とする通信部と、
    　表示部の表示領域内に対する前記通信端末の接触を検出部が検出し、且つ前記通信部により前記通信端末との間でデータを送受信する場合に、前記通信部により送受信される前記データを表す表示情報を、前記通信端末の接触が検出された位置を基準に移動させる、アニメーション表示を行う表示制御部と、
    　を備える表示処理装置。
  3. 　前記表示制御部は、前記通信端末に前記データの送信する場合に、当該データを表す表示情報を、前記通信端末に向かって移動させ、前記通信端末から前記データの受信する場合に、前記データを表す表示情報を、前記通信端末から出てくるように移動させる、アニメーション表示を行う、
    　請求項１又は２に記載の表示処理装置。
  4. 　前記表示制御部は、前記通信端末の接触が検出された位置に応じて、前記表示情報のアニメーション表示を異ならせる、
    　請求項１又は２に記載の表示処理装置。
  5. 　前記通信部は、前記検出部により接触が検出された前記通信端末から、当該通信端末の前記表示処理装置に対する傾きを示した傾き情報を受信し、
    　前記表示制御部は、前記傾き情報に基づいて、前記表示情報のアニメーション表示を行う、
    　請求項１又は２に記載の表示処理装置。
  6. 　前記表示制御部は、前記通信部による前記通信端末との間のデータの送受信の進行度合に基づいて、前記表示情報の表示態様を異ならせる、
    　請求項１又は２に記載の表示処理装置。
  7. 　前記通信部は、前記検出部により接触が検出された前記通信端末から、当該通信端末の機種、画面サイズ、及び解像度のうちいずれか一つ以上を受信すると共に、前記通信部により前記通信端末にデータを送信する場合に、当該通信端末の機種、画面サイズ、及び解像度に基づいて生成された、前記データを表す表示情報を、当該データを送信する前に、前記通信端末に送信する、
    　請求項１又は２に記載の表示処理装置。
  8. 　前記表示制御部が表示する表示情報は、データを表すアイコン又はサムネイルである、
    　請求項１又は２に記載の表示処理装置。
  9. 　表示部の表示領域内で接触を検出する検出ステップと、
    　通信端末との間でデータを送受信する通信ステップと、
    　前記検出ステップにより前記表示領域内に前記通信端末の接触が検出され、且つ前記通信ステップにより前記通信端末との間でデータを送受信する場合に、前記通信ステップにより送受信される前記データを表す表示情報を、前記通信端末の接触が検出された位置を基準に移動させる、アニメーション表示を行う表示制御ステップと、
    　を有する表示処理方法。
PCT/JP2013/058738 2013-02-05 2013-03-26 表示処理装置、及び表示処理方法 WO2014122796A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US14/194,145 US20140223359A1 (en) 2013-02-05 2014-02-28 Display processor and display processing method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2013020911A JP2014153782A (ja) 2013-02-05 2013-02-05 表示処理装置、及び表示処理方法
JP2013-020911 2013-02-05

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US14/194,145 Continuation US20140223359A1 (en) 2013-02-05 2014-02-28 Display processor and display processing method

Publications (1)

Publication Number Publication Date
WO2014122796A1 true WO2014122796A1 (ja) 2014-08-14

Family

ID=51299407

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2013/058738 WO2014122796A1 (ja) 2013-02-05 2013-03-26 表示処理装置、及び表示処理方法

Country Status (2)

Country Link
JP (1) JP2014153782A (ja)
WO (1) WO2014122796A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019091277A (ja) * 2017-11-15 2019-06-13 富士ゼロックス株式会社 表示装置及びプログラム

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6187547B2 (ja) * 2014-08-29 2017-08-30 キヤノンマーケティングジャパン株式会社 情報処理装置、その制御方法、及びプログラム、並びに、情報処理システム、その制御方法、及びプログラム
JP6597136B2 (ja) * 2015-09-30 2019-10-30 キヤノンマーケティングジャパン株式会社 情報処理装置、その制御方法、及びプログラム
US11733951B2 (en) 2018-12-27 2023-08-22 Honda Motor Co., Ltd. Image display apparatus, image display system and image display method
JP7354702B2 (ja) * 2019-09-05 2023-10-03 富士通株式会社 表示制御方法、表示制御プログラムおよび情報処理装置
CN112540739B (zh) * 2019-09-21 2023-11-03 华为技术有限公司 一种投屏方法及系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004054879A (ja) * 2002-05-27 2004-02-19 Sony Corp 表示装置および表示方法
JP2007241679A (ja) * 2006-03-09 2007-09-20 Fujifilm Corp 携帯型画像通信システムならびにそのシステムを構成する送信装置および受信装置ならびにそれらの制御方法
JP2009171447A (ja) * 2008-01-18 2009-07-30 Olympus Imaging Corp カメラ，画像表示制御方法，画像表示制御プログラム，記録媒体
WO2010123011A1 (ja) * 2009-04-20 2010-10-28 京セラ株式会社 撮像装置および撮像方法
JP2011248766A (ja) * 2010-05-28 2011-12-08 Sony Corp 電子ペン、情報処理システム及びプログラム
JP2012248137A (ja) * 2011-05-31 2012-12-13 Sharp Corp 表示装置および表示方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004054879A (ja) * 2002-05-27 2004-02-19 Sony Corp 表示装置および表示方法
JP2007241679A (ja) * 2006-03-09 2007-09-20 Fujifilm Corp 携帯型画像通信システムならびにそのシステムを構成する送信装置および受信装置ならびにそれらの制御方法
JP2009171447A (ja) * 2008-01-18 2009-07-30 Olympus Imaging Corp カメラ，画像表示制御方法，画像表示制御プログラム，記録媒体
WO2010123011A1 (ja) * 2009-04-20 2010-10-28 京セラ株式会社 撮像装置および撮像方法
JP2011248766A (ja) * 2010-05-28 2011-12-08 Sony Corp 電子ペン、情報処理システム及びプログラム
JP2012248137A (ja) * 2011-05-31 2012-12-13 Sharp Corp 表示装置および表示方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019091277A (ja) * 2017-11-15 2019-06-13 富士ゼロックス株式会社 表示装置及びプログラム

Also Published As

Publication number Publication date
JP2014153782A (ja) 2014-08-25

Similar Documents

Publication Publication Date Title
US20210200501A1 (en) Projection, control, and management of user device applications using a connected resource
WO2014122796A1 (ja) 表示処理装置、及び表示処理方法
KR101276846B1 (ko) 미디어 데이터의 스트리밍 제어방법 및 제어장치
KR102077235B1 (ko) 정보 전송 방법 및 시스템, 디바이스와 그 기록 매체
US20140340344A1 (en) Display processor and display processing method
US20140223359A1 (en) Display processor and display processing method
EP2734950A1 (en) Information processing apparatus, information processing method and computer program
US20130257813A1 (en) Projection system and automatic calibration method thereof
US20170038912A1 (en) Information providing device
CN103197865A (zh) 移动终端、输出控制系统和移动终端的数据输出方法
EP2745488B1 (en) Method and apparatus for accessing a virtual object
US10567608B2 (en) Information processing apparatus and non-transitory computer readable medium
KR20180071049A (ko) 전자 장치 및 그 이미지 동기화 방법
US10462454B2 (en) Extensible authoring and playback platform for complex virtual reality interactions and immersive applications
US11238622B2 (en) Method of providing augmented reality contents and electronic device therefor
WO2020083178A1 (zh) 数字图像展示方法、装置、电子设备及存储介质
JP5278912B2 (ja) 通信装置、通信方法およびプログラム
JP2015142320A (ja) 撮影印刷システム、サーバシステム及びプログラム
US10627916B2 (en) Information processing device with flexible display, information processing method, and non-transitory computer readable medium
US10359975B2 (en) Information processing device and non-transitory computer readable medium
KR20200101055A (ko) 콘텐츠와 관련된 시각적 객체를 표시하는 방법 및 이를 지원하는 전자 장치
KR20200079081A (ko) 콘텐트 공유 방법 및 그 전자 장치
US20220345787A1 (en) Voice processing method and apparatus, electronic device, and computer readable storage medium
US12026949B2 (en) Accessory pairing based on captured image
CN111080757A (zh) 基于惯性测量单元的绘画方法及其绘画系统和计算系统

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 13874517

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 13874517

Country of ref document: EP

Kind code of ref document: A1