WO2016167475A1 - Wfd에서 입력 문자 전환 방법 및 장치 - Google Patents

Wfd에서 입력 문자 전환 방법 및 장치 Download PDF

Info

Publication number
WO2016167475A1
WO2016167475A1 PCT/KR2016/002459 KR2016002459W WO2016167475A1 WO 2016167475 A1 WO2016167475 A1 WO 2016167475A1 KR 2016002459 W KR2016002459 W KR 2016002459W WO 2016167475 A1 WO2016167475 A1 WO 2016167475A1
Authority
WO
WIPO (PCT)
Prior art keywords
character
wfd
uibc
parameter
rtsp
Prior art date
Application number
PCT/KR2016/002459
Other languages
English (en)
French (fr)
Inventor
박기원
이병주
김동철
박현희
임태성
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to US15/567,023 priority Critical patent/US10540302B2/en
Publication of WO2016167475A1 publication Critical patent/WO2016167475A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/14—Handling requests for interconnection or transfer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0489—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using dedicated keyboard keys or combinations thereof
    • G06F3/04897—Special input arrangements or commands for improving display capability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40—Support for services or applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/14—Session management
    • H04L67/141—Setup of application sessions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/51—Discovery or management thereof, e.g. service location protocol [SLP] or web services

Definitions

  • the present invention relates to a wireless fidelity (WFD) display, and more particularly, to a method and apparatus for converting input characters in a WFD.
  • WFD wireless fidelity
  • Wireless display transmission technology can be largely divided into content transmission and mirroring (screen casting). Content delivery should be linked to the VOD (Video on Demand) service, rather than the mobile device screen.
  • Content transmission is a method of sending video signals
  • mirroring is a method of transmitting a content file to a remote device by streaming and showing it again on a large screen display such as a TV.
  • Mirroring is a way of showing images printed on a mobile device as if they were mirrored.
  • Mirroring projects your computer screen to the projector by making wired connections such as D-sub (D-Subminiature, RGB), Digital Visual Interface (DVI), and High-Definition Multimedia Interface (HDMI) when giving a presentation. It's similar to how you do it.
  • the mirroring method has the advantage of being able to wirelessly transmit pixel information of the original screen without being dependent on a specific service in real time.
  • Wi-Fi Miracast is being studied as a wireless display transmission technology using Wi-Fi.
  • Miracast is a wireless video transmission standard and wireless display transmission technology created by the WiFi alliance.
  • Miracast is a type of mirroring (screencasting) technology that compresses the screen and sound to a wireless LAN and sends it back to the dongle or integrated receiver.
  • an input character switching method in a WFD is a first WFD device is a user input back channel (UIBC) capability negotiation procedure with a second WFD device Transmitting a character switching capability parameter to the second WFD device via the UIBC setting procedure for setting the first character output on the screen of each of the first and second WFD devices by the first WFD device; Transmitting a first character switching setting parameter to the second WFD device through the second WFD device; and a key code for a character switching button through the user input device of the first WFD device through the UIBC.
  • UIBC user input back channel
  • P2P peer-to-peer
  • a first WFD (WiFi display) device for performing input character switching is operatively connected to a communication unit for communication with a second WFD device and the communication unit. And a processor, wherein the processor transmits a character switching capability parameter to the second WFD device through a user input back channel (UIBC) capability negotiation procedure with the second WFD device, and the first WFD device and the first WFD device.
  • UIBC user input back channel
  • the key code for the button is transmitted to the second WFD device via UIBC, and the second character is outputted on the screen of each of the first and second WFD devices.
  • the second WFD device may be configured to transmit a second character switching setting parameter to the second WFD device through a UIBC resetting procedure to switch to the second one. May be a device that receives and renders the multimedia content from the first WFD device through a peer-to-peer link with the first WFD device.
  • WFDS Wi-Fi Direct Service
  • FIG. 2 is a conceptual diagram illustrating a WFD network.
  • FIG. 3 is a conceptual diagram illustrating a WFD session.
  • FIG. 4 is a conceptual diagram illustrating a method for establishing a WFD session.
  • FIG. 5 is a conceptual diagram illustrating a network between a WFD source and a WFD sink.
  • FIG. 6 is a conceptual diagram illustrating a WFD capability exchange and negotiation procedure.
  • FIG. 7 is a conceptual diagram illustrating a WFD session establishment procedure.
  • FIG. 8 is a conceptual diagram illustrating UIBC capability negotiation and UIBC capability setting according to an embodiment of the present invention.
  • FIG. 9 is a conceptual diagram illustrating a character switch method through a user input device of a WFD sink according to an embodiment of the present invention.
  • FIG. 10 is a conceptual diagram illustrating UIBC capability negotiation and UIBC capability setting according to an embodiment of the present invention.
  • FIG. 11 illustrates an operation after pressing a letter switch button through a keyboard according to an embodiment of the present invention.
  • FIG. 12 is a flowchart illustrating a method for notifying of switching of a multilingual mode through UIBC according to an embodiment of the present invention.
  • FIG. 13 is a flowchart illustrating a method for notifying of switching of multilingual modes through UIBC according to an embodiment of the present invention.
  • FIG. 14 is a conceptual diagram illustrating UIBC capability negotiation and UIBC capability setting according to an embodiment of the present invention.
  • 15 is a flowchart illustrating a multilingual mode switching method based on a modified wfd-uibc-capability parameter according to an embodiment of the present invention.
  • 16 is a flowchart illustrating a multilingual mode switching method based on a modified wfd-uibc-capability parameter according to an embodiment of the present invention.
  • 17 is a flowchart illustrating a multilingual mode switching method based on a wfd2-uibc-multilingual-supporting parameter according to an embodiment of the present invention.
  • FIG. 18 is a flowchart illustrating a multilingual mode switching method based on a wfd2-uibc-multilingual-supporting parameter according to an embodiment of the present invention.
  • 19 is a flowchart illustrating a multilingual mode switching method based on a wfd2-uibc-multilingual-supporting parameter according to an embodiment of the present invention.
  • 20 is a flowchart illustrating a capability negotiation procedure for multilingual support according to an embodiment of the present invention.
  • 21 is a block diagram illustrating a wireless device to which an embodiment of the present invention can be applied.
  • the AP may be responsible for a physical layer support function for a wireless / wired connection, a routing function for devices on a network, a function of adding / removing a device to a network, and a service providing function. That is, in the existing WLAN system, devices in a network are connected through APs, but not directly connected to each other.
  • Wi-Fi Direct is a direct communication technology that allows devices (or STAs) to easily connect with each other without an access point basically required in a conventional WLAN system.
  • Wi-Fi Direct is used, a connection is established between devices without complicated setup process to provide various services to the user.
  • Wi-Fi Alliance provides Wi-Fi Direct services that support various services using the Wi-Fi Direct link (e.g. Send, Play, Display, Print, etc.) WFDS) is being studied.
  • WFDS Wi-Fi Direct services
  • an application may be controlled or managed by a service platform called an application service platform (ASP).
  • ASP application service platform
  • WFDS devices that support WFDS include devices that support WLAN systems such as display devices, printers, digital cameras, projectors, and smart phones.
  • the WFDS device may include a STA and an AP. WFDS devices in the WFDS network may be directly connected to each other.
  • WFDS Wi-Fi Direct Service
  • the WFDS framework may include a Wi-Fi Direct layer 100, an ASP 120, a service layer 140, and an application layer 160.
  • the Wi-Fi Direct layer 100 is a medium access control (MAC) layer defined in the Wi-Fi Direct standard. Under the Wi-Fi Direct layer 100, a wireless connection may be configured by a physical layer (not shown) compatible with the Wi-Fi PHY. An application service platform (ASP) 120 is defined above the Wi-Fi Direct layer 100.
  • MAC medium access control
  • ASP application service platform
  • the ASP 120 is a common shared platform, and manages sessions and processes commands between the upper application layer 160 and the lower Wi-Fi Direct layer 100. Perform ASP control and security functions.
  • the service layer 140 is defined above the ASP 120.
  • the service layer 140 may support four basic services, Send, Play, Display, Print, and services defined by third party applications.
  • the service layer 140 may support Wi-Fi Serial Bus (WSB), Wi-Fi Docking, or Neighbor Awareness Networking (NAN).
  • WB Wi-Fi Serial Bus
  • NAN Neighbor Awareness Networking
  • the application layer 160 may provide a user interface (UI), express information in a form that can be recognized by a person, and transmit user input to a lower layer.
  • UI user interface
  • Wi-Fi display (WFD) of WFDS is disclosed in more detail.
  • the WFD standard was defined to transfer audio / video (AV) data between devices while satisfying high quality and low latency.
  • WFD networks (WFD sessions) with the WFD standard allow Wi-Fi devices to be connected to each other in a peer-to-peer fashion without going through a home network, office network, or hot-spot network.
  • a device for transmitting and receiving data according to the WFD standard may be expressed by the term WFD device.
  • WFD devices in the WFD network may search for information about the WFD devices (for example, capability information), establish a WFD session, and render content through the WFD session.
  • a WFD session may be a network between a source device that provides content and a sink device that receives and renders the content.
  • the source device may also be expressed as a WFD source, and the sink device may be referred to as a WFD sink.
  • the WFD source may mirror data present on the display (or screen) of the WFD source to the display of the WFD sink.
  • the WFD source and the WFD sink may perform a device discovery and service discovery procedure by exchanging a first sequence message between each other. After the device discovery and service discovery procedure between the WFD source and the WFD sink is completed, an internet protocol (IP) address may be assigned to each of the WFD source and the WFD sink.
  • IP internet protocol
  • a transmission control protocol (TCP) connection is established between the WFD source and the WFD sink, followed by real time streaming protocol (RTSP) and real time protocol (RTP) for the WFD source and the WFD sink.
  • TCP transmission control protocol
  • RTSP real time streaming protocol
  • RTP real time protocol
  • the capability negotiation procedure between the WFD source and the WFD sink is performed via RTSP, and during the capability negotiation procedure, the WFD source and the WFD sink can exchange RTSP based messages (M (message) 1 to M4). Can be. The WFD source and the WFD sink may then exchange WFD session control messages. In addition, a data session via RTP may be established between the WFD source and the WFD sink.
  • RTSP RTSP based messages
  • FIG. 2 is a conceptual diagram illustrating a WFD network.
  • the WFD source 200 and the WFD sink 250 may be connected based on WiFi-P2P as a WFD device.
  • the WFD source 200 is a device that supports streaming of multimedia content through a WiFi peer to peer (P2P) link, and the WFD sink 250 receives the multimedia content from the WFD source 200 through a P2P link and displays an image. And / or a device that performs a procedure for generating sound.
  • the procedure for generating an image and / or sound may be expressed in terms of rendering.
  • the WFD sink 250 may be divided into a primary sink and a secondary sink.
  • the secondary sync can render only the audio payload when connected to the WFD source 200 independently.
  • FIG. 3 is a conceptual diagram illustrating a WFD session.
  • the top first of FIG. 3 is an audio only session.
  • the WFD source 300 may be connected to either the primary sink 305 or the secondary sink 310 through an audio only session.
  • the upper second of FIG. 3 is a video-only session.
  • the WFD source 320 may be connected to the primary sink 325.
  • the upper third of FIG. 3 is an audio and video session, such that a WFD source 340 may be connected to the primary sink 345 as well as a video-only session.
  • the upper fourth of FIG. 3 initiates a session connection in a coupled WFD Sink operation.
  • the primary sink 365 renders a video
  • the secondary sink 370 renders audio.
  • primary sync 365 may render both video and audio.
  • Such a WFD session may be established after performing a procedure as shown in FIG. 4 below.
  • FIG. 4 is a conceptual diagram illustrating a method for establishing a WFD session.
  • a WFD device discovery procedure (WFD Device Discovery, S401), a WFD service discovery procedure (WFD Service Discovery, S402), a WFD connection setup procedure (WFD Connection Setup, S403), capability exchange and negotiation procedure (Capability Exchange). and negotiation, S404) may be established after the WFD session.
  • the WFD source may find a peer device for the WFD, that is, a WFD sink, through the WFD device discovery procedure.
  • the beacon frame, probe request frame, and probe response frame transmitted by the WFD source and the WFD sink for the WFD device discovery may include a WFD Information Element (IE).
  • the WFD IE may be an information element including information related to the WFD, such as a device type and a device state.
  • the WFD source may transmit a probe request frame including the WFD IE to the WFD sink, and the WFD sink may transmit a probe response frame including the WFD IE in response to the probe request frame.
  • the probe request frame may include WFD IE and P2P information elements.
  • the probe response frame which is a response to the probe request frame, is transmitted through a channel through which the probe request frame is received, and may include both a P2P IE and a WFD IE.
  • the discovery of the service capability between the WFD source and the WFD sink that performed the WFD device discovery may be performed. For example, if a WFD source sends a service discovery request frame that contains information about WFD capabilities, the WFD sink sends a service discovery response frame that contains information about WFD capabilities in response to the service discovery request frame. Can be.
  • the WFD service discovery procedure may be an optional procedure.
  • the probe request frame and the probe response frame used in the WFD device discovery procedure for performing the WFD service discovery procedure may include information indicating whether the WFD device has the capability of supporting the service discovery procedure.
  • the WFD device performing the WFD device discovery procedure and optionally the WFD service discovery procedure may select the WFD device for the WFD connection setup.
  • a connection scheme of any one of Wi-Fi P2P and tunneled direct link service (TDLS) may be used for WFD connection.
  • the WFD devices may determine the connection method based on the preferred connectivity information and the associated basic service set identifier (BSSID) subelement carried with the WFD information element.
  • BSSID basic service set identifier
  • FIG. 5 is a conceptual diagram illustrating a network between a WFD source and a WFD sink.
  • connection between the WFD source 500 and the WFD sink 510 based on Wi-Fi P2P is started, and at the bottom of FIG. 5, the WFD source 550 and the WFD sink (based on the TDLS link) are disclosed.
  • the connection between 560 is disclosed.
  • the AP may be common to or different from the WFD source 500 and the WFD sink 510. Or the AP may not exist.
  • the WFD connection is performed using the TDLS link as shown in the lower part of FIG. 5, the WFD source 550 and the WFD sink 560 must maintain the connection with the same ⁇ .
  • the WFD capability exchange and negotiation procedure may be performed after the WFD connection setup procedure between WFD devices.
  • the WFD source and the WFD sink may exchange at least one or more of the codec, the profile information, the codec level information, and the resolution information supported by each other.
  • the WFD capability exchange and negotiation may be performed by exchanging a message using a Real Time Streaming Protocol (RTSP). It is also possible to determine a set of parameters that define the audio / video payload during the WFD session.
  • RTSP Real Time Streaming Protocol
  • the WFD capability exchange and negotiation procedure may be performed by exchange of RTSP M1 to RTSP M4 messages as shown in FIG. 6 to be described later.
  • the WFD session establishment procedure may be performed after the WFD exchange and negotiation procedure.
  • FIG. 6 is a conceptual diagram illustrating a WFD capability exchange and negotiation procedure.
  • the WFD source may transmit an RTSP M1 request message for initiating RSTP procedure and WFD capability negotiation (step S601).
  • the RTSP M1 request message may include an RTSP OPTIONS request for determining a set of RTSP methods supported by the WFD sink.
  • the WFD sink may transmit an RTSP M1 response message enumerating the RTSP methods supported by the WFD sink (step S602).
  • the WFD sink may transmit an RTSP M2 request message for determining a set of RTSP methods supported by the WFD source (step S603).
  • the WFD source may respond with an RTSP M2 response message enumerating the RTSP methods supported by the WFD source (step S604).
  • the WFD source may send an RTSP M3 request message (RTSP GET_PARAMETER request message) that specifies a list of WFD capabilities that it wants to know (step S605).
  • RTSP M3 request message RTSP GET_PARAMETER request message
  • the WFD sink may respond with an RTSP M3 response message (RTSP GET_PARAMETER response message) (step S606).
  • the WFD source may determine an optimal set of parameters to be used during the WFD session and send an RTSP M4 request message (RTSP SET_PARAMETER request message) containing the determined set of parameters to the WFD sink.
  • RTSP M4 request message RTSP SET_PARAMETER request message
  • the WFD sink may transmit an RTSP M4 response message (RTSP SET_PARAMETER response message) (step S607).
  • FIG. 7 is a conceptual diagram illustrating a WFD session establishment procedure.
  • WFD sources / WFD sinks that have performed WFD capability exchange and negotiation may establish a WFD session.
  • the WFD source may transmit an RTSP SET parameter request message (RTSP M5 Trigger SETUP request) to the WFD sink (S701).
  • RTSP M5 Trigger SETUP request RTSP M5 Trigger SETUP request
  • the WFD sink may transmit an RTSP M5 response message in response to the RTSP SET parameter request message (step S702).
  • the WFD sink may transmit the RTSP SETUP request message (RTSP M6 request) to the WFD source (step S703).
  • the WFD source may respond with an RTSP SETUP response message (RTSP M6 response) (step S704).
  • the establishment of the status code of the RTSP M6 response message may indicate the successful establishment of the RTSP session.
  • the WFD sink may send an RTSP PLAY request message to the source device to indicate that it is ready to receive the RTP stream (step S705), and the WFD source may send an RTSP PLAY response message. (RTSP M7 response message) (step S706).
  • Successful establishment of the WFD session may be indicated based on the status code of the RTSP PLAY response message.
  • the WFD source After the WFD session has been established, the WFD source will be assigned to the RTF M3 request message (RTSP GET_PARAMETER request message) to obtain the capability for at least one RTSP parameter supported by the WFD sink and the WFD to update the audio / video (AV) format.
  • RTF M3 request message RTSP GET_PARAMETER request message
  • RTSP M4 request message to set at least one RTSP parameter value corresponding to the WFD session for capability renegotiation between source and WFD sink
  • RTSP M5 to trigger the WFD sink to send RTSP PAUSE request message (RTSP M9 request message) Request message
  • RTSP M12 request message indicating that the WFD source enters WFD standby mode
  • RTSP M14 request message to select input type, input device and other parameters to be used in user input back channel (UIBC) or
  • UIBC user input back channel
  • An RTSP M15 request message for enabling or disabling a user input back channel (UIBC) may be transmitted to the WFD sink.
  • the WFD sink receiving the aforementioned RTSP request message from the WFD source may respond with an RTSP response message.
  • the WFD sink continues to run RTSP M7 request message (RTSP PLAY request message) to start (or resume) audio / video streaming, and RTSP M9 request message (RTSP) to suspend audio / video streaming from the WFD source to the WFD sink.
  • RTSP M7 request message RTSP PLAY request message
  • RTSP M9 request message RTSP
  • PAUSE request message RTSP M10 request message to request the WFD source to change the audio rendering device
  • RTSP M11 request message to instruct to change the active connector type
  • WFD sink has entered WFD standby mode.
  • RTSP M12 request message indicating, M13 request message requesting WFD source to refresh instantaneous decoding refresh (IDR), RTSP M14 request message to select input type to be used in UIBC, input device and other parameters or activation of UIBC (RTSP M15 request message for enable or disable can be sent to WFD source .
  • the WFD source receiving the above-listed RTSP request message from the WFD sink may respond with an RTSP response message.
  • the WFD source and the WFD sink may proceed with audio / video streaming using a codec commonly supported by both.
  • a codec commonly supported by the WFD source and the WFD sink By using a codec commonly supported by the WFD source and the WFD sink, interoperability between the two can be guaranteed.
  • WFD communication is based on the WFD IE
  • the format of the WFD IE can be defined as shown in Table 1 below.
  • the WFD subelement field has a format as shown in Table 2 below.
  • the sub element ID may be defined as shown in Table 3 below.
  • Subelement ID (Decimal) Notes 0 WFD Device Information One Associated BSSID 2 WFD Audio Formats 3 WFD Video Formats 4 WFD 3D Video Formats 5 WFD Content Protection 6 Coupled Sink Information 7 WFD Extended Capability 8 Local IP Address 9 WFD Session Information 10 Alternative MAC Address 11-255 Reserved
  • the subelement ID field of one octet may indicate what information the WFD subelement includes. Specifically, the values 0, 1,... Of the subelement ID field. 10 indicates that each subelement is a WFD Device Information subelement, Associated BSSID subelement, WFD Audio Formats subelement, WFD Video Formats subelement, WFD 3D Video Formats subelement, WFD Content Protection subelement, Coupled Sink Information subelement, WFD Extended Capability subelement, Local IP Address subelement, WFD Session Information subelement, or alternative MAC address subelement.
  • the WFD Device Information subelement may include information necessary to determine whether to attempt pairing with the WFD device and session creation.
  • the Associated BSSID subelement may be used to indicate the address of the currently associated AP.
  • Each of the WFD Audio Formats subelement, the WFD Video Formats subelement, and the WFD 3D Video Formats subelement may be used to indicate capabilities of a WFD device related to audio, video, and 3D video.
  • the WFD Content Protection subelement may transmit information related to the content protection method, and the Coupled Sink Information subelement may transmit information about the state of the coupled sink, the MAC address, and the like.
  • the WFD Extended Capability subelement is used to convey various capability information of other WFD devices, and the Local IP Address subelement may be used to deliver an IP address to the WFD peer during TDLS setup.
  • the WFD Session Information subelement may include information such as a list of WFD device information descriptors in the WFD group. If the WFD connection method requires an interface (eg, a MAC address) different from that used in device discovery, the Alternative MAC Address subelement may convey the relevant information.
  • the user input back channel may be a channel for delivering user input to a user interface present in a WFD sink to a WFD source.
  • UIBC user input delivered through UIBC may be packetized using a common packet header, and may be transmitted over a transmission control protocol (TCP) / internet protocol (IP).
  • TCP transmission control protocol
  • IP internet protocol
  • the user input category may include a generic category and a human interface device class (HIDC) category.
  • Generic categories or integration categories
  • Generic categories can be used for user input that is not device dependent at the application level.
  • Generic user input may have a format using a generic input body (or integrated input body).
  • Generic user input may include conceptual inputs such as zoom and scroll, as well as inputs such as mouse and keyboard events.
  • HIDC can be used for user input generated by a human input device (HID) such as a remote control and keyboard.
  • the HIDC user input may have a format using a HIDC input body.
  • Key codes supported by UIBC can only support ASCII (American Standard Code for Information Interchange).
  • ASCII American Standard Code for Information Interchange
  • the WFD sink cannot send information about the key code through UIBC to the WFD source.
  • the Korean-English toggle key or the character switch button / language support button
  • the key code for the Korean language may not be transmitted to the WFD source through UIBC. Accordingly, although the user has switched the character input from English to Korean by pressing the Korean-English conversion key, the keyboard screen of the WFD sync and the WFD source can continuously output the character input screen receiving English characters.
  • a method for inputting a character other than English through UIBC is disclosed.
  • Other characters may be Korean.
  • the WFD source may be expressed in terms of a first WFD device and a WFD sink in a second WFD device.
  • Table 4 below discloses UIBC parameters according to an embodiment of the present invention.
  • wfd2-uibc keyboard-character-switch-capability is a character-switch-type, mode, and primary-character.
  • Secondary-character, and status information may be included as sub-parameters.
  • the character-switch-type may be none or mode. If character switch mode is not supported on the keyboard, the character switch type may be none. The mode may indicate one or more character-switch types for character switches on the keyboard.
  • the mode may indicate whether a change between languages is possible based on the plurality of bits as follows.
  • information about a switchable language may be expressed based on each of a plurality of bits (eg, 128 bits).
  • the first bit (bit 0) indicates switching between English and Korean
  • the second bit (bit 1) indicates switching between English and Chinese
  • the third bit (bit 2) indicates switching between English and Chinese
  • the fourth bit indicates switching between English and Chinese
  • Bit (bit 3) may indicate switching between English and German
  • the fifth bit (bit 4) may indicate switching between English and French
  • the sixth bit (bit 5) may indicate switching between English and Russian.
  • 127 character switching types may be defined based on 127 bits.
  • the character switching mode supported by the user input device between the WFD source and the WFD sink may be negotiated.
  • Primary-character may indicate a primary character (eg, English).
  • the primary-character may be a character that is preferentially set and transmitted through the UIBC.
  • Secondary-character may indicate a secondary character (eg, Korean).
  • the secondary-character may be a character set and transmitted next through UIBC when the user presses the “character switch” button in the primary character state.
  • the status may indicate the current character status (primary or secondary character).
  • the state can be toggled between the primary and secondary characters by pressing the "change character” button.
  • wfd2-uibc-keyboard-character-switch-capability is defined as a new parameter, and information about wfd2-uibc keyboard-character-switch-capability is shown in RTSP M3. It is included in each of the RTSP M3 GET_PARAMETER request message and the RTSP M3 GET_PARAMETER response message and may be used for UIBC capability negotiation between the WFD source and the WFD sink. Based on the exchange of the wfd2-uibc keyboard-character-switch-capability parameter through the RTSP M3 message, information on the character switching type and the character switching mode supported by the keyboard connected to the WFD source and the WFD sink can be checked.
  • the character switching type or the character switching mode to be transmitted through the UIBC in the WFD source and the WFD sink is selected and changed. Can be.
  • the UIBC encapsulated user input data (UIBC capsulated) indicating the character change ( Message format for delivery of user input) to the source WFD may be defined.
  • Tables 6 and 7 below disclose new generic input messages with non-ASCII values that can indicate character switching.
  • Table 6 the key code included in the transmitted generic input message is disclosed when an operation of pressing a character switch button defined for character switch is performed.
  • key code 1 when a key value defined for character conversion is defined as one key, key code 1 may be defined.
  • the key code 1 may be included in the generic input message as UIBC encapsulated user input and transmitted to the source WFD.
  • key code2 may be defined.
  • key code 2 may be included in the generic input message as UIBC encapsulated user input data and passed to the source WFD.
  • key code 1 when a key value defined for character conversion is defined as one key, key code 1 may be defined.
  • key code 1 When the user releases the character switch button by hand in the user interface associated with the WFD sink and then releases, key code 1 may be included in the generic input message as UIBC encapsulated user input data as user input data and passed to the source WFD.
  • key code2 may be defined.
  • key code 2 is included in the generic input message as UIBC encapsulated user input data as user input data. Can be passed to the source WFD.
  • the key code included in the user input data may be a newly defined ASCII code or a non-ASCII code for the character switch button.
  • the first character type used in the user input device (or user interface) of the WFD sink (or WFD source) is defined as the primary character
  • the other character types supported when the character switch button is pressed in the WFD sink (or WFD source) are: Can be defined as a secondary character. That is, the character transmitted through the UIBC through the user input device before the character switch button is pressed in the user input device may be set as the primary character.
  • the status parameter of the wfd2-uibc keyboard-character-switch-capability parameter may be set to the primary character.
  • the status parameter of the wfd2-uibc keyboard-character-switch-capability parameter may be set to the secondary character.
  • the status parameter of the wfd2-uibc keyboard-character-switch-capability parameter may be set back to the primary character. That is, each time the character switch button is pressed by the user, the status parameter can be toggled between the primary character and the secondary character.
  • FIG. 8 is a conceptual diagram illustrating UIBC capability negotiation and UIBC capability setting according to an embodiment of the present invention.
  • FIG. 8 a procedure for UIBC capability negotiation and UIBC capability establishment between a WFD source and a WFD sink is disclosed.
  • the WFD source may transmit an RTSP M3 request message to the WFD sink (step S800).
  • the WFD source transmits an RTSP M3 request message (RTSP GET_PARAMETER request message), but the RTSP M3 request message may include a wfd2-uibc keyboard-character-switch-capability parameter.
  • the character switch type parameters included in the wfd2-uibc keyboard-character-switch-capability parameter transmitted through the WFD source to the WFD sink are: It can be set as a switch between English and Korean.
  • the WFD sink may respond with an RTSP M3 response message (RTSP GET_PARAMETER response message) (step S810).
  • an RTSP M3 response message may include the wfd2-uibc keyboard-character-switch-capability parameter.
  • the character switch type parameter included in the wfd2-uibc keyboard-character-switch-capability parameter transmitted through the WFD sink to the WFD source is It can be set as a switch between English and Korean.
  • the UIBC capability negotiation procedure may proceed based on the exchange of the RTSP M3 request message / RTSP M3 response message as described above.
  • a UIBC capability establishment procedure may be performed. That is, after mutual negotiation about the character switch capability between the WFD sink and the WFD source is performed, the actual configuration procedure for the character switch may be performed based on the RTSP M4 / M14 request message and the RTSP M4 / M14 response message.
  • the WFD source may send an RTSP M4 / M14 request message to the WFD sink (step S820).
  • the WFD source is used for the RTSP M4 SET_PARAMETER request message and / or RTSP M14 request message (for the actual setting of the character switch between the WFD sink and the WFD source).
  • RTSP M4 SET_PARAMETER request message can be transmitted to the WFD sink.
  • the RTSP M4 request message and the RTSP M14 request message may include a wfd2-uibc keyboard-character-switch-capability parameter for setting for the character switch.
  • the WFD sink may send an RTSP M4 / M14 response message to the WFD source (step S830).
  • the WFD sink may send consent for the character switch setting of the WFD source via an RTSP M4 / M14 response message.
  • the WFD sink may send an RTSP M4 / M14 request message to the WFD source, and the WFD source may send an RTSP M4 / M14 response message to the WFD sink.
  • FIG. 9 is a conceptual diagram illustrating a character switch method through a user input device of a WFD sink according to an embodiment of the present invention.
  • the screen of the WFD source may be mirrored to the screen of the WFD sink (step S900).
  • user input data including a key code for the character switch button may be transmitted from the WFD sink to the WFD source (step S910).
  • the key code corresponding to the character switch button from the WFD sink to the WFD source is displayed when the user presses the character switch button. It may be included in UIBC capsulated user input and transmitted.
  • the WFD sink may transmit the wfd2-uibc keyboard-character-switch-capability parameter including the changed information through the RTSP M4 / RTSP M14 request message for the UIBC re-establishment procedure (step S920).
  • the status parameter of the wfd2-uibc keyboard-character-switch-capability parameter may be changed from English to Korean.
  • a modified wfd-uibc-capability parameter modified from a previously defined wfd-uibc-capability parameter is transmitted through an RTSP M3 request message and an RTSP M3 response message.
  • Negotiation may then be performed on the character switching capability (or UIBC capability).
  • Table 8 below discloses modified wfd-uibc-capability parameters.
  • the modified wfd-uibc-capability parameters include the “Keyboard” SP character-switch-type, mode, mode, primary-character, Secondary character, status can be included as parameters for the character switch.
  • negotiation may be performed between the WFD source and the WFD sink for the character conversion type or the character conversion mode supported by the keyboard.
  • the setup and reset of the character transition type or character transition mode supported by the keyboard between the WFD source and the WFD sink is performed. Can be.
  • FIG. 10 is a conceptual diagram illustrating UIBC capability negotiation and UIBC capability setting according to an embodiment of the present invention.
  • UIBC capability negotiation and UIBC capability setting based on the modified wfd-uibc-capability parameter are disclosed.
  • the WFD source may transmit an RTSP M3 request message to the WFD sink (step S1000).
  • the RTSP M3 request message sent by the WFD source may include a modified wfd-uibc-capability parameter as described above.
  • the mode, primary character, secondary character and status can be included as parameters of the WFD source for the character switch.
  • the state may be set to a primary character (eg, English).
  • the WFD sink may transmit an RTSP M3 response message to the WFD source (step S1010).
  • the RTSP M3 response message sent by the WFD sink may include a modified wfd-uibc-capability parameter as described above.
  • the mode, primary character, secondary character and status can be included as parameters of the WFD sink for the character switch.
  • the state parameter included in the modified wfd-uibc-capability parameter may be set to a primary character (eg, English).
  • the WFD sink may transmit an RTSP M4 / RTSP M14 request message to the WFD source (step S1020).
  • the WFD sink may include a modified wfd-uibc-capability parameter in the RTSP M4 / RTSP M14 request message.
  • the status parameter of the modified wfd-uibc-capability parameter may be set to a secondary character (eg national language).
  • the WFD source may send an RTSP M4 / M14 response message to the WFD sink (step S1030).
  • FIG. 11 illustrates an operation after pressing a letter switch button through a keyboard according to an embodiment of the present invention.
  • a character switch button (eg, a Korean / English button) may be released from a keyboard that is a user input device of a WFD sink device.
  • a key code corresponding to the character switch button may be transmitted through the UIBC.
  • the WFD sink After the key code corresponding to the character switch button is passed through UIBC, the WFD sink sends a modified wfd-uibc-capability parameter (or wfd2-uibc keyboard-character-switch-capability parameter) via the RTSP M4 / M14 request message. Can be.
  • the status parameter of the wfd-uibc-capability parameter (or wfd2-uibc keyboard-character-switch-capability parameter) included in the RTSP M4 / M14 request message may be set in English.
  • the WFD source may receive the RTSP M4 / M14 response message in response to the RTSP M4 / M14 request message.
  • UIBC encapsulated user input data indicating the character change may be transmitted to the WFD source.
  • a new generic input message field including a key code corresponding to the character switch button may be defined as shown in Tables 9 and 10 below.
  • the user may press the Korean / English switch key, which is a character switch button of the user input device connected to the WFD sink.
  • a generic input message including key code 2 may be sent from the WFD sink to the WFD source via UIBC.
  • an RTSP M4 request message / RTSP M14 request message may be transmitted that includes a modified wfd-uibc-capability parameter (or wfd2-uibc keyboard-character-switch-capability parameter) in which the status parameter is set to English.
  • a generic input message including key code 1 may be sent from the WFD sink to the WFD source via UIBC.
  • an M4 request message / M14 request message including a modified wfd-uibc-capability parameter (or wfd2-uibc keyboard-character-switch-capability parameter) in which the status parameter is set to Korean may be transmitted.
  • Table 10 discloses a key code included in the comprehensive input message field of the user input data to be transmitted when an operation of releasing a character switching button defined for character switching is performed (key up operation).
  • the user may press and release the Korean / English switch key, which is a letter switch button of the user input device connected to the WFD sink.
  • user input data including a generic input message field including key code 2 may be transmitted from the WFD sink to the WFD source via UIBC.
  • an RTSP M4 request message / RTSP M14 request message may be transmitted that includes a modified wfd-uibc-capability parameter (or wfd2-uibc keyboard-character-switch-capability parameter) in which the status parameter is set to English.
  • a generic input message including key code 1 may be sent from the WFD sink to the WFD source via UIBC.
  • an M4 request message / M14 request message including a modified wfd-uibc-capability parameter (or wfd2-uibc keyboard-character-switch-capability parameter) in which the status parameter is set to Korean may be transmitted.
  • the key code included in the user input data may be a newly defined ASCII code for character conversion or a non-ASCII code defined by character conversion.
  • a new generic input message field including a key code corresponding to the character switch button may be defined as shown in Tables 11 and 12 below.
  • Tables 11 and 12 disclose key codes defined for the character switch button for switching between English and Japanese.
  • FIG. 12 is a flowchart illustrating a method for notifying of switching of a multilingual mode through UIBC according to an embodiment of the present invention.
  • a method of switching an input language set through a multilingual switching key for example, a Korean / English key
  • a UIBC capability negotiation procedure is performed between a WFD sink and a WFD source (step S1200).
  • the UIBC capability negotiation procedure may be performed based on the RTSP M3 request message / RTSP M3 response message.
  • a session establishment procedure is performed between the WFD sink and the WFD source (step S1210).
  • Video data of the WFD source may be streamed on the display of the WFD sink (step S1220).
  • the multilingual support (multilingual switching) key of the user input device connected to the WFD sink may be pressed and released by the user (step S1230).
  • the WFD sink may transmit user input data including the multilingual switching key code to the WFD source (step S1240).
  • User input data including the key codes defined in the aforementioned Tables 9 to 12 may be transmitted.
  • the user may input the converted character by pressing a key button of the user input device connected to the WFD sink, and a key code corresponding to the converted character of the user may be included in the user input data and transmitted.
  • characters of the converted language may be output on the screen of the WFD sink and the WFD source.
  • FIG. 13 is a flowchart illustrating a method for notifying of switching of multilingual modes through UIBC according to an embodiment of the present invention.
  • FIG. 13 a method of switching an input language set through a multilingual switching key (for example, a Korean / English key) is disclosed.
  • a multilingual switching key for example, a Korean / English key
  • FIG. 13 discloses a method of switching from English mode in which English is input to Korean mode.
  • mirrored image data of a WFD source may be output on a screen of a WFD sink (step S1300).
  • an English mode in which English as a primary character is input is set, and English may be input and output through a user input device.
  • the Korean / English key which is a multilingual switching key of the user input device connected to the WFD sink, may be pressed and struck by the user.
  • the WFD sink may transmit user input data including the key code of the Korean / English key, which is a multilingual switching key, to the WFD source (step S1310).
  • User input data including the key codes defined in the aforementioned Tables 9 to 12 may be transmitted.
  • the user may input the converted character by pressing a key button of the user input device connected to the WFD sink, and a key code corresponding to the converted character of the user may be included in the user input data and transmitted (step S1320). .
  • the Korean language may be input through the user input device of the WFD sink, and the Korean language may be output through the screen of the WFD sink / WFD source.
  • the wfd2-uibc-multilingual-support parameter is defined, and the wfd2-uibc-multilingual is selected whenever the character switching button for multilingual support is pressed by the user.
  • a method is disclosed in which an RTSP message including supporting parameters is sent to a WFD source.
  • wfd2-uibc-multilingual-support “wfd2-uibc-multilingual-support:”
  • Table 13 describes the parameters included in the newly defined wfd2-uibc-multilingual-supported parameters. Each parameter can have the following meaning.
  • the multilingual-supported mode may be none or mode. If a multilingual support mode is not supported on the keyboard, the multilingual-supported parameter may be none.
  • the mode may indicate one or more multilingual-assisted-modes for the mode switch on the keyboard.
  • Table 14 below is a table defining a multilingual-support-mode list supported by a user input device.
  • the primary-mode may indicate a primary character (eg, English).
  • the primary-character may be a character that is preferentially set and passed on UIBC.
  • the secondary-mode may indicate a secondary character (eg, Korean). Secondary mode can be activated when the user presses the "Multilingual" button in the primary mode.
  • a secondary character eg, Korean
  • the status may indicate the current character status (primary or secondary character).
  • the state can toggle between the primary and secondary characters.
  • FIG. 14 is a conceptual diagram illustrating UIBC capability negotiation and UIBC capability setting according to an embodiment of the present invention.
  • FIG. 14 a procedure for UIBC capability negotiation and UIBC capability establishment between a WFD source and a WFD sink is disclosed.
  • the WFD source may transmit an RTSP M3 request message to the WFD sink (step S1400).
  • the WFD source transmits an RTSP M3 request message (RTSP GET_PARAMETER request message), but the RTSP M3 request message may include a wfd2-uibc-multilingual-support parameter.
  • the mode of the wfd2-uibc-language-supporting parameter can be set as a switch between English and Korean, and the status can be set to English as the primary mode to inform UIF-related capability information of the WFD source to the WFD sync. Can be.
  • the WFD sink may transmit an RTSP M3 response message (RTSP GET_PARAMETER response message) to the WFD source, but the RTSP M3 response message may include a wfd2-uibc-multilingual-support parameter (step S1410).
  • the mode of the wfd2-uibc-language-supporting parameter may be set as a switch between English and Korean, and the state may be set to English as the primary mode.
  • the WFD sink can inform UIBC related capability information to the WFD source through RTSP M3 messages.
  • the English mode may be set.
  • the primary mode may be changed to the secondary mode.
  • the user can send the wfd2-uibc- multilingual-support parameter via the M4 / M14 request message.
  • the state of the wfd2-uibc-multilingual-support parameter may be set to Korean, which is a secondary mode.
  • the WFD source may send an M4 / M14 response message to the WFD sink in response to the M4 / M14 request message.
  • the WFD source sends the wfd2-uibc-language-support parameter via the M4 / M14 request message for the UIBC capability establishment procedure (step S1420), and the WFD sink responds with an M4 / M14 response in response to the M4 / M14 request message.
  • the message may be sent to the WFD source (step S1430).
  • the WFD sink may include a key code corresponding to a key of the converted language (eg, Korean) in the user input data and transmit the same to the WFD source (Ste S1440).
  • a key code corresponding to a key of the converted language (eg, Korean) in the user input data and transmit the same to the WFD source (Ste S1440).
  • a modified wfd-uibc-capability parameter modified from a previously defined wfd-uibc-capability parameter is transmitted through an RTSP M3 request message and an RTSP M3 response message.
  • Negotiation may then be performed on multilingual support capability (or UIBC capability).
  • the setting and the change of the multilingual support mode may be performed based on the RTSP M4 request message and the RTSP M14 request message.
  • Table 15 discloses modified wfd-uibc-capability parameters.
  • the modified wfd-uibc-capability parameters are multilingual for multilingual support mode, mode, primary-mode, secondary mode, and status. It can be included as a parameter for mode switching.
  • Each parameter included in the modified wfd-uibc-capability parameter may be the same as described above in Table 13.
  • 15 is a flowchart illustrating a multilingual mode switching method based on a modified wfd-uibc-capability parameter according to an embodiment of the present invention.
  • a UIBC capability negotiation procedure 1500 may be performed between a WFD source and a WFD sink based on a modified wfd-uibc-capability parameter transmitted through an RTSP M3 request message / RTSP M3 response message.
  • a parameter information for example, “Keyboard” SP multilingual-support-mode
  • Negotiations can be carried out together.
  • the mode parameter included in the modified wfd-uibc-capability parameter of each RTSP M3 request message / RTSP M3 response message may indicate a switch between English and Korean, and the state may be the primary. English mode can be indicated.
  • the UIBC capability setting procedure 1550 may be performed by the WFD sink based on the RTSP M4 request message / RTSP M14 request message.
  • the RTSP M4 request message / RTSP M14 request message may include a modified wfd-uibc-capability parameter, and the modified wfd-uibc-capability parameter may include parameter information on multilingual mode switching capability for UIBC capability setting.
  • the mode parameter included in the modified wfd-uibc-capability parameter of each RTSP M4 request message / RTSP M14 request message may indicate a switch between English and Korean, and the status is Korean in the secondary mode. Can be indicated.
  • the WFD source may send an RTSP M4 response message / RTSP M14 response message to the WFD sink.
  • a Korean key code corresponding to the keyboard may be transmitted to the WFD source through the UIBC.
  • the Korean After changing to the Korean mode, the Korean may be output on the screen of the WFD seek and the WFD source.
  • 16 is a flowchart illustrating a multilingual mode switching method based on a modified wfd-uibc-capability parameter according to an embodiment of the present invention.
  • a screen of a WFD source may be mirrored to a screen of a WFD sink. It is assumed that the current state indicates English in the primary mode.
  • the UIBC capability re-establishment procedure 1600 may be performed by the WFD sink based on the RTSP M4 request message / RTSP M14 request message. .
  • the RTSP M4 request message / RTSP M14 request message may include a modified wfd-uibc-capability parameter, and the modified wfd-uibc-capability parameter may include parameter information for multilingual mode switching capability for UIBC capability reset.
  • the mode parameter included in the modified wfd-uibc-capability parameter of each RTSP M4 request message / RTSP M14 request message may indicate a switch between English and Korean, and the status is Korean in the secondary mode. Can be indicated.
  • the WFD source may send an RTSP M4 response message / RTSP M14 response message to the WFD sink.
  • a Korean key code corresponding to the keyboard may be transmitted to the WFD source through the UIBC.
  • the Korean After changing to the Korean mode, the Korean may be output on the screen of the WFD seek and the WFD source.
  • a new parameter, wfd2-uibc-multilingual-support parameter is defined, and an RTSP message is displayed whenever the user presses a text switch button for multilingual support.
  • the wfd2-uibc-language-support parameter may be included in the transmission to the WFD source.
  • wfd2-uibc-multilingual-support “wfd2-uibc-multilingual-support:”
  • wfd2-uibc-multilingual-support is newly defined, and wfd2-uibc-multilingual-support is included in the RTSP M3 request message / M3 response message to perform UIBC capability negotiation. Can be.
  • the wfd2-uibc-multilingual-supporting parameter may include parameters regarding multilingual-info, multilingual-mode, primary mode, secondary mode, and status.
  • the multilingual information may indicate whether multilingual mode support, primary mode support, and secondary mode support are provided.
  • the multilingual mode may include information about a supportable mode as disclosed in Table 14 above.
  • the RTSP M4 request message / RTSP M14 request message may include the same information as described above with respect to each of the primary mode, the secondary mode, and the state.
  • 17 is a flowchart illustrating a multilingual mode switching method based on a wfd2-uibc-multilingual-supporting parameter according to an embodiment of the present invention.
  • a UIBC capability negotiation procedure may be performed between a WFD source and a WFD sink based on a wfd-uibc-multilingual-support-parameter transmitted through an RTSP M3 request message / RTSP M3 response message.
  • the WFD source may request information about the UIBC capability of the WFD sink based on the RTSP M3 request message.
  • the mode parameter included in the wfd-uibc-language-support-parameter of each RTSP M3 request message / RTSP M3 response message can indicate a switch between English and Korean, It can direct English in Secondary mode and Korean in state.
  • a multilingual support mode setting procedure (or UIBC capability setting procedure) may be performed based on the RTSP M4 request message / RTSP M14 request message transmitted by the WFD source.
  • the wfd-uibc-multilingual-support-parameters included in the RTSP M4 request message / RTSP M14 request message indicate a switch between English and Korean, the primary mode is Korean, and the secondary mode is English, status Can indicate Korean.
  • the WFD sink may receive the RTSP M4 response message / RTSP M14 response message as a response to the RTSP M4 request message / RTSP M14 request message as the WFD source.
  • FIG. 18 is a flowchart illustrating a multilingual mode switching method based on a wfd2-uibc-multilingual-supporting parameter according to an embodiment of the present invention.
  • a user may press a text switch button (or a multilanguage support button), and when the text switch button (or a multilanguage support button) is pressed, an RTSP M17 request message may be transmitted.
  • the WFD sink may send an RTSP M17 request message to the WFD source.
  • the RTSP M17 request message may indicate a switch between English and Korean, the primary mode may be Korean, the secondary mode may be English, and the status may be English. That is, when the character switch button is pressed, the state can be switched from Korean to English.
  • the WFD source may send an RTSP M17 response message to the WFD sink in response to the RTSP M17 request message.
  • the WFD source and the WFD sink may operate in the English mode.
  • a key code value corresponding to the English key may be transmitted to the WFD source through UIBC.
  • 19 is a flowchart illustrating a multilingual mode switching method based on a wfd2-uibc-multilingual-supporting parameter according to an embodiment of the present invention.
  • UIBC input data 1900 including a value indicating a change in a multilingual mode may be transmitted from a WFD sink to a WFD source.
  • the WFD source may transmit the RTSP M17 request message 1910 to the WFD sink after receiving the UIBC input data 1900 including a value indicating the change of the multilingual mode.
  • the RTSP M17 request message 1910 may indicate a switch between English and Korean, the primary mode may be Korean, the secondary mode may be English, and the status may be English.
  • the WFD sink may send the RTSP M17 response message 1920 to the WFD source in response to the RTSP M17 request message 1910.
  • the WFD source and the WFD sink may operate in the English mode.
  • a key code value corresponding to the English key may be transmitted to the WFD source through the UIBC as the user input data 1930.
  • UIBC can only support ASCII code.
  • ASCII code When the user presses a key not defined by the ASCII code of the keyboard, a character corresponding to a key desired by the user may not be output to the WFD sink and the WFD source.
  • the non-ASCII code can be multilingual (Unicode, also known as international organization for standardization / International electronic commission (ISO / IEC) 10646), control keys (e.g. Enter, Ctrl , shift, alt, space, etc. may be referred to as ISO / IEC 9995).
  • ISO / IEC International electronic commission
  • a user presses a key corresponding to a non-ASCII code through a user input device (for example, a keyboard)
  • a value corresponding to the non-ASCII code from a WFD sink to a WFD source is provided through UIBC.
  • a method for delivering is disclosed.
  • the WFD sink when a user inputs a key corresponding to a non-ASCII code through a user input device (for example, a keyboard), the WFD sink corresponds to a Unicode (ISO) corresponding to a character input by the user. It may transmit a UIBC input message (or UIBC input body) including / IEC 10646.
  • a user input device for example, a keyboard
  • the WFD sink corresponds to a Unicode (ISO) corresponding to a character input by the user. It may transmit a UIBC input message (or UIBC input body) including / IEC 10646.
  • an ISO / IEC 2022 value may be included in the UIBC input message (or UIBC input body) and transmitted.
  • the UIBC input body (or UIBC input message) is either a generic input body (or generic input message) or an HIDC input body (or HIDC message). Can be determined.
  • the generic input body may include at least one generic input message
  • the HIDC input body may include at least one HIDC input message.
  • Table 17 describes the format of a UIBC input message (or generic input message) that includes a Unicode key value (ISO / IEC 10646 or ISO / IEC 2022).
  • a key value (ISO / IEC 9995) corresponding to the control key input by the user is displayed as a UIBC input message (UIBC). Input body) to the WFD sink.
  • Table 18 shows the format of a UIBC input message (or generic input message) that includes a control key value (ISO / IEC 9995).
  • the WFD sink / WFD source receiving the UIBC input message through the format of the UIBC input message as described above may interpret the received text and output the received text on the screen.
  • a character (ISO / IEC 10646, Unicode) value is displayed on each WFD source / WFD sink screen, while a control key (ISO / IEC 9995) outputs a character on the device screen.
  • control functions can be performed without Therefore, the UIBC input message (or user input message) may include the values "ISO / IEC 10646, Unicode" and "ISO / IEC 9995".
  • a delimiter (or field) called a character / control identifier may be defined to distinguish whether a key input through a user input device is a character or a control key.
  • Table 19 shows a UIBC input message (or generic input message) that includes a character / control identifier field.
  • a control key when a user inputs a control key through a keyboard, not only a key value defined in ISO / IEC 9995 but also a character control identifier may be included in the UIBC input message.
  • the wfd2-multilingual-capability parameter may be defined for multilingual support through UIBC.
  • information on ASCII codes and non-ASCII codes (“ISOIEC10646” / “ISOIEC2022” / “ISOIEC9995”) supported through the UIBC input message may be transmitted based on the wfd2-multilingual-capability parameter.
  • 20 is a flowchart illustrating a capability negotiation procedure for multilingual support according to an embodiment of the present invention.
  • the WFD source may transmit an RTSP M3 request message 2000 to the WFD sink.
  • RTSP M3 request message 2000 may include a wfd2-multilingual-capability parameter.
  • the RTSP M3 request message (2000) sent by the WFD source is an ASCII code, non-ASCII code (“ISOIEC10646” / “ISOIEC2022” / “ISOIEC9995) that is supported via the UIBC input message by the WFD source via the wfd2-multilingual-capability parameter. Information about ”) can be transmitted.
  • the RTSP M3 request message 2000 transmitted by the WFD source may request information about ASCII codes and non-ASCII codes supported through the UIBC input message supported by the WFD sink.
  • the WFD sink may transmit the RTSP M3 response message 2010 in response to the RTSP M3 request message 2000 sent by the WFD source.
  • the RTSP M3 response message 2010 may include a wfd2-multilingual-capability parameter, and the wfd2-multilingual-capability parameter may include information about ASCII codes and non-ASCII codes supported through the UIBC input message.
  • the RTSP M4 / M14 request message 2020 transmitted by the WFD source may set ASCII codes and non-ASCII codes supported by the UIBC input message by the WFD source through the wfd2-multilingual-capability parameter.
  • the WFD sink may transmit the RTSP M4 / M14 response message 2030 in response to the RTSP M4 / M14 request message 2020.
  • 21 is a block diagram illustrating a wireless device to which an embodiment of the present invention can be applied.
  • a wireless device may be a WFD source 2100 (or a first WFD device) and a WFD sink 2150 (or a second WFD device) capable of implementing the above-described embodiment.
  • the WFD source 2100 includes a processor 2110, a memory 2120, and a communication unit 2130.
  • the RF unit 2130 may be connected to the processor 2110 to transmit / receive a radio signal.
  • the processor 2110 may implement the functions, processes, and / or methods proposed in the present invention.
  • the processor 2110 may be implemented to perform the operation of the WFD source 2100 according to the above-described embodiment of the present invention.
  • the processor may perform an operation of the WFD source 2100 disclosed in the embodiment of FIGS. 1 to 20.
  • the processor 2110 transmits a character switching capability parameter to the second WFD device through a user input back channel (UIBC) capability negotiation procedure with a second WFD device (or a WFD sink), and transmits a character switching capability parameter to the second WFD device.
  • UIBC user input back channel
  • 2 may be implemented to transmit the first character switching setting parameter to the second WFD device through the UIBC setting procedure to set the first character (for example, English) output on the screen of each of the 2 WFD devices.
  • the processor 2110 transmits the key code for the character switch button to the second WFD device through the UIBC through the user input device of the first WFD device, and displays the first and second WFD devices on the screen of each of the first and second WFD devices.
  • the second character conversion setting parameter may be transmitted to the second WFD device through a UIBC resetting procedure.
  • the first WFD device is a device that supports streaming of multimedia content
  • the second WFD device is a device that receives and renders the multimedia content from the first WFD device through a peer-to-peer link with the first WFD device. Can be.
  • the character switching capability parameter may include a mode parameter, a primary character parameter, a secondary character parameter, and a status parameter.
  • the mode parameter includes information on at least one character switching type supported by the first WFD device, and the primary character parameter includes information on primary characters that are preferentially set on UIBC by the first WFD device.
  • the secondary character parameter may include information about the secondary character set by switching from the primary character on the UIBC by the first WFD device when a key code corresponding to the character switch button is input.
  • the status parameter may include information indicating whether the character currently set by the first WFD device according to the input of the key code is a primary character or a secondary character, and the status parameter may be based on the input of the key code. Can be toggled to a secondary character.
  • the first character change setting parameter includes a first state parameter
  • the second character change setting parameter includes a second state parameter
  • the first state parameter indicates the primary character
  • the second state parameter indicates the secondary You can indicate a character
  • the processor 2110 may be implemented to transmit a generic input message including a Unicode key value corresponding to the second character to a second WFD device through a user input device. May include a generic input type identifier field, a length field, and a description field.
  • the generic input type identifier field includes information about the user input device that has input the second character
  • the length field includes information about the length of the description field
  • the description field includes information about the Unicode key value. can do.
  • the generic input message may further include a character / control identifier, and the character / control identifier may indicate whether a value included in the description field is a Unicode key value for a character key or a control key value for a function key.
  • the WFD sink 2150 includes a processor 2160, a memory 2170, and a communication unit 2180.
  • the RF unit 2180 may be connected to the processor 2160 to transmit / receive a radio signal.
  • the processor 2160 may implement the functions, processes, and / or methods proposed in the present invention.
  • the processor 2160 may be implemented to perform the operation of the WFD sink 2150 according to the above-described embodiment of the present invention.
  • the processor may perform the operation of the WFD sink 2150 (or the second WFD device) in the embodiment of FIGS. 1 to 20.
  • the processor 2160 transmits a character switching capability parameter to the first WFD device through a user input back channel (UIBC) capability negotiation procedure with a first WFD device (or a WFD source), and transmits a character switching capability parameter to the first WFD device.
  • UIBC user input back channel
  • 2 may be implemented to transmit the first character switching setting parameter to the first WFD device through the UIBC setting procedure to set the first character (eg, English) output on the screen of each of the WFD devices.
  • the processor 2160 transmits the key code for the character switch button to the first WFD device through the UIBC through a user input device of the second WFD device, and displays a screen on each of the screens of the second and first WFD devices.
  • the second character conversion setting parameter may be transmitted to the first WFD device through a UIBC resetting procedure.
  • Processors 2110 and 2160 may include application-specific integrated circuits (ASICs), other chipsets, logic circuits, data processing devices, and / or converters for interconverting baseband signals and wireless signals.
  • the memories 2120 and 2170 may include read-only memory (ROM), random access memory (RAM), flash memory, memory cards, storage media, and / or other storage devices.
  • the RF unit 2130 and 2180 may include one or more antennas for transmitting and / or receiving a radio signal.
  • the above-described technique may be implemented as a module (process, function, etc.) for performing the above-described function.
  • the module may be stored in the memories 2120 and 2170 and executed by the processors 2110 and 2160.
  • the memories 2120 and 2170 may be inside or outside the processors 2110 and 2160, and may be connected to the processors 2110 and 2160 by various well-known means.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Telephone Function (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

WFD에서 입력 문자 전환 방법 및 장치가 개시된다. WFD에서 입력 문자 전환 방법은 제1 WFD 장치가 제2 WFD 장치와의 UIBC 능력 협상 절차를 통해 제2 WFD 장치로 문자 전환 능력 파라메터를 전송하는 단계, 제1 WFD 장치가 제1 WFD 장치와 제2 WFD 장치 각각의 화면 상에서 출력되는 제1 문자를 설정하기 위해 UIBC 설정 절차를 통해 제2 WFD 장치로 제1 문자 전환 설정 파라메터를 전송하는 단계와 제1 WFD 장치가 제1 WFD 장치의 사용자 입력 장치를 통해 문자 전환 버튼에 대한 키 코드를 UIBC를 통해 제2 WFD 장치로 전송하는 단계와 제1 WFD 장치가 제1 WFD 장치와 제2 WFD 장치 각각의 화면 상에서 출력되는 제1 문자를 제2 문자로 스위칭하기 위해 UIBC 재설정 절차를 통해 제2 WFD 장치로 제2 문자 전환 설정 파라메터를 전송하는 단계를 포함할 수 있다.

Description

WFD에서 입력 문자 전환 방법 및 장치
본 발명은 WFD(WiFi(wireless fidelity) display)에 관한 것으로 보다 상세하게는 WFD에서 입력 문자를 전환하는 방법 및 장치에 관한 것이다.
모바일 기기의 성능은 이제 PC(personal computer)와도 비견될 정도로 큰 향상을 보여주고 있지만, 화면 크기에 있어서는 한계가 있다. 특히 스마트폰은 휴대성이 중요한 만큼 6인치 정도가 화면 크기의 마지노선으로 언급되고 있고, 6인치의 디스플레이는 멀티미디어 컨텐츠를 즐기는 유저 입장에서 여전히 작은 화면일 수 있다.
그래서 모바일 기기에서 보던 영상을 대 화면의 TV(television) 또는 모니터에서 볼 수 있게 하기 위한 기술이 연구되고 있다. 이런한 기술은 무선 디스플레이 전송 기술이라는 용어로 표현될 수 있다. 무선 디스플레이 전송 기술은 크게 컨텐츠 전송과 미러링(스크린 캐스팅)으로 나눠질 수 있다. 컨텐츠 전송은 모바일 기기 화면을 그대로 전송하는 것이 아니라 VOD(Video on Demand) 서비스와 연계되어야 한다. 컨텐츠 전송은 영상을 신호로 보내는 방식이고, 미러링은 컨텐츠 파일을 스트리밍으로 원격 기기로 전송하여 TV와 같은 대화면 디스플레이에 다시 한 번 보여주는 방식이다.
미러링(스크린캐스팅)은 이름 그대로 모바일 기기에 출력된 영상을 거울에 비친 것처럼 동시에 보여주는 방식이다. 미러링(스크린캐스팅)은 프리젠테이션을 할 때 D-sub(D-Subminiature, RGB), DVI(Digital Visual Interface), HDMI(High-Definition Multimedia Interface)와 같은 유선 방식으로 연결하여 컴퓨터 화면을 프로젝터에 투사하는 방식과 유사하다. 미러링 방식은 실시간으로 특정 서비스에 종속되지 않고 원래 화면의 픽셀 정보를 그대로 무선으로 전송할 수 있다는 장점이 있다.
와이파이를 이용한 무선 디스플레이 전송 기술로서 와이파이 미라캐스트(WiFi Miracast)가 연구되고 있다. 미라캐스트는 와이파이 협회(WiFi alliance)가 만든 무선 영상 전송 규격이자 무선 디스플레이 전송 기술이다. 미라캐스트에서는 화면과 소리를 압축해서 무선랜으로 보내고 동글(dongle)이나 일체형 타입으로 된 수신기에 이를 다시 풀어서 화면에 띄워주는 미러링(스크린캐스팅) 기술의 한 유형이다.
본 발명의 목적은 WFD에서 문자 전환 방법을 제공하는 것이다.
본 발명의 또 다른 목적은 WFD에서 문자 전환 방법을 수행하는 장치를 제공하는 것이다.
상술한 본 발명의 목적을 달성하기 위한 본 발명의 일 측면에 따른 WFD(WiFi display)에서 입력 문자 전환 방법은 제1 WFD 장치가 제2 WFD 장치와의 UIBC(user input back channel) 능력 협상 절차를 통해 상기 제2 WFD 장치로 문자 전환 능력 파라메터를 전송하는 단계, 상기 제1 WFD 장치가 상기 제1 WFD 장치와 상기 제2 WFD 장치 각각의 화면 상에서 출력되는 제1 문자를 설정하기 위해 UIBC 설정 절차를 통해 상기 제2 WFD 장치로 제1 문자 전환 설정 파라메터를 전송하는 단계와 상기 제1 WFD 장치가 상기 제1 WFD 장치의 사용자 입력 장치를 통해 문자 전환 버튼에 대한 키 코드를 UIBC를 통해 상기 제2 WFD 장치로 전송하는 단계와 상기 제1 WFD 장치가 상기 제1 WFD 장치와 상기 제2 WFD 장치 각각의 화면 상에서 출력되는 상기 제1 문자를 제2 문자로 스위칭하기 위해 UIBC 재설정 절차를 통해 상기 제2 WFD 장치로 제2 문자 전환 설정 파라메터를 전송하는 단계를 포함할 수 있되, 상기 제1 WFD 장치는 멀티미디어 컨텐츠의 스트리밍을 지원하는 장치이고, 상기 제2 WFD 장치는 상기 제1 WFD 장치와의 P2P(peer-to-peer) 링크를 통해 상기 제1 WFD 장치로부터 상기 멀티미디어 컨텐츠를 수신하고 렌더링하는 장치일 수 있다.
상술한 본 발명의 목적을 달성하기 위한 본 발명의 다른 측면에 따른 입력 문자 전환을 수행하는 제1 WFD(WiFi display) 장치는 제2 WFD 장치와의 통신을 위한 통신부와 상기 통신부와 동작 가능하게 연결되는 프로세서를 포함하되, 상기 프로세서는 상기 제2 WFD 장치와의 UIBC(user input back channel) 능력 협상 절차를 통해 상기 제2 WFD 장치로 문자 전환 능력 파라메터를 전송하고, 상기 제1 WFD 장치와 상기 제2 WFD 장치 각각의 화면 상에서 출력되는 제1 문자를 설정하기 위해 UIBC 설정 절차를 통해 상기 제2 WFD 장치로 제1 문자 전환 설정 파라메터를 전송하고, 상기 제1 WFD 장치의 사용자 입력 장치를 통해 문자 전환 버튼에 대한 키 코드를 UIBC를 통해 상기 제2 WFD 장치로 전송하고, 상기 제1 WFD 장치와 상기 제2 WFD 장치 각각의 화면 상에서 출력되는 상기 제1 문자를 제2 문자로 스위칭하기 위해 UIBC 재설정 절차를 통해 상기 제2 WFD 장치로 제2 문자 전환 설정 파라메터를 전송하도록 구현될 수 있되, 상기 제1 WFD 장치는 멀티미디어 컨텐츠의 스트리밍을 지원하는 장치이고, 상기 제2 WFD 장치는 상기 제1 WFD 장치와의 P2P(peer-to-peer) 링크를 통해 상기 제1 WFD 장치로부터 상기 멀티미디어 컨텐츠를 수신하고 렌더링하는 장치일 수 있다.
논 아스키 코드인 문자 전환 버튼에 대한 인식이 가능하도록 설정될 수 있다. 따라서, WFD 소스 또는 WFD 싱크에 연결된 사용자 입력 장치의 문자 전환 버튼이 눌린 경우, 문자 전환 여부가 인식되고, WFD 소스 및 WFD 싱크 상에서 전환된 문자에 대한 출력이 가능하다.
도 1 은 와이파이 다이렉트 서비스(WFDS) 프레임워크 구성 요소를 나타낸 개념도이다.
도 2는 WFD 네트워크를 나타낸 개념도이다.
도 3 은 WFD 세션을 나타낸 개념도이다.
도 4는 WFD 세션 설정 방법을 나타낸 개념도이다.
도 5는 WFD 소스와 WFD 싱크 간의 네트워크를 나타낸 개념도이다.
도 6은 WFD 능력 교환 및 협상 절차를 나타낸 개념도이다.
도 7은 WFD 세션 수립 절차를 나타낸 개념도이다.
도 8은 본 발명의 실시예에 따른 UIBC 능력 협상 및 UIBC 능력 설정을 나타낸 개념도이다.
도 9는 본 발명의 실시예에 따른 WFD 싱크의 사용자 입력 장치를 통한 문자 스위치 방법을 나타낸 개념도이다.
도 10은 본 발명의 실시예에 따른 UIBC 능력 협상 및 UIBC 능력 설정을 나타낸 개념도이다.
도 11은 본 발명의 실시예에 따른 키보드를 통한 문자 전환 버튼을 누른 후의 동작이 개시된다.
도 12는 본 발명의 실시예에 따른 UIBC를 통해 다국어 모드 전환을 알리는 방법을 나타낸 순서도이다.
도 13은 본 발명의 실시예에 따른 UIBC를 통해 다국어 모드 전환을 알리는 방법을 나타낸 순서도이다.
도 14는 본 발명의 실시예에 따른 UIBC 능력 협상 및 UIBC 능력 설정을 나타낸 개념도이다.
도 15는 본 발명의 실시예에 따른 수정 wfd-uibc-능력 파라메터를 기반으로 한 다국어 모드 전환 방법을 나타낸 흐름도이다.
도 16은 본 발명의 실시예에 따른 수정 wfd-uibc-능력 파라메터를 기반으로 한 다국어 모드 전환 방법을 나타낸 흐름도이다.
도 17은 본 발명의 실시예에 따른 wfd2-uibc-다국어-지원 파라메터를 기반으로 한 다국어 모드 전환 방법을 나타낸 흐름도이다.
도 18은 본 발명의 실시예에 따른 wfd2-uibc-다국어-지원 파라메터를 기반으로 한 다국어 모드 전환 방법을 나타낸 흐름도이다.
도 19는 본 발명의 실시예에 따른 wfd2-uibc-다국어-지원 파라메터를 기반으로 한 다국어 모드 전환 방법을 나타낸 흐름도이다.
도 20은 본 발명의 실시예에 따른 다국어 지원을 위한 능력 협상 절차를 나타낸 흐름도이다.
도 21은 본 발명의 실시예가 적용될 수 있는 무선 장치를 나타내는 블록도이다.
기존의 무선랜 시스템에서는 액세스 포인트(access point, AP)가 허브로서 기능하는 인프라스트럭쳐 (infrastructure) BSS(basic service set) 내에서의 장치(AP 및 STA(station)) 간의 동작이 주로 정의되었다. AP는 무선/유선 연결을 위한 물리 계층 지원 기능, 네트워크 상의 장치들에 대한 라우팅 기능, 장치를 네트워크에 추가/제거하는 기능, 서비스 제공 기능 등을 담당할 수 있다. 즉, 기존의 무선랜 시스템에서는 네트워크 내의 장치들이 AP를 통하여 연결되는 것이지 서로 간에 직접 연결되는 것은 아니다.
장치들 간의 직접 연결을 지원하기 위한 기술로서 와이파이 다이렉트 (Wi-Fi Direct) 표준이 정의되고 있다. 와이파이 다이렉트는 기존의 무선랜 시스템에서 기본적으로 요구되는 액세스 포인트 없이 장치(device)(또는 STA(station))들 간에 서로 용이하게 연결할 수 있도록 하는 직접 통신 기술이다. 와이파이 다이렉트가 사용되는 경우, 복잡한 설정 과정 없이 장치들 간에 연결이 설정되어 사용자에게 다양한 서비스를 제공할 수 있다.
WFA(Wi-Fi Alliance)에서는 Wi-Fi Direct 링크를 이용한 다양한 서비스(예를 들어, 샌드(Send), 플레이(Play), 디스플레이(Display), 프린트(Print) 등)을 지원하는 와이파이 다이렉트 서비스(WFDS)가 연구되고 있다. WFDS에 따르면, 애플리케이션은 ASP(Application Service Platform)이라는 서비스 플랫폼에 의해서 제어 또는 관리될 수 있다.
WFDS가 지원되는 WFDS 장치는 디스플레이 장치, 프린터, 디지털 카메라, 프로젝터 및 스마트 폰 등과 같은 무선랜 시스템을 지원하는 장치들을 포함한다. 또한, WFDS 장치는 STA 및 AP를 포함할 수 있다. WFDS 네트워크 내의 WFDS 장치들은 서로 직접 연결될 수 있다.
도 1 은 와이파이 다이렉트 서비스(WFDS) 프레임워크 구성 요소를 나타낸 개념도이다.
도 1을 참조하면, WFDS 프레임워크는 Wi-Fi Direct 계층(100), ASP(120), 서비스 계층(140), 어플리케이션 계층(160)을 포함할 수 있다.
Wi-Fi Direct 계층(100)은 와이파이 다이렉트 표준에서 정의된 MAC(medium access control) 계층이다. Wi-Fi Direct 계층(100)의 하위에는 Wi-Fi PHY와 호환되는 물리 계층 (미도시)에 의해서 무선 연결이 구성될 수 있다. Wi-Fi Direct 계층(100)의 상위에는 ASP(Application Service Platform)(120)가 정의된다.
ASP(120)는 공통 공유 플랫폼(common shared platform)이며, 그 상위의 애플리케이션 (Application) 계층(160)과 그 하위의 Wi-Fi Direct 계층(100) 사이에서 세션(session)관리, 서비스의 명령 처리, ASP 간 제어 및 보안 기능을 수행한다.
ASP(120)의 상위에는 서비스(Service) 계층(140)이 정의된다. 예를 들어, 서비스 계층(140)에서는 4 개의 기본 서비스인 센드(Send), 플레이(Play), 디스플레이(Display), 프린트(Print) 서비스 및 서드파티 애플리케이션에서 정의된 서비스가 지원될 수 있다. 이뿐만 아니라 서비스 계층(140)은 와이파이 시리얼버스(Wi-Fi Serial Bus, WSB), 와이파이 도킹(Wi-Fi Docking), 또는 인접 인지 네트워크(Neighbor Awareness Networking, NAN)을 지원할 수도 있다.
애플리케이션 계층(160)은 사용자 인터페이스(user interface, UI)를 제공할 수 있으며, 정보를 사람이 인식 가능한 형태로 표현하고 사용자의 입력을 하위 계층으로 전달할 수 있다.
이하, 본 발명의 실시예에서는 WFDS 중 와이파이 디스플레이(WFD: Wi-Fi(wireless fidelity) display)가 보다 구체적으로 개시된다.
WFD 표준은 높은 품질과 낮은 레이턴시를 만족시키면서 오디오/비디오(AV: audio/video) 데이터를 장치 간에 전송하기 위해 정의되었다. WFD 표준이 적용된 WFD 네트워크(WFD 세션)를 통해 Wi-Fi 디바이스들은 홈 네트워크, 오피스 네트워크, 또는 핫-스팟 네트워크에 통하지 않고 피어-투-피어(peer to peer) 방식으로 서로 연결될 수 있다. 이하, WFD 표준에 따라 데이터를 송신 및 수신하는 장치는 WFD 장치라는 용어로 표현될 수 있다. WFD 네트워크 내의 WFD 장치들은 WFD 장치에 대한 정보(예를 들어, 능력 정보(capability information))를 서로 탐색하고, WFD 세션을 설정한 후, WFD 세션을 통해 컨텐츠를 렌더링(rendering) 할 수 있다.
WFD 세션은 컨텐츠를 제공하는 소스 장치(source device) 및 컨텐츠를 수신하고 렌더링하는 싱크 장치(sink device) 간의 네트워크일 수 있다. 소스 장치는 WFD 소스, 싱크 장치는 WFD 싱크라는 용어로도 표현될 수 있다. WFD 소스는 WFD 소스의 디스플레이(또는 스크린) 상에 존재하는 데이터를 WFD 싱크의 디스플레이로 미러링(mirroring)할 수 있다.
WFD 소스와 WFD 싱크는 서로 간에 제 1 시퀀스 메시지를 교환하여 디바이스 탐색 및 서비스 탐색 절차를 수행할 수 있다. WFD 소스와 WFD 싱크 간의 디바이스 탐색 및 서비스 탐색 절차가 완료된 이후, WFD 소스 및 WFD 싱크 각각에 인터넷 프로토콜(internet protocol, IP) 주소가 할당될 수 있다. WFD 소스와 WFD 싱크 사이에는 전송 제어 프로토콜(TCP: transmission control protocol) 연결이 확립되고, 이후 WFD 소스 및 WFD 싱크에 대한 실시간 스트리밍 프로토콜(RTSP: real time streaming protocol) 및 실시간 프로토콜(RTP: real time protocol) 스택들이 활성화될 수 있다.
WFD 소스와 WFD 싱크 간에 능력 협상 절차(capability negotiation procedure)는 RTSP를 통해 수행되고, 능력 협상 절차가 수행되는 동안 WFD 소스와 WFD 싱크는 RTSP 기반의 메시지(M(message)1 내지 M4)를 교환할 수 있다. 이후 WFD 소스와 WFD 싱크는 WFD 세션 제어 메시지들을 교환할 수 있다. 또한 WFD 소스와 WFD 싱크 사이에는 RTP를 통한 데이터 세션이 확립될 수 있다. WFD 네트워크에서는 데이터 전달(data transport)을 위해 사용자 데이터그램 프로토콜(User Datagram Protocol, UDP)이 사용될 수 있다.
도 2는 WFD 네트워크를 나타낸 개념도이다.
도 2를 참조하면, WFD 소스(200)와 WFD 싱크(250)는 WFD 장치로서 WiFi-P2P를 기반으로 연결될 수 있다.
여기서, WFD 소스(200)는 WiFi P2P(peer to peer) 링크를 통해 멀티미디어 컨텐츠의 스트리밍을 지원하는 장치이고, WFD 싱크(250)는 P2P 링크를 통해 WFD 소스(200)로부터 멀티미디어 컨텐츠를 수신하고 이미지 및/또는 사운드를 생성하는 절차를 수행하는 장치를 의미할 수 있다. 이미지 및/또는 사운드를 생성하는 절차는 렌더링이라는 용어로 표현될 수 있다.
WFD 싱크(250)는 프라이머리(primary) 싱크와 세컨더리(secondary) 싱크로 구분될 수 있다. 특히 세컨더리 싱크는 WFD 소스(200)와 독립적으로 연결되면 오디오 페이로드만 렌더링할 수 있다.
도 3 은 WFD 세션을 나타낸 개념도이다.
도 3의 상단 첫번째는 오디오-단독(audio only) 세션이다. WFD 소스(300)는 오디오 단독 세션을 통해 프라이머리 싱크(305) 또는 세컨더리 싱크(310) 중 어느 하나와 연결될 수 있다.
도 3의 상단 두번째는 비디오-단독(video-only) 세션이다. WFD 소스(320)는 프라이머리 싱크(325)와 연결될 수 있다.
도 3의 상단 세번째는 오디오 및 비디오 세션으로서 비디오-단독(video-only) 세션과 마찬가지로 WFD 소스(340)는 프라이머리 싱크(345)와 연결될 수 있다.
도 3의 상단 네번째는 커플드 싱크(Coupled WFD Sink) 동작에서 세션 연결을 개시한다. 커플드 싱크 (Coupled WFD Sink) 동작에서 프라이머리 싱크(365)는 비디오를 렌더링하고, 세컨더리 싱크(370)는 오디오를 각각 렌더링할 수 있다. 또는 프라이머리 싱크(365)가 비디오 및 오디오를 모두 렌더링할 수도 있다.
이와 같은 WFD 세션은 아래의 도 4 에 도시된 바와 같은 절차를 수행한 후 수립될 수 있다.
도 4는 WFD 세션 설정 방법을 나타낸 개념도이다.
도 4를 참조하면, WFD 장치 탐색 절차(WFD Device Discovery, S401), WFD 서비스 탐색 절차(WFD Service Discovery, S402), WFD 연결 셋업 절차(WFD Connection Setup, S403), 능력 교환 및 협상 절차(Capability Exchange and Negotiation, S404)가 수행된 이후 WFD 세션이 설정될 수 있다.
구체적으로 WFD 장치 탐색 절차(S401)에서는 WFD 소스는 WFD 장치 탐색 절차를 통해 WFD를 위한 피어 장치, 즉 WFD 싱크를 찾을 수 있다.
WFD 소스 및 WFD 싱크에 의해 WFD 장치 탐색을 위해 전송되는 비콘 프레임, 프로브 요청 프레임 및 프로브 응답 프레임 등은 WFD IE(Information Element)를 포함할 수 있다. 여기서, WFD IE 는 장치 타입, 장치 상태 등의 WFD 와 관련된 정보를 포함하는 정보 요소일 수 있다.
WFD 소스는 WFD IE를 포함하는 프로브 요청 프레임을 WFD 싱크로 전송할 수 있고, WFD 싱크는 프로브 요청 프레임에 대한 응답으로 WFD IE를 포함하는 프로브 응답 프레임을 전송할 수 있다. 만약 WFD 장치가 인프라스트럭처 AP와 연계되어 있고 Wi-Fi P2P 장치로 동작하는 경우, 프로브 요청 프레임에는 WFD IE 및 P2P 정보 요소가 포함될 수 있다. 프로브 요청 프레임에 대한 응답인 프로브 응답 프레임은 프로브 요청 프레임이 수신된 채널을 통해 전송되며, P2P IE 및 WFD IE를 모두 포함할 수 있다.
언급되지 않은 WFD 장치 탐색과 관련된 내용들은 'Wi-Fi Display Technical Specification' 및/또는 'Wi-Fi Peer-to-Peer (P2P) Technical Specification Wi-Fi Direct Service Addendum' 문서에 따를 수 있으며 이는 이하의 설명들에도 적용된다.
WFD 서비스 탐색 절차(S402)에서는 WFD 장치 탐색을 수행한 WFD 소스 및 WFD 싱크의 상호 간의 서비스 능력에 대한 탐색이 수행될 수 있다. 예를 들어, WFD 소스가 WFD 능력(capability)에 대한 정보를 포함하는 서비스 탐색 요청 프레임을 전송하면 WFD 싱크는 서비스 탐색 요청 프레임에 대한 응답으로 WFD 능력에 대한 정보를 포함하는 서비스 탐색 응답 프레임이 전송될 수 있다. WFD 서비스 탐색 절차는 선택적인 절차일 수 있다.
WFD 서비스 탐색 절차의 수행을 위해 WFD 장치 탐색 절차에 이용되는 프로브 요청 프레임 및 프로브 응답 프레임은 WFD 장치가 서비스 탐색 절차를 지원하는 능력을 갖추고 있는지 여부를 지시하는 정보를 포함할 수 있다.
WFD 연결 셋업 절차(S403)에서는 WFD 장치 탐색 절차 그리고 선택적으로 WFD 서비스 탐색 절차를 수행한 WFD 장치는 WFD 연결 셋업을 위한 WFD 장치를 선택할 수 있다. 정책(policy) 또는 사용자 입력 등에 따라 WFD 연결 셋업을 위한 WFD 장치가 선택된 후, WFD 연결을 위해 Wi-Fi P2P 및 TDLS(tunneled direct link service) 중 어느 하나의 연결 방법(connectivity scheme)이 사용될 수 있다. WFD 장치들은 선호하는 연결(preferred connectivity) 정보 및 WFD 정보 요소와 함께 전달되는 연계된 BSSID(basic service set identifier) 부요소(subelement)에 기초하여 연결 방법을 결정할 수 있다.
도 5는 WFD 소스와 WFD 싱크 간의 네트워크를 나타낸 개념도이다.
도 5의 상단에서는 Wi-Fi P2P를 기반으로 한 WFD 소스(500)와 WFD 싱크(510) 간의 연결이 개시되고, 도 5의 하단에서는 TDLS 링크를 기반으로 한 WFD 소스(550)와 WFD 싱크(560) 간의 연결이 개시되어 있다.
도 5의 상단과 같이 AP는 WFD 소스(500)와 WFD 싱크(510)에게 공통되거나 다를 수 있다. 또는 AP는 존재하지 않을 수도 있다. 도 5의 하단과 같이 TDLS 링크를 사용하여 WFD 연결을 수행하는 경우, WFD 소스(550)와 WFD 싱크(560)는 동일한 ΑΡ와 연결을 유지해야 한다.
WFD 능력 교환 및 협상 절차는 WFD 장치들 사이에 WFD 연결 셋업 절차 이후에 수행될 수 있다. WFD 능력 교환 및 협상을 통해 WFD 소스 및 WFD 싱크는 서로가 지원하는 코덱, 코덱의 프로파일 정보, 코덱의 레벨 정보 및 해상도 정보 중 적어도 하나 이상의 정보를 상호 간에 교환할 수 있다. WFD 능력 교환 및 협상은 RTSP(Real Time Streaming Protocol)를 이용한 메시지를 교환에 의해 수행될 수 있다. 또한, WFD 세션 동안의 오디오/비디오 페이로드를 정의하는 파라미터 집합을 결정할 수 있다. WFD 능력 교환 및 협상 절차는 후술할 도 6에 도시된 바와 같이 RTSP M1부터 RTSP M4 메시지의 교환에 의해 수행될 수 있다.
WFD 교환 및 협상 절차 이후 WFD 세션 수립 절차가 수행될 수 있다.
도 6은 WFD 능력 교환 및 협상 절차를 나타낸 개념도이다.
도 6을 참조하면, WFD 소스는 RSTP 절차 및 WFD 능력 협상을 시작하기 위한 RTSP M1 요청 메시지를 전송할 수 있다(단계 S601).
RTSP M1 요청 메시지는 WFD 싱크에서 지원하는 RTSP 메소드(methods) 집합(set)을 결정하기 위한 RTSP OPTIONS 요청을 포함할 수 있다. RTSP M1 요청 메시지를 수신한 WFD 싱크는 자신이 지원하는 RTSP 메소드가 열거된 RTSP M1 응답 메시지를 전송할 수 있다(단계 S602).
계속해서, WFD 싱크는 WFD 소스에서 지원하는 RTSP 메소드 집합을 결정하기 위한 RTSP M2 요청 메시지를 전송할 수 있다(단계 S603).
RTSP M2 요청 메시지가 수신되면, WFD 소스는 자신이 지원하는 RTSP 메소드가 열거된 RTSP M2 응답 메시지로 응답할 수 있다(단계 S604).
WFD 소스는 알고 싶은 WFD 능력들의 목록을 명시한 RTSP M3 요청 메시지(RTSP GET_PARAMETER 요청 메시지)를 전송할 수 있다(단계 S605).
RTSP M3 요청 메시지가 수신되면 WFD 싱크는 RTSP M3 응답 메시지 (RTSP GET_PARAMETER 응답 메시지)로 응답할 수 있다(단계 S606).
RTSP M3 응답 메시지에 기초하여, WFD 소스는 WFD 세션 동안 사용될 최적의 파라미터 집합을 결정하고, 결정된 파라미터 집합을 포함하는 RTSP M4 요청 메시지(RTSP SET_PARAMETER 요청 메시지)를 WFD 싱크로 전송할 수 있다.
RTSP M4 요청 메시지를 수신한 WFD 싱크는 RTSP M4 응답 메시지(RTSP SET_PARAMETER 응답 메시지)를 전송할 수 있다(단계 S607).
도 7은 WFD 세션 수립 절차를 나타낸 개념도이다.
도 7에서는 WFD 능력 교환 및 협상을 수행한 WFD 소스/WFD 싱크들은 WFD 세션을 수립할 수 있다. 구체적으로 WFD 소스는 RTSP SET 파라미터 요청 메시지(RTSP M5 Trigger SETUP request)를 WFD 싱크로 전송할 수 있다(S701).
WFD 싱크는 RTSP SET 파라미터 요청 메시지에 대한 응답으로 RTSP M5 응답 메시지(RTSP M5 response message)를 전송할 수 있다(단계 S702).
트리거 파라미터 설정(SETUP)을 포함하는 RTSP M5 메시지가 성공적으로 교환되면 WFD 싱크는 RTSP SETUP 요청 메시지(RTSP M6 request)를 WFD 소스로 전송할 수 있다(단계 S703).
RTSP M6 요청 메시지가 수신되면, WFD 소스는 RTSP SETUP 응답 메시지(RTSP M6 response)로 응답할 수 있다(단계 S704).
RTSP Μ6 응답 메시지의 상태 코드의 설정을 통해 RTSP 세션의 성공적인 구축이 지시될 수 있다.
RTSP M6 메시지의 성공적인 교환 이후, WFD 싱크는 RTP 스트림을 수신할 준비가 되었음을 알리기 위해 RTSP PLAY 요청 메시지(RTSP M7 request message)를 소스 장치로 전송할 수 있고(단계 S705), WFD 소스는 RTSP PLAY 응답 메시지(RTSP M7 response message)로 응답할 수 있다(단계 S706). RTSP PLAY 응답 메시지의 상태 코드를 기반으로 WFD 세션의 성공적인 수립이 지시될 수 있다.
WFD 세션이 수립된 후 WFD 소스는 WFD 싱크로 WFD 싱크에서 지원하는 적어도 하나의 RTSP 파라미터에 대한 능력을 획득하기 위한 RTSP M3 요청 메시지(RTSP GET_PARAMETER 요청 메시지), AV(Audio/Video) 포맷 갱신을 위한 WFD 소스 및 WFD 싱크 사이의 능력 재협상을 위해 WFD 세션에 대응하는 적어도 하나의 RTSP 파라미터 값을 설정하기 위한 RTSP M4 요청 메시지, WFD 싱크가 RTSP PAUSE 요청 메시지(RTSP M9 요청 메시지)를 전송하도록 트리거하는 RTSP M5 요청 메시지， WFD 소스가 WFD 대기 모드(standby mode)로 진입함을 지시하는 RTSP M12 요청 메시지, UIBC(user input back channel)에서 사용될 입력 타입, 입력 장치 및 다른 파라미터들을 선택하기 위한 RTSP M14 요청 메시지 또는 UIBC(user input back channel)를 활성화(enable) 또는 비활성화(disable)하기 위한 RTSP M15 요청 메시지 등을 WFD 싱크로 전송할 수 있다. WFD 소스로부터 전술한 RTSP 요청 메시지를 수신한 WFD 싱크는 RTSP 응답 메시지로 응답할 수 있다.
계속해서 WFD 싱크는 오디오/비디오 스트리밍을 시작(또는 재개)하기 위한 RTSP M7 요청 메시지(RTSP PLAY 요청 메시지), WFD 소스로부터 WFD 싱크로 전송되는 오디오/비디오 스트리밍의 일시 중단을 위한 RTSP M9 요청 메시지(RTSP PAUSE 요청 메시지), WFD 소스에게 오디오 렌더링 장치를 변경할 것을 요청하기 위한 RTSP M10 요청 메시지， 활성 커넥터 타입(active connector type)의 변경을 지시하는 RTSP M11 요청 메시지, WFD 싱크가 WFD 대기 모드로 진입하였음을 지시하는 RTSP M12 요청 메시지, WFD 소스에게 IDR(instantaneous decoding refresh)을 리프레시할 것을 요청하는 M13 요청 메시지, UIBC에서 사용될 입력 타입, 입력 장치 및 다른 파라미터들을 선택하기 위한 RTSP M14 요청 메시지 또는 UIBC의 활성화(enable) 또는 비활성화(disable)를 위한 RTSP M15 요청 메시지 등을 WFD 소스로 전송할 수 있다. WFD 싱크로부터 상기 열거된 RTSP 요청 메시지를 수신한 WFD 소스는 RTSP 응답 메시지로 응답할 수 있다.
WFD 세션이 구축되어, 오디오/비디오 스트리밍이 시작되면, WFD 소스 및 WFD 싱크는 양자가 공통으로 지원하는 코덱을 이용하여 오디오/비디오 스트리밍을 진행할 수 있다. WFD 소스와 WFD 싱크가 공통으로 지원하는 코덱을 이용함에 따라 양자간의 상호 운용성(interoperability)이 보장할 수 있다.
WFD 통신은 WFD IE에 기초하는데 WFD IE의 포맷은 아래의 표 1과 같이 정의될 수 있다.
Field Size (octets) Value (Hexadecimal) Description
Element ID 1 DD IEEE 802.11 vendor specific usage
Length 1 Variable Length of the following fields in the IE in octets. The length field is variable and set to 4 plus the total length of WFD subelements.
OUI 3 50-6F-9A WFA Specific OUI
OUI Type 1 0A Identifying the type or version of the WFD IE. Setting to 0x0A indicates WFA WFD v1.0
WFD subelements Variable One or more WFD subelements appear in the WFD IE
요소 ID(element ID) 필드, 길이(Length) 필드, WFD 특정의 OUI 필드, WFD IE의 타입/버전을 나타내는 OUI 타입 필드 및 WFD 부요소(subelement) 필드로 이루어진다. WFD 부요소 필드는 다음 표 2와 같은 형식을 가진다.
Field Size (octets) Value (Hexadecimal) Description
Subelement ID 1 Identifying the type of WFD subelement. The specific value is defined in Table 5-3.
Length 2 Variable Length of the following fields in the subelement
Subelements body field Variable Subelement specific information fields
부요소 ID는 아래의 표 3과 같이 정의될 수 있다.
Subelement ID(Decimal) Notes
0 WFD Device Information
1 Associated BSSID
2 WFD Audio Formats
3 WFD Video Formats
4 WFD 3D Video Formats
5 WFD Content Protection
6 Coupled Sink Information
7 WFD Extended Capability
8 Local IP Address
9 WFD Session Information
10 Alternative MAC Address
11-255 Reserved
표 3을 참조하면, 1 옥텟의 부요소 ID 필드는 WFD 부요소가 어떠한 정보를 포함하는 것인지를 지시할 수 있다. 구체적으로, 부요소 ID 필드의 값 0, 1, …, 10은 부요소 각각이 WFD Device Information subelement, Associated BSSID subelement, WFD Audio Formats subelement, WFD Video Formats subelement, WFD 3D Video Formats subelement, WFD Content Protection subelement, Coupled Sink Information subelement, WFD Extended Capability subelement, Local IP Address subelement, WFD Session Information subelement, Alternative MAC Address subelement 임을 나타낼 수 있다. 여기서， WFD Device Information subelement는 WFD 장치와의 페어링 및 세션 생성을 시도할지 결정하는데 필요한 정보들을 포함할 수 있다. Associated BSSID subelement는 현재 연계된 AP 의 주소를 지시하기 위해 사용될 수 있다. WFD Audio Formats subelement, WFD Video Formats subelement, WFD 3D Video Formats subelement 각각은 오디오, 비디오, 3D 비디오에 관련된 WFD 장치의 능력(capability)를 지시하기 위해 사용될 수 있다. WFD Content Protection subelement는 컨텐츠 보호 방법과 관련된 정보를 전달하며 Coupled Sink Information subelement는 coupled 싱크의 상태， MAC 주소 등에 관한 정보를 전달할 수 있다. WFD Extended Capability subelement는 기타 WFD 장치의 다양한 능력 정보를 전달하기 위해 사용되고, Local IP Address subelement는 TDLS 셋업 과정에서 WFD 피어에게 IP 주소를 전달하기 위해 사용될 수 있다. WFD Session Information subelement는 WFD 그룹 내 WFD 장치 정보 기술자의 리스트 등의 정보를 포함할 수 있다. WFD 연결 방법이 장치 디스커버리에서 사용되는 것과 다른 인터페이스(예를 들어, MAC 주소)를 필요로 하는 경우 Alternative MAC Address subelement가 관련 정보를 전달할 수 있다.
UIBC(user input back channel)는 WFD 싱크에 존재하는 유저 인터페이스로의 사용자 입력을 WFD 소스로 전달하기 위한 채널일 수 있다. UIBC를 통해 전달되는 UIBC 사용자 입력(user input)은 일반 패킷 헤더(common packet header)를 사용하여 패킷화되고, TCP(transmission control protocol)/IP(internet protocol) 상으로 전달될 수 있다. 사용자 입력 카테고리는 제네릭(generic) 카테고리와 HIDC(human interface device class) 카테고리를 포함할 수 있다. 제네릭 카테고리(또는 통합 카테고리)는 어플리케이션 레벨에서 처리되는 장치에 종속적이지 않은 사용자 입력을 위해 사용될 수 있다. 제네릭 사용자 입력(generic user input)은 제네릭 입력 바디(generic input body)(또는 통합 입력 바디)를 사용한 포맷을 가질 수 있다. 제네릭 사용자 입력은 마우스 및 키보드 이벤트와 같은 입력뿐만 아니라 줌과 스크롤과 같은 개념적인 입력을 포함할 수 있다. HIDC는 리모트 제어 및 키보드 등과 같은 HID(human input device)에 의해 생성되는 사용자 입력을 위해 사용될 수 있다. HIDC 사용자 입력은 HIDC 입력 바디(HIDC input body)를 사용한 포맷을 가질 수 있다.
기존의 UIBC에서 지원하는 키 코드(key code)는 아스키(ASCII, American standard code for information interchange)만 지원할 수 있다. 기존의 WFD에서는 ASCII로 정의되지 않은 키 코드가 사용자 인터페이스를 통해 눌리는 경우, WFD 싱크는 WFD 소스로 UIBC를 통해 키 코드에 대한 정보를 전송할 수 없다.
예를 들어, WFD 싱크에 대한 사용자 입력 장치(또는 유저 인터페이스)를 통해 한글을 입력하기 위해 영문에서 국문으로 전환하기 위한 한영 전환키(또는 문자 전환 버튼/다국어 지원 버튼)를 누르고 국문을 입력하는 경우가 가정될 수 있다. 이러한 경우, 국문에 대한 키 코드가 UIBC를 통해 WFD 소스로 전송되지 않을 수 있다. 따라서, 사용자는 한영 전환키를 눌러 영문에서 국문으로 문자 입력을 전환하였지만 WFD 싱크 및 WFD 소스의 키보드 화면은 계속해서 영문을 입력받는 문자 입력 화면을 출력할 수 있다.
따라서, 이하 본 발명의 실시예에서는 UIBC를 통해 영문이 아닌 다른 문자를 입력하기 위한 방법이 개시된다. 다른 문자는 국문일 수 있다. WFD 소스는 제1 WFD 장치, WFD 싱크는 제2 WFD 장치라는 용어로 표현될 수도 있다.
아래의 표 4는 본 발명의 실시예에 따른 UIBC 파라메터를 개시한다.
wfd2-uibc-keyboard-character-switch-capability = “wfd2-uibc-Keyboard-character-switch-capabilily:” SP character-switch-type CRLF
character-switch-type = “none” / mode; “none” if Character Switch Mode is not supported at Keyboard
mode = 32*32HEXDIG; see table 2. table x-xx indicates one or more supported character-switch-type for character switch at a Keyboard
primary-character = 4*4HEXDIG; indicates value of primary character (e.g., English), basically primary character can be used first for UIBC
secondary-character = 4*4HEXDIG; indicates secondary character (e.g., Korean) secondary character can be used for UIBC when the user push the “character switch” button in primary character status
status = 4*4HEXDIG; indicates value of the current character status (Primary character or Secondary character). Status is toggled between primary character and secondary character whenever the user push the “character switch” button
wfd2-uibc 키보드-문자-스위치-능력(wfd2-uibc-keyboard-character-switch-capability)은 문자-스위치-타입(character-switch-type), 모드(mode), 프라이머리-문자(primary-character), 세컨더리-문자(secondary-character), 상태(status)에 대한 정보를 하위 파라메터로서 포함할 수 있다.
문자-스위치-타입(character-switch-type)은 none 또는 모드(mode)일 수 있다. 문자 스위치 모드가 키보드에서 지원되지 않을 경우, 문자 스위치 타입은 none일 수 있다. 모드(mode)는 키보드에서 문자 스위치(character switch)를 위한 하나 이상의 문자-스위치 타입을 지시할 수 있다.
예를 들어, 모드는 복수의 비트를 기반으로 아래와 같이 언어 간의 변경의 가능 여부를 지시할 수 있다.
Bits Description
0 Switch between English and Korean
1 Switch between English and Japanese
2 Switch between English and Chinese
3 Switch between English and German
4 Switch between English and French
5 Switch between English and Russian
6:127 -
표 5를 참조하면, 구체적으로 복수의 비트(예를 들어, 128비트) 각각을 기반으로 스위칭이 가능한 언어에 대한 정보가 표현될 수 있다.
예를 들어, 첫번째 비트(비트0)는 영문과 국문 간의 스위칭을 지시하고, 두번째 비트(비트1)는 영문과 일문 간의 스위칭을 지시하고, 세번째 비트(비트2)는 영문과 중문 간의 스위칭을 지시하고, 네번째 비트(비트3)는 영문와 독문 간의 스위칭을 지시하고, 다섯번째 비트(비트4)는 영문와 불문 간의 스위칭을 지시하고, 여섯번째 비트(비트5)는 영어와 러시아어 간의 스위칭을 지시할 수 있다. 표 5를 참조하면, 127개의 비트를 기반으로 127개의 문자 전환 타입이 정의될 수 있다.
문자 스위치 타입에 대한 정의를 기반으로 WFD 소스와 WFD 싱크 간의 사용자 입력 장치에서 지원하는 문자 전환 모드가 협상될 수 있다.
프라이머리-문자(primary-character)는 프라이머리 문자(예를 들어, 영문)를 지시할 수 있다. 프라이머리-문자는 UIBC를 통해 우선적으로 설정되어 전송되는 문자일 수 있다.
세컨더리-문자(secondary-character)는 세컨더리 문자(예를 들어, 국문)를 지시할 수 있다. 세컨더리-문자는 사용자가 프라이머리 문자 상태에서 “문자 변경(또는 전환)(character switch)” 버튼을 누를 경우, UIBC를 통해 다음으로 설정되어 전송되는 문자일 수 있다.
상태(status)는 현재 문자 상태(프라이머리 문자 또는 세컨더리 문자)를 지시할 수 있다. 상태는 “문자 변경” 버튼을 누르는 경우, 프라이머리 문자와 세컨더리 문자 사이를 토글(toggle)할 수 있다.
표 4와 같이 wfd2-uibc 키보드-문자-스위치-능력(wfd2-uibc-keyboard-character-switch-capability)가 새로운 파라메터로 정의되고, wfd2-uibc 키보드-문자-스위치-능력에 대한 정보가 RTSP M3 요청 메시지(RTSP M3 GET_PARAMETER request message)와 RTSP M3 응답 메시지(RTSP M3 GET_PARAMETER response message) 각각에 포함되어 WFD 소스와 WFD 싱크 간에 UIBC 능력 협상(capability negotiation)을 위해 사용될 수 있다. 이러한 RTSP M3 메시지를 통한 wfd2-uibc 키보드-문자-스위치-능력 파라메터의 교환을 기반으로 WFD 소스 및 WFD 싱크 각각과 연결된 키보드에서 지원되는 문자 전환 타입 및 문자 전환 모드에 대한 정보가 확인될 수 있다.
또한, RTSP M4 요청 메시지(RTSP M4 SET_PARAMETER request message)와 RTSP M14 요청 메시지(RTSP M4 SET_PARAMETER request message)를 기반으로 WFD 소스와 WFD 싱크에서 UIBC를 통해 전송될 문자 전환 타입 또는 문자 전환 모드가 선택 및 변경될 수 있다.
이뿐만 아니라, 본 발명의 실시예에 따르면, 사용자에 의해 논 아스키 키(Non-ASCII Key)인 문자 전환 버튼이 눌렸을 경우, 문자 전환을 지시하는 UIBC 캡슐레이션(UIBC capsulation)된 사용자 입력 데이터(user input)의 소스 WFD로의 전달을 위한 메시지 포맷이 정의될 수 있다.
문자 전환을 지시하는 UIBC 캡슐레이션된 사용자 입력 데이터의 소스 WFD로의 전달을 위한 메시지 포맷으로 문자 전환을 지시할 수 있는 논 아스키(Non-ASCII) 값을 가지는 새로운 제네릭 입력 메시지(generic input message)가 정의될 수 있다.
아래의 표 6 및 표 7은 문자 전환을 지시할 수 있는 논 아스키 값을 가지는 새로운 제네릭 입력 메시지(generic input message)를 개시한다.
Field Size Description
Reserved Reserved
Key code 1 문자 전환을 위해 정의된 키 값
Key code 2 문자 전환을 위해 정의된 키 값이 두 개의 키 조합으로 정의될 경우 필요함. 키 값 하나로 문자 전환 버튼이 정의될 경우 해당 필드는 0로 설정됨.
표 6에서는 문자 전환을 위해 정의된 문자 전환 버튼을 손으로 누르는 동작이 수행된 경우, 전달되는 제네릭 입력 메시지에 포함되는 키 코드가 개시된다.
구체적으로 문자 전환을 위해 정의된 키 값이 한 개의 키로 정의된 경우, 키 코드1(key code1)이 정의될 수 있다. 사용자가 WFD 싱크와 관련된 사용자 인터페이스에서 문자 전환 버튼을 누르는 경우, 키 코드1이 UIBC 캡슐레이션(UIBC capsulation)된 사용자 입력 데이터(user input)로서 제네릭 입력 메시지에 포함되어 소스 WFD로 전달될 수 있다.
또 다른 예로, 문자 전환을 위해 정의된 키 값이 두 개의 키의 조합(예를 들어, Ctrl키+A)으로 정의된 경우, 키 코드2(key code2)가 정의될 수 있다. 사용자가 WFD 싱크와 관련된 사용자 인터페이스에서 두 개의 키의 조합으로 문자 전환 버튼을 누르는 경우, 키 코드2가 UIBC 캡슐레이션된 사용자 입력 데이터로서 제네릭 입력 메시지에 포함되어 소스 WFD로 전달될 수 있다.
Field Size Description
Reserved Reserved
Key code 1 문자 전환을 위해 정의된 키 값
Key code 2 문자 전환을 위해 정의된 키 값이 두 개의 키 조합으로 정의될 경우 필요함.키 값 하나로 문자 정의 버튼이 정의될 경우 해당 필드는 0로 설정된다.
표 7에서는 문자 전환을 위해 정의된 문자 전환 버튼을 손에서 떼는 동작이 수행된 경우, 전달되는 제네릭 입력 메시지에 포함되는 키 코드가 개시된다.
구체적으로 문자 전환을 위해 정의된 키 값이 한 개의 키로 정의된 경우, 키 코드1이 정의될 수 있다. 사용자가 WFD 싱크와 관련된 사용자 인터페이스에서 문자 전환 버튼을 손으로 누른 이후 떼는 경우, 키 코드1이 사용자 입력 데이터로서 UIBC 캡슐레이션된 사용자 입력 데이터로서 제네릭 입력 메시지에 포함되어 소스 WFD로 전달될 수 있다.
또 다른 예로, 문자 전환을 위해 정의된 키 값이 두 개의 키의 조합(예를 들어, Ctrl키+A)으로 정의된 경우, 키 코드2(key code2)가 정의될 수 있다. 사용자가 WFD 싱크와 관련된 사용자 인터페이스에서 두 개의 키의 조합으로 문자 전환 버튼을 손으로 누른 후 손을 떼는 경우, 키 코드2가 사용자 입력 데이터로서 UIBC 캡슐레이션된 사용자 입력 데이터로서 제네릭 입력 메시지에 포함되어 소스 WFD로 전달될 수 있다.
사용자 입력 데이터에 포함되는 키 코드는 문자 전환 버튼을 위해 새롭게 정의된 아스키 코드이거나 논 아스키 코드일 수 있다.
WFD 싱크(또는 WFD 소스)의 사용자 입력 장치(또는 사용자 인터페이스)에서 최초 사용되는 문자 타입은 프라이머리 문자로 정의되고, WFD 싱크(또는 WFD 소스)에서 문자 전환 버튼을 눌렀을 시 지원되는 다른 문자 타입은 세컨더리 문자로 정의될 수 있다. 즉, 사용자 입력 장치에서 문자 전환 버튼이 눌리기 전에 사용자 입력 장치를 통해 UIBC를 통해 전달되는 문자는 프라이머리 문자로 설정될 수 있다. 전술한 바와 같이 wfd2-uibc 키보드-문자-스위치-능력 파라메터의 상태(status) 파라메터는 프라이머리 문자로 설정될 수 있다. 이후, 사용자에 의해 문자 변경 버튼이 눌리는 경우, wfd2-uibc 키보드-문자-스위치-능력 파라메터의 상태 파라메터는 세컨더리 문자로 설정될 수 있다. 또 다시 사용자에 의해 문자 변경 버튼이 눌리는 경우, wfd2-uibc 키보드-문자-스위치-능력 파라메터의 상태 파라메터는 다시 프라이머리 문자로 설정될 수 있다. 즉, 사용자에 의해 문자 전환 버튼이 눌러질 때마다 상태 파라메터가 프라이머리 문자와 세컨더리 문자 사이에서 토글될 수 있다.
도 8은 본 발명의 실시예에 따른 UIBC 능력 협상 및 UIBC 능력 설정을 나타낸 개념도이다.
도 8에서는 WFD 소스 및 WFD 싱크 간의 UIBC 능력 협상 및 UIBC 능력 설정을 위한 절차가 개시된다.
도 8를 참조하면, WFD 소스는 RTSP M3 요청 메시지를 WFD 싱크로 전송할 수 있다(단계 S800).
WFD 소스는 RTSP M3 요청 메시지(RTSP GET_PARAMETER 요청 메시지)를 전송하되, RTSP M3 요청 메시지는 wfd2-uibc 키보드-문자-스위치-능력 파라메터를 포함할 수 있다.
예를 들어, WFD 소스와 연결된 사용자 입력 장치에 의해 한/영 전환이 지원되는 경우, WFD 소스를 통해 WFD 싱크로 전송되는 wfd2-uibc 키보드-문자-스위치-능력 파라메터에 포함되는 문자 스위치 타입 파라메터는 영문과 국문 사이의 스위치(switch between English and Korean)로 설정될 수 있다.
RTSP M3 요청 메시지가 수신되면 WFD 싱크는 RTSP M3 응답 메시지 (RTSP GET_PARAMETER 응답 메시지)로 응답할 수 있다(단계 S810).
마찬가지로 RTSP M3 응답 메시지도 wfd2-uibc 키보드-문자-스위치-능력 파라메터를 포함할 수 있다. 예를 들어, WFD 싱크와 연결된 사용자 입력 장치에 의해 한/영 전환이 지원되는 경우, WFD 싱크를 통해 WFD 소스로 전송되는 wfd2-uibc 키보드-문자-스위치-능력 파라메터에 포함되는 문자 스위치 타입 파라메터는 영문와 국문 사이의 스위치(switch between English and Korean)로 설정될 수 있다.
위와 같은 RTSP M3 요청 메시지/RTSP M3 응답 메시지의 교환을 기반으로 UIBC 능력 협상 절차가 진행될 수 있다. UIBC 능력 협상 절차 이후, UIBC 능력 설정(UIBC capability establishment) 절차가 수행될 수 있다. 즉, WFD 싱크와 WFD 소스 간의 문자 스위치 능력에 대한 상호 협상이 수행된 이후, 문자 스위치에 대한 실제적인 설정 절차가 RTSP M4/M14 요청 메시지 및 RTSP M4/M14 응답 메시지를 기반으로 수행될 수 있다.
WFD 소스는 RTSP M4/M14 요청 메시지를 WFD 싱크로 전송할 수 있다(단계 S820).
WFD 소스는 RTSP M3 메시지를 기반으로 한 UIBC 능력 협상 절차 이후, WFD 싱크와 WFD 소스 간의 문자 스위치에 대한 실제적인 설정을 위해 RTSP M4 요청 메시지(RTSP M4 SET_PARAMETER request message) 및/또는 RTSP M14 요청 메시지(RTSP M4 SET_PARAMETER request message)를 WFD 싱크로 전송할 수 있다.
RTSP M4 요청 메시지 및 RTSP M14 요청 메시지는 문자 스위치에 대한 설정을 위한 wfd2-uibc 키보드-문자-스위치-능력 파라메터를 포함할 수 있다.
WFD 싱크는 RTSP M4/M14 응답 메시지를 WFD 소스로 전송할 수 있다(단계 S830).
WFD 싱크는 RTSP M4/M14 응답 메시지를 통해 WFD 소스의 문자 스위치 설정에 대한 동의를 전송할 수 있다.
반대로 WFD 싱크가 RTSP M4/M14 요청 메시지를 WFD 소스로 전송하고, WFD 소스가 WFD 싱크로 RTSP M4/M14 응답 메시지를 전송할 수도 있다.
도 9는 본 발명의 실시예에 따른 WFD 싱크의 사용자 입력 장치를 통한 문자 스위치 방법을 나타낸 개념도이다.
도 9에서는 WFD 능력 설정 절차 이후, WFD 싱크와 연결된 사용자 입력 장치를 통해 입력되는 문자의 타입을 변경하기 위해 WFD 싱크와 연결된 사용자 입력 장치의 문자 전환 버튼을 누르고 때는 동작이 수행된 경우, WFD 싱크와 WFD 소스 간의 메시지 전송 동작이 개시된다.
도 9를 참조하면, WFD 소스의 화면이 WFD 싱크의 화면으로 미러링될 수 있다(단계 S900).
WFD 싱크에서 문자 전환 버튼이 눌린 경우, 문자 전환 버튼에 대한 키 코드를 포함하는 사용자 입력 데이터가 WFD 싱크에서 WFD 소스로 전송될 수 있다(단계 S910).
구체적으로 사용자가 WFD 싱크에 연결된 사용자 입력 장치에서 문자 전환 버튼을 누르고 때는 동작을 수행하는 경우, 사용자가 문자 전환 버튼을 누르고 땠을 때 WFD 싱크에서 WFD 소스로 문자 전환 버튼에 대응되는 키 코드가 UIBC 캡슐레이션(UIBC capsulation)된 사용자 입력 데이터(user input)에 포함되어 전송될 수 있다.
이후, UIBC 능력 재설정(re-establishment) 절차를 위해 WFD 싱크가 RTSP M4/RTSP M14 요청 메시지를 통해 변경된 정보를 포함하는 wfd2-uibc 키보드-문자-스위치-능력 파라메터를 전송할 수 있다(단계 S920).
구체적으로 문자 전환 버튼이 영/한 전환 키인 경우, wfd2-uibc 키보드-문자-스위치-능력 파라메터의 상태(status) 파라메터가 영문에서 국문으로 전환될 수 있다.
본 발명의 다른 실시예에 따르면, 기존에 정의된 wfd-uibc-능력 파라메터(wfd-uibc-capability parameter)를 수정한 수정 wfd-uibc-능력 파라메터를 RTSP M3 요청 메시지와 RTSP M3 응답 메시지를 통해 전송하여 문자 전환 능력(또는 UIBC 능력)에 대한 협상이 수행될 수 있다. 아래의 표 8은 수정 wfd-uibc-능력 파라메터가 개시된다.
wfd-uibc-capability = “wfd-uibc-capability:” SP ……inp-type = (“Keyboard” SP character-switch-type) / … character-switch-type = “none” / mode; “none” if not supported at Keyboard
mode = 32*32HEXDIG; see table 2. table x-xx indicates one or more supported character-switch-type for character switch at a Keyboard
primary-character = 4*4HEXDIG; indicates value of primary character (e.g., English), basically primary character can be used first for UIBC
secondary-character = 4*4HEXDIG; indicates secondary character (e.g., Korean) secondary character can be used for UIBC when the user push the “character switch” button in primary character status
status = 4*4HEXDIG; indicates value of the current character status (Primary character or Secondary character). Status is toggled between primary character and secondary character whenever the user push the “character switch” button
표 8을 참조하면, 수정 wfd-uibc-능력 파라메터에는 “키보드” SP 문자-스위치 타입(“Keyboard” SP character-switch-type, mode), 모드(mode), 프라이머리 문자(primary-character), 세컨더리 문자(secondary character), 상태(status)가 문자 스위치를 위한 파라메터로서 포함될 수 있다.
RTSP M3 요청 메시지/RTSP M3 응답 메시지를 통해 전송되는 수정 wfd-uibc-능력 파라메터를 기반으로 WFD 소스 및 WFD 싱크 간에 키보드에서 지원되는 문자 전환 타입 또는 문자 전환 모드에 대한 협상이 수행될 수 있다.
이뿐만 아니라 RTSP M4 요청 메시지/RTSP M14 요청 메시지를 통해 전송되는 수정 wfd-uibc-능력 파라메터를 기반으로 WFD 소스 및 WFD 싱크 간에 키보드에서 지원되는 문자 전환 타입 또는 문자 전환 모드에 대한 설정 및 재설정이 수행될 수 있다.
도 10은 본 발명의 실시예에 따른 UIBC 능력 협상 및 UIBC 능력 설정을 나타낸 개념도이다.
도 10에서는 수정 wfd-uibc-능력 파라메터를 기반으로 한 UIBC 능력 협상 및 UIBC 능력 설정이 개시된다.
도 10을 참조하면, WFD 소스는 WFD 싱크로 RTSP M3 요청 메시지를 전송할 수 있다(단계 S1000).
WFD 소스에 의해 전송되는 RTSP M3 요청 메시지는 전술한 바와 같은 수정 wfd-uibc-능력 파라메터를 포함할 수 있다.
inp type이 “키보드” SP 문자-스위치 타입인 경우, 모드, 프라이머리 문자, 세컨더리 문자 및 상태가 문자 스위치를 위한 WFD 소스의 파라메터로서 포함될 수 있다. 이때 상태는 프라이머리 문자(예를 들어, 영문)로 설정될 수 있다.
WFD 싱크는 WFD 소스로 RTSP M3 응답 메시지를 전송할 수 있다(단계 S1010).
WFD 싱크에 의해 전송되는 RTSP M3 응답 메시지는 전술한 바와 같은 수정 wfd-uibc-능력 파라메터를 포함할 수 있다.
마찬가지로, inp type이 “키보드” SP 문자-스위치 타입인 경우, 모드, 프라이머리 문자, 세컨더리 문자 및 상태가 문자 스위치를 위한 WFD 싱크의 파라메터로서 포함될 수 있다. 이때 수정 wfd-uibc-능력 파라메터에 포함되는 상태 파라메터는 프라이머리 문자(예를 들어, 영어)로 설정될 수 있다.
만약, 사용자에 의해 WFD 싱크와 연결된 사용자 입력 장치를 통해 문자 전환 버튼이 눌렸다가 때진 경우, WFD 싱크는 RTSP M4/RTSP M14 요청 메시지를 WFD 소스로 전송할 수 있다(단계 S1020).
WFD 싱크는 RTSP M4/RTSP M14 요청 메시지는 수정 wfd-uibc-능력 파라메터를 포함할 수 있다. 수정 wfd-uibc-능력 파라메터의 상태 파라메터는 세컨더리 문자(예를 들어, 국어)로 설정될 수 있다.
WFD 소스는 RTSP M4/M14 응답 메시지를 WFD 싱크로 전송할 수 있다(단계 S1030).
도 11은 본 발명의 실시예에 따른 키보드를 통한 문자 전환 버튼을 누른 후의 동작이 개시된다.
도 11에서는 RTSP M3 요청 메시지/RTSP M3 응답 메시지를 기반으로 한 협상 절차를 통해 영문이 프라이머리 캐릭터로 설정되고, 국문이 세컨더리 캐릭터로 설정되고, 상태 파라메터가 영문으로 설정된 경우가 가정된다.
도 11을 참조하면, WFD 싱크 장치의 사용자 입력 장치인 키보드에서 문자 전환 버튼(예를 들어, 한/영 버튼)이 눌린 후에 떼어질 수 있다. 이러한 경우, 문자 전환 버튼에 대응되는 키 코드가 UIBC를 통해 전달될 수 있다.
문자 전환 버튼에 대응되는 키 코드가 UIBC를 통해 전달된 이후, WFD 싱크는 RTSP M4/M14 요청 메시지를 통해 수정 wfd-uibc-능력 파라메터(또는 wfd2-uibc 키보드-문자-스위치-능력 파라메터)를 전송할 수 있다.
RTSP M4/M14 요청 메시지에 포함되는 wfd-uibc-능력 파라메터(또는 wfd2-uibc 키보드-문자-스위치-능력 파라메터)의 상태 파라메터는 영문으로 설정될 수 있다.
WFD 소스는 RTSP M4/M14 요청 메시지에 대한 응답으로 RTSP M4/M14 응답 메시지를 수신할 수 있다.
이후, WFD 싱크의 사용자 입력 장치에 의해 “G(g)”가 눌릴 경우, 문자 입력창 및 디스플레이에는 G(g)에 대응되는 “ㅎ”가 출력될 수 있다.
전술한 바와 같이 본 발명의 실시예에 따르면, 사용자에 의해 다국어 지원을 위한 문자 전환 버튼이 눌러다 떼어졌을 경우, 문자 전환을 지시하는 UIBC 캡슐레이션된 사용자 입력 데이터가 WFD 소스로 전달될 수 있다. 문자 전환 버튼에 대응되는 키 코드를 포함하는 새로운 포괄 입력 메시지 필드는 아래의 표 9 및 표 10과 같이 정의될 수 있다.
Field Size Description
Reserved Reserved
Key code 1 “국문”으로 전환을 위해 정의된 키 값
Key code 2 “영문”으로 전환을 위해 정의된 키 값
표 9에서는 문자 전환을 위해 정의된 문자 전환 버튼이 눌리는 동작(key down 동작)이 수행된 경우, 전달되는 제네릭 입력 메시지에 포함되는 키 코드가 개시된다.
구체적으로 현재 화면에서 국문이 지원되고 있는 상태에서 사용자가 WFD 싱크에 연결된 사용자 입력 장치의 문자 전환 버튼인 한/영 전환 키를 누를 수 있다. 이러한 경우, 키 코드2를 포함하는 제네릭 입력 메시지가 UIBC를 통해 WFD 싱크에서 WFD 소스로 전송될 수 있다. 전술한 바와 같이 이후 상태 파라메터가 영문으로 설정된 수정 wfd-uibc-능력 파라메터(또는 wfd2-uibc 키보드-문자-스위치-능력 파라메터)를 포함하는 RTSP M4 요청 메시지/RTSP M14 요청 메시지가 전송될 수 있다.
반대로 현재 화면에서 영문이 지원되고 있는 상태에서 사용자가 WFD 싱크에 연결된 사용자 입력 장치의 문자 전환 버튼인 한/영 전환 키를 누를 수 있다. 이러한 경우, 키 코드1를 포함하는 제네릭 입력 메시지가 UIBC를 통해 WFD 싱크에서 WFD 소스로 전송될 수 있다. 전술한 바와 같이 이후 상태 파라메터가 국문으로 설정된 수정 wfd-uibc-능력 파라메터(또는 wfd2-uibc 키보드-문자-스위치-능력 파라메터)를 포함하는 M4 요청 메시지/M14 요청 메시지가 전송될 수 있다.
Field Size Description
Reserved Reserved
Key code 1 “국문”으로 전환을 위해 정의된 키 값
Key code 2 “영문”으로 전환을 위해 정의된 키 값
표 10에서는 문자 전환을 위해 정의된 문자 전환 버튼이 떼어지는 동작(key up 동작)이 수행된 경우, 전달되는 사용자 입력 데이터의 포괄 입력 메시지 필드에 포함되는 키 코드가 개시된다.
구체적으로 현재 화면에서 국문이 지원되고 있는 상태에서 사용자가 WFD 싱크에 연결된 사용자 입력 장치의 문자 전환 버튼인 한/영 전환 키를 손으로 눌렀다가 뗄 수 있다. 이러한 경우, 키 코드2를 포함하는 포괄 입력 메시지 필드를 포함하는 사용자 입력 데이터가 UIBC를 통해 WFD 싱크에서 WFD 소스로 전송될 수 있다. 전술한 바와 같이 이후 상태 파라메터가 영문으로 설정된 수정 wfd-uibc-능력 파라메터(또는 wfd2-uibc 키보드-문자-스위치-능력 파라메터)를 포함하는 RTSP M4 요청 메시지/RTSP M14 요청 메시지가 전송될 수 있다.
반대로 현재 화면에서 영문이 지원되고 있는 상태에서 사용자가 WFD 싱크에 연결된 사용자 입력 장치의 문자 전환 버튼인 한/영 전환 키를 손으로 눌렀다가 뗄 수 있다. 이러한 경우, 키 코드1를 포함하는 제네릭 입력 메시지가 UIBC를 통해 WFD 싱크에서 WFD 소스로 전송될 수 있다. 전술한 바와 같이 이후 상태 파라메터가 국문으로 설정된 수정 wfd-uibc-능력 파라메터(또는 wfd2-uibc 키보드-문자-스위치-능력 파라메터)를 포함하는 M4 요청 메시지/M14 요청 메시지가 전송될 수 있다.
사용자 입력 데이터에 포함되는 키 코드는 문자 전환을 위한 새롭게 정의된 아스키 코드이거나, 문자 전환해 정의된 논 아스키 코드일 수 있다.
문자 전환 버튼에 대응되는 키 코드를 포함하는 새로운 포괄 입력 메시지 필드는 아래의 표 11 및 표 12와 같이 정의될 수 있다. 표 11 및 표 12는 영어와 일본어 사이를 전환하는 문자 전환 버튼에 대해 정의된 키코드를 개시한다.
Field Size Description
Reserved Reserved
Key code 1 “일본어”로의 전환을 위해 정의된 키 값
Key code 2 “영어”로의 전환을 위해 정의된 키 값
표 11에서는 일본어/영어 전환키가 눌린 경우(key down), UIBC를 통해 전달되는 키 코드가 개시된다.
Field Size Description
Reserved Reserved
Key code 1 “일본어”로의 전환을 위해 정의된 키 값
Key code 2 “영어”로의 전환을 위해 정의된 키 값
표 12에서는 일본어/영어 전환키가 눌렸다가 떼진 경우(key up), UIBC를 통해 전달되는 키 코드가 개시된다.
도 12는 본 발명의 실시예에 따른 UIBC를 통해 다국어 모드 전환을 알리는 방법을 나타낸 순서도이다.
도 12에서는 다국어 전환 키(예를 들어, 한/영 키)를 통한 설정된 입력 언어의 전환 방법이 개시된다.
도 12를 참조하면, WFD 싱크와 WFD 소스 간에 UIBC 능력 협상 절차가 수행된다(단계 S1200).
전술한 바와 같이 RTSP M3 요청 메시지/RTSP M3 응답 메시지를 기반으로 UIBC 능력 협상 절차가 수행될 수 있다.
WFD 싱크와 WFD 소스 간에 세션 설정 절차가 수행된다(단계 S1210).
WFD 소스의 영상 데이터가 WFD 싱크의 디스플레이 상에서 스트리밍될 수 있다(단계 S1220).
WFD 싱크에 연결된 사용자 입력 장치의 다국어 지원(다국어 전환) 키가 사용자에 의해 눌렸다가 떼어질 수 있다(단계 S1230).
WFD 싱크가 WFD 소스로 다국어 전환 키 코드를 포함하는 사용자 입력 데이터를 전송할 수 있다(단계 S1240).
전술한 표 9 내지 표 12에서 정의된 키 코드를 포함하는 사용자 입력 데이터가 전송될 수 있다.
이후, 사용자는 WFD 싱크에 연결된 사용자 입력 장치의 키 버튼을 눌러 전환된 문자를 입력할 수 있고, 사용자의 전환된 문자에 대응되는 키 코드가 사용자 입력 데이터에 포함되어 전송될 수 있다.
즉, WFD 싱크와 WFD 소스의 화면에서는 변환된 언어의 문자가 출력될 수 있다.
도 13은 본 발명의 실시예에 따른 UIBC를 통해 다국어 모드 전환을 알리는 방법을 나타낸 순서도이다.
도 13에서는 다국어 전환 키(예를 들어, 한/영 키)를 통한 설정된 입력 언어의 전환 방법이 개시된다. 도 13에서는 특히, 영문이 입력되는 영문 모드에서 국문 모드로의 전환 방법이 개시된다.
도 13을 참조하면, 미러링되어 WFD 소스의 영상 데이터가 WFD 싱크의 화면 상에서 출력될 수 있다(단계 S1300).
초기 상태로 프라이머리 문자인 영문이 입력되는 영문 모드가 설정되고, 영문이 사용자 입력 장치를 통해 입력되고 출력될 수 있다.
WFD 싱크에 연결된 사용자 입력 장치의 다국어 전환 키인 한/영 키가 사용자에 의해 눌렸다가 때어질 수 있다.
WFD 싱크가 WFD 소스로 다국어 전환 키인 한/영 키의 키 코드를 포함하는 사용자 입력 데이터를 전송할 수 있다(단계 S1310).
전술한 표 9 내지 표 12에서 정의된 키 코드를 포함하는 사용자 입력 데이터가 전송될 수 있다.
이후, 사용자는 WFD 싱크에 연결된 사용자 입력 장치의 키 버튼을 눌러 전환된 문자를 입력할 수 있고, 사용자의 전환된 문자에 대응되는 키 코드가 사용자 입력 데이터에 포함되어 전송될 수 있다(단계 S1320).
즉, WFD 싱크의 사용자 입력 장치를 통해 국문이 입력될 수 있고, WFD 싱크/WFD 소스의 화면을 통해 국문이 출력될 수 있다.
본 발명의 다른 실시예에 따르면, wfd2-uibc-다국어-지원(wfd2-uibc-multilingual-support) 파라메터가 정의되고, 사용자에 의해 다국어 지원을 위한 문자 전환 버튼이 눌러질 때마다 wfd2-uibc-다국어-지원 파라메터를 포함한 RTSP 메시지가 WFD 소스로 전송되는 방법이 개시된다.
wfd2-uibc-multilingual-support = “wfd2-uibc-multilingual-support:” SP multilingual-support-mode CRLF
multilingual-support-mode = “none” / mode; “none” if multilingual Support Mode is not supported at Keyboard
mode = 32*32HEXDIG; see table 2. table 2 indicates one or more multilingual-support-mode for mode switch at a Keyboard
primary-mode = 4*4HEXDIG; indicates value of primary mode (e.g., English), basically primary mode can be used first for UIBC
secondary-mode = 4*4HEXDIG; indicates secondary mode (e.g., Korean) secondary mode is activated when the user push the “Multilingual Support” button on the user's Keyboard in primary mode
status = 4*4HEXDIG; indicates value of the current multilingual support mode (Primary mode or Secondary mode). Status is toggled between primary mode and secondary mode whenever the user push the “Multilingual Support” button on the Keyboard.
표 13은 새롭게 정의된 wfd2-uibc-다국어-지원 파라메터에 포함되는 파라메터를 개시한다. 각 파라메터는 아래와 같은 의미를 가질 수 있다.
다국어-지원 모드는 none 또는 모드(mode)일 수 있다. 다중 언어 지원 모드가 키보드에서 지원되지 않을 경우, 다중언어-지원 파라메터는 none일 수 있다.
모드(mode)는 키보드에서 모드 스위치를 위한 하나 이상의 다중언어-지원-모드를 지시할 수 있다. 아래의 표 14는 사용자 입력 장치에 의해 지원되는 다국어 지원 모드 리스트 (“multilingual-support-mode” list)를 정의한 테이블이다.
Bits Description
0 Switch between English and Korean
1 Switch between English and Japanese
2 Switch between English and Chinese
3 Switch between English and German
4 Switch between English and French
5 Switch between English and Russian
6:127 -
표 14와 같이 정의된 값 중 선택된 값을 기반으로 WFD 소스 및 WFD 싱크가 UIBC 능력 협상 절차, UIBC 능력 설정/재설정 절차를 통해 전송되는 RTSP M3/4/14 메시지에 포함되는 wfd2-uibc-다국어-지원 파라메터의 모드가 설정될 수 있다.
프라이머리-모드(primary-mode)는 프라이머리 문자(예를 들어, 영문)를 지시할 수 있다. 프라이머리-문자는 우선적으로 설정되어 UIBC 상에서 전달되는 문자일 수 있다.
세컨더리-모드(secondary-mode)는 세컨더리 문자(예를 들어, 국문)를 지시할 수 있다. 세컨더리-모드는 사용자가 프라이머리 모드 상태에서 “다중언어 지원” 버튼을 누를 경우, 활성화될 수 있다.
상태(status)는 현재 문자 상태(프라이머리 문자 또는 세컨더리 문자)를 지시할 수 있다. “다중언어 지원” 버튼이 눌릴 때마다 상태는 프라이머리 문자와 세컨더리 문자 사이를 토글(toggle)할 수 있다.
도 14는 본 발명의 실시예에 따른 UIBC 능력 협상 및 UIBC 능력 설정을 나타낸 개념도이다.
도 14에서는 WFD 소스 및 WFD 싱크 간의 UIBC 능력 협상 및 UIBC 능력 설정을 위한 절차가 개시된다.
도 14를 참조하면, WFD 소스는 RTSP M3 요청 메시지를 WFD 싱크로 전송할 수 있다(단계 S1400).
WFD 소스는 RTSP M3 요청 메시지(RTSP GET_PARAMETER 요청 메시지)를 전송하되, RTSP M3 요청 메시지는 wfd2-uibc-다국어-지원 파라메터를 포함할 수 있다. wfd2-uibc-다국어-지원 파라메터의 모드는 영문과 국문 사이의 스위치(switch between English and Korean)로 설정될 수 있고, 상태는 프라이머리 모드인 영문으로 설정되어 WFD 소스의 UIBC 관련 능력 정보를 WFD 싱크로 알릴 수 있다.
WFD 싱크는 RTSP M3 응답 메시지(RTSP GET_PARAMETER 응답 메시지)를 WFD 소스로 전송하되, RTSP M3 응답 메시지는 wfd2-uibc-다국어-지원 파라메터를 포함할 수 있다(단계 S1410).
마찬가지로 wfd2-uibc-다국어-지원 파라메터의 모드는 영문과 국문 사이의 스위치(switch between English and Korean)로 설정될 수 있고, 상태는 프라이머리 모드인 영문으로 설정될 수 있다. WFD 싱크는 RTSP M3 메시지를 통해 UIBC 관련 능력 정보를 WFD 소스로 알릴 수 있다.
본 발명의 실시예에 따르면, UIBC 능력 협상 절차의 수행 이후, 영문 모드가 설정될 수 있고, 이후, 다중언어 지원 버튼이 눌릴 경우, 프라이머리 모드가 세컨더리 모드로 변경될 수 있다. 다중 언어 지원 버튼이 눌릴 경우, 사용자는 M4/M14 요청 메시지를 통해 wfd2-uibc-다국어-지원 파라메터를 전송할 수 있다. 이때, wfd2-uibc-다국어-지원 파라메터의 상태는 세컨더리 모드인 국문으로 설정될 수 있다. WFD 소스는 M4/M14 요청 메시지에 대한 응답으로 M4/M14 응답 메시지를 WFD 싱크로 전송할 수 있다.
반대로, WFD 소스가 UIBC 능력 설정 절차를 위해 M4/M14 요청 메시지를 통해 wfd2-uibc-다국어-지원 파라메터를 전송하고(단계 S1420), WFD 싱크는 M4/M14 요청 메시지에 대한 응답으로 M4/M14 응답 메시지를 WFD 소스로 전송할 수 있다(단계 S1430).
이후 사용자가 WFD 싱크에 연결된 사용자 입력 장치의 키를 누르는 경우, WFD 싱크는 변환된 언어(예를 들어, 국문)의 키에 대응되는 키 코드를 사용자 입력 데이터에 포함하여 WFD 소스로 전송할 수 있다(단계 S1440).
본 발명의 다른 실시예에 따르면, 기존에 정의된 wfd-uibc-능력 파라메터(wfd-uibc-capability parameter)를 수정한 수정 wfd-uibc-능력 파라메터를 RTSP M3 요청 메시지와 RTSP M3 응답 메시지를 통해 전송하여 다국어 지원 능력(또는 UIBC 능력)에 대한 협상이 수행될 수 있다. 또한, RTSP M4 요청 메시지와 RTSP M14 요청 메시지를 기반으로 다국어 지원 모드에 대한 설정 및 변경이 수행될 수 있다.
아래의 표 15는 수정 wfd-uibc-능력 파라메터가 개시된다.
wfd-uibc-capability = “wfd-uibc-capability:” SP ……inp-type = (“Keyboard” SP multilingual-support-mode) / … multilingual-support-mode = “none” / mode; “none” if multilingual Support Mode is not supported at Keyboard
mode = 32*32HEXDIG; see table 2. table 2 indicates one or more multilingual-support-mode for mode switch at a Keyboard
primary-mode = 4*4HEXDIG; indicates value of primary mode (e.g., English), basically primary mode can be used first for UIBC
secondary-mode = 4*4HEXDIG; indicates secondary mode (e.g., Korean) secondary mode is activated when the user push the “Multilingual Support” button on the user's Keyboard in primary mode
status = 4*4HEXDIG; indicates value of the current multilingual support mode (Primary mode or Secondary mode). Status is toggled between primary mode and secondary mode whenever the user push the “Multilingual Support” button on the Keyboard.
표 15를 참조하면, 수정 wfd-uibc-능력 파라메터는 다국어 지원 모드(multilingual support mode), 모드(mode), 프라이머리 모드(primary-mode), 세컨더리 모드(secondary mode), 상태(status)가 다국어 모드 전환을 위한 파라메터로서 포함될 수 있다. 수정 wfd-uibc-능력 파라메터에 포함되는 각 파라메터는 표 13에서 전술한 바와 동일할 수 있다.
도 15는 본 발명의 실시예에 따른 수정 wfd-uibc-능력 파라메터를 기반으로 한 다국어 모드 전환 방법을 나타낸 흐름도이다.
도 15를 참조하면, RTSP M3 요청 메시지/RTSP M3 응답 메시지를 통해 전송되는 수정 wfd-uibc-능력 파라메터를 기반으로 WFD 소스 및 WFD 싱크 간에 UIBC 능력 협상 절차(1500)를 수행할 수 있다. 이때 수정 wfd-uibc-능력 파라메터에 포함되는 다국어 모드 전환 능력에 대한 파라메터 정보(예를 들어, “Keyboard” SP multilingual-support-mode)를 기반으로 키보드에서 지원되는 문자 전환 타입 또는 문자 전환 모드에 대한 협상이 함께 수행될 수 있다.
예를 들어, RTSP M3 요청 메시지/RTSP M3 응답 메시지 각각의 수정 wfd-uibc-능력 파라메터에 포함되는 모드 파라메터는 영문과 국문 사이의 스위치(switch between English and Korean)를 지시할 수 있고, 상태는 프라이머리 모드인 영문을 지시할 수 있다.
사용자에 의해 문자 전환 버튼(또는 다국어 지원 버튼)이 눌린 경우, WFD 싱크에 의해 RTSP M4 요청 메시지/RTSP M14 요청 메시지를 기반으로 UIBC 능력 설정 절차(1550)가 수행될 수 있다.
RTSP M4 요청 메시지/RTSP M14 요청 메시지는 수정 wfd-uibc-능력 파라메터를 포함할 수 있고, 수정 wfd-uibc-능력 파라메터는 UIBC 능력 설정을 위한 다국어 모드 전환 능력에 대한 파라메터 정보를 포함할 수 있다. 구체적으로 RTSP M4 요청 메시지/RTSP M14 요청 메시지 각각의 수정 wfd-uibc-능력 파라메터에 포함되는 모드 파라메터는 영문와 국문 사이의 스위치(switch between English and Korean)를 지시할 수 있고, 상태는 세컨더리 모드인 국문을 지시할 수 있다.
WFD 소스는 RTSP M4 응답 메시지/RTSP M14 응답 메시지를 WFD 싱크로 전송할 수 있다.
사용자가 WFD 싱크에 연결된 키보드 자판을 누른 경우, 자판에 대응되는 국문의 키코드가 UIBC를 통해 WFD 소스로 전송될 수 있다.
국문 모드로의 변경 이후, WFD 시크와 WFD 소스의 화면에서는 국문이 출력될 수 있다.
도 16은 본 발명의 실시예에 따른 수정 wfd-uibc-능력 파라메터를 기반으로 한 다국어 모드 전환 방법을 나타낸 흐름도이다.
도 16에서는 UIBC 능력 재설정 절차가 개시된다.
도 16을 참조하면, WFD 소스의 화면이 WFD 싱크의 화면으로 미러링될 수 있다. 현재 상태가 프라이머리 모드인 영문을 지시하는 경우가 가정된다.
사용자에 의해 문자 전환 버튼(또는 다국어 지원 버튼)이 눌린 경우, WFD 싱크에 의해 RTSP M4 요청 메시지/RTSP M14 요청 메시지를 기반으로 UIBC 능력 재설정(capability re-establishment) 절차(1600)가 수행될 수 있다.
RTSP M4 요청 메시지/RTSP M14 요청 메시지는 수정 wfd-uibc-능력 파라메터를 포함할 수 있고, 수정 wfd-uibc-능력 파라메터는 UIBC 능력 재설정을 위한 다국어 모드 전환 능력에 대한 파라메터 정보를 포함할 수 있다. 구체적으로 RTSP M4 요청 메시지/RTSP M14 요청 메시지 각각의 수정 wfd-uibc-능력 파라메터에 포함되는 모드 파라메터는 영문와 국문 사이의 스위치(switch between English and Korean)를 지시할 수 있고, 상태는 세컨더리 모드인 국문을 지시할 수 있다.
WFD 소스는 RTSP M4 응답 메시지/RTSP M14 응답 메시지를 WFD 싱크로 전송할 수 있다.
사용자가 WFD 싱크에 연결된 키보드 자판을 누른 경우, 자판에 대응되는 국문의 키코드가 UIBC를 통해 WFD 소스로 전송될 수 있다.
국문 모드로의 변경 이후, WFD 시크와 WFD 소스의 화면에서는 국문이 출력될 수 있다.
본 발명의 다른 실시예에 따르면, 새로운 파라메터인 wfd2-uibc-다국어-지원(wfd2-uibc-multilingual-support) 파라메터가 정의되고, 사용자에 의해 다국어 지원을 위한 문자 전환 버튼이 눌러질 때마다 RTSP 메시지에 wfd2-uibc-다국어-지원 파라메터가 포함되어 WFD 소스로 전송될 수 있다.
wfd2-uibc-multilingual-support = “wfd2-uibc-multilingual-support:” SP multilingual-info CRLF
multilingual-info = multilingual-mode SP primary-mode SP secondary-mode SP status
multilingual-mode = 32*32HEXDIG; see table 2. table 2 indicates one or more multilingual-support-mode for mode switch at a Keyboard
primary-mode = 4*4HEXDIG; indicates value of primary mode of multilingual keyboard
secondary-mode = 4*4HEXDIG; indicates secondary mode (e.g., Korean) secondary mode is activated when the user push the “Multilingual Support” button on the user's Keyboard in primary mode
status = 4*4HEXDIG; indicates value of the current multilingual mode (Primary mode or Secondary mode). Status is toggled between primary mode and secondary mode whenever the user push the “Multilingual Support” button on the Keyboard.
표 16과 같이 wfd2-uibc-다국어-지원(wfd2-uibc-multilingual-support)이 새롭게 정의되고, wfd2-uibc-다국어-지원이 RTSP M3 요청 메시지/M3 응답 메시지에 포함되어 UIBC 능력 협상을 수행할 수 있다.
wfd2-uibc-다국어-지원 파라메터는 다국어-정보(multilingual-info), 다국어-모드(multilingual-mode), 프라이머리 모드, 세컨더리 모드, 상태에 관한 파라메터를 포함할 수 있다.
다국어 정보는 다국어 모드 지원, 프라이머리 모드 지원, 세컨더리 모드 지원 여부를 지시할 수 있다.
다국어 모드는 전술한 표 14에 개시된 바와 같이 지원 가능한 모드에 대한 정보를 포함할 수 있다.
RTSP M4 요청 메시지/RTSP M14 요청 메시지는 프라이머리 모드, 세컨더리 모드, 상태 각각에 관한 파라메터는 전술한 바와 동일한 정보를 포함할 수 있다.
도 17은 본 발명의 실시예에 따른 wfd2-uibc-다국어-지원 파라메터를 기반으로 한 다국어 모드 전환 방법을 나타낸 흐름도이다.
도 17을 참조하면, RTSP M3 요청 메시지/RTSP M3 응답 메시지를 통해 전송되는 wfd-uibc-다국어-지원-파라메터를 기반으로 WFD 소스 및 WFD 싱크 간에 UIBC 능력 협상 절차가 수행될 수 있다.
예를 들어, WFD 소스는 RTSP M3 요청 메시지를 기반으로 WFD 싱크의 UIBC 능력에 대한 정보를 요청할 수 있다. RTSP M3 요청 메시지/RTSP M3 응답 메시지 각각의 wfd-uibc-다국어-지원-파라메터에 포함되는 모드 파라메터는 영문과 국문 사이의 스위치(switch between English and Korean)를 지시할 수 있고, 프라이머리 모드로 국문을 지시하고, 세컨더리 모드로 영문을 지시하고 상태로 국문을 지시할 수 있다.
이후, WFD 소스에 의해 전송된 RTSP M4 요청 메시지/RTSP M14 요청 메시지를 기반으로 다국어 지원 모드 설정 절차(또는 UIBC 능력 설정 절차)가 수행될 수 있다.
wfd-uibc-다국어-지원-파라메터를 포함할 수 있다. RTSP M4 요청 메시지/RTSP M14 요청 메시지에 포함되는 wfd-uibc-다국어-지원-파라메터는 영문과 국문 사이의 스위치(switch between English and Korean)를 지시하고, 프라이머리 모드는 국문, 세컨더리 모드는 영문, 상태는 국문을 지시할 수 있다.
WFD 싱크는 WFD 소스로 RTSP M4 요청 메시지/RTSP M14 요청 메시지에 대한 응답으로 RTSP M4 응답 메시지/RTSP M14 응답 메시지를 수신할 수 있다.
도 18은 본 발명의 실시예에 따른 wfd2-uibc-다국어-지원 파라메터를 기반으로 한 다국어 모드 전환 방법을 나타낸 흐름도이다.
도 18에서는 사용자에 의해 문자 전환 버튼(또는 다국어 지원 버튼)이 눌렸을 경우, 동작이 개시된다.
도 18을 참조하면, 사용자는 문자 전환 버튼(또는 다국어 지원 버튼)을 누를 수 있고, 문자 전환 버튼(또는 다국어 지원 버튼)이 눌리는 경우, RTSP M17 요청 메시지가 전송될 수 있다.
WFD 싱크는 RTSP M17 요청 메시지를 WFD 소스로 전송할 수 있다.
RTSP M17 요청 메시지는 영문과 국문 사이의 스위치(switch between English and Korean)를 지시하고, 프라이머리 모드는 국문, 세컨더리 모드는 영문, 상태는 영문을 지시할 수 있다. 즉, 문자 전환 버튼이 눌리는 경우, 상태가 국문에서 영문으로 스위칭될 수 있다.
WFD 소스는 RTSP M17 요청 메시지에 대한 응답으로 RTSP M17 응답 메시지를 WFD 싱크로 전송할 수 있다.
이후, WFD 소스와 WFD 싱크는 영문 모드로 동작할 수 있다.
사용자가 WFD 싱크에 연결된 사용자 입력 장치의 키를 누르는 경우, 영문 키에 대응되는 키 코드 값이 UIBC를 통해 WFD 소스로 전송될 수 있다.
도 19는 본 발명의 실시예에 따른 wfd2-uibc-다국어-지원 파라메터를 기반으로 한 다국어 모드 전환 방법을 나타낸 흐름도이다.
도 19에서는 사용자에 의해 문자 전환 버튼(또는 다국어 지원 버튼)이 눌렸을 경우, 동작이 개시된다.
도 19를 참조하면, 사용자에 의해 문자 전환 버튼(또는 다국어 지원 버튼)이 눌리는 경우, 다국어 모드 변경을 지시하는 값을 포함하는 UIBC 입력 데이터(1900)가 WFD 싱크로부터 WFD 소스로 전송될 수 있다.
WFD 소스는 다국어 모드 변경을 지시하는 값을 포함하는 UIBC 입력 데이터(1900)를 수신한 이후, RTSP M17 요청 메시지(1910)를 WFD 싱크로 전송할 수 있다.
RTSP M17 요청 메시지(1910)는 영문과 국문 사이의 스위치(switch between English and Korean)를 지시하고, 프라이머리 모드는 국문, 세컨더리 모드는 영문, 상태는 영문을 지시할 수 있다.
WFD 싱크는 RTSP M17 요청 메시지(1910)에 대한 응답으로 RTSP M17 응답 메시지(1920)를 WFD 소스로 전송할 수 있다.
이후, WFD 소스와 WFD 싱크는 영문 모드로 동작할 수 있다.
사용자가 WFD 싱크에 연결된 사용자 입력 장치의 키를 누르는 경우, 영문 키에 대응되는 키 코드 값이 사용자 입력 데이터(1930)로서 UIBC를 통해 WFD 소스로 전송될 수 있다.
전술한 바와 같이 UIBC는 아스키 코드만을 지원할 수 있다. 사용자가 키보드의 아스키 코드로 정의되지 않은 키를 누른 경우, WFD 싱크 및 WFD 소스에 사용자가 원하는 키에 대응되는 문자가 출력되지 않을 수 있다.
예를 들어, 사용자가 논-아스키 코드를 누른 경우, WFD 싱크 및 WFD 소스에 사용자가 원하는 키에 대응되는 문자가 출력되지 않을 수 있다. 예를 들어, 논 아스키 코드는 영어를 제외한 다국어(유니코드(Unicode), 일명 ISO/IEC(international organization for standardization/International electronic commission) 10646), 제어 키(Control Key)(예를 들어, Enter, Ctrl, shift, alt, space 등 일명 ISO/IEC 9995))일 수 있다.
이하, 본 발명의 실시예에서는 사용자가 사용자 입력 장치(예를 들어, 키보드)를 통해 논 아스키 코드에 대응되는 키를 누른 경우, UIBC를 통해 WFD 싱크에서 WFD 소스로 논 아스키 코드에 대응되는 값을 전달하기 위한 방법이 개시된다.
본 발명의 실시예에 따르면, 사용자가 논 아스키 코드에 대응되는 키를 사용자 입력 장치(예를 들어, 키보드)를 통해 입력하는 경우, WFD 싱크가 사용자에 의해 입력된 문자에 상응하는 유니코드(ISO/IEC 10646)를 포함하는 UIBC 입력 메시지(또는 UIBC 입력 바디)를 전송할 수 있다.
다른 실시 예로 사용자가 다국어(예를 들어, 중국 문자, 일본 문자, 한글 문자 등)를 입력한 경우, ISO/IEC 2022 값이 UIBC 입력 메시지(또는 UIBC 입력 바디)에 포함되어 전송될 수 있다.
사용자 입력 카테고리가 일반(generic) 카테고리인지 HIDC(human interface device class) 카테고리인지 여부에 따라 UIBC 입력 바디(또는 UIBC 입력 메시지)는 제네릭 입력 바디(또는 제네릭 입력 메시지) 또는 HIDC 입력 바디(또는 HIDC 메시지)로 결정될 수 있다. 제네릭 입력 바디는 적어도 하나의 제네릭 입력 메시지를 포함할 수 있고, HIDC 입력 바디는 적어도 하나의 HIDC 입력 메시지를 포함할 수 있다.
아래의 표 17은 유니코드 키 값(ISO/IEC 10646 or ISO/IEC 2022)을 포함하는 UIBC 입력 메시지(또는 제네릭 입력 메시지)의 포맷을 개시한다.
필드Field 사이즈Size 노트Notes
제네릭 입력 타입 IDGeneric Input Type ID 키보드Keyboard
길이Length 따르는 필드의 옥텟 단위의 길이Length of the following fields in octets.
설명Describe 사용자가 입력한 “Unicode” Key 값(ISO/IEC 10646 or ISO/IEC 2022)
또 다른 예로, 사용자가 아스키 코드에 의해 지원되지 않는 제어 키(control key)를 키보드를 통해 입력한 경우, 사용자가 입력한 제어 키에 대응되는 키 값(ISO/IEC 9995)이 UIBC 입력 메시지(UIBC 입력 바디)를 통해 WFD 싱크로 전송될 수 있다.
아래의 표 18은 제어 키 값(ISO/IEC 9995)을 포함하는 UIBC 입력 메시지(또는 제네릭 입력 메시지)의 포맷을 나타낸다.
필드Field 사이즈Size 노트Notes
제네릭 입력 타입 IDGeneric Input Type ID 키보드Keyboard
길이Length 따르는 필드의 옥텟 단위의 길이Length of the following fields in octets.
설명Describe 사용자가 입력한 “control Key” 값(ISO/IEC 9995)
위와 같은 UIBC 입력 메시지의 포맷을 통해 UIBC 입력 메시지를 수신한 WFD 싱크/WFD 소스는 수신한 문자에 대한 해석하고 수신한 문자를 화면 상에 출력할 수 있다.
본 발명의 실시예에 따르면, 문자(character)(ISO/IEC 10646, Unicode) 값은 WFD 소스/WFD 싱크 각각의 화면에 디스플레이되는 반면, 제어 키(ISO/IEC 9995)는 장치 화면에 문자를 출력하지 않고 제어 기능을 수행할 수 있다. 따라서 이를 구분하여 UIBC 입력 메시지(또는 사용자 입력 메시지(user input message)에 “ISO/IEC 10646, Unicode” 와 “ISO/IEC 9995” 값을 포함시킬 수 있다.
이를 위해 본 발명의 실시예에서는 문자/제어 식별자(character/control identifier)라는 구분자(또는 필드)를 정의하여 사용자 입력 장치를 통해 입력된 키가 문자인지 제어키인지 여부가 구분될 수 있다.
표 19는 문자/제어 식별자 필드를 포함하는 UIBC 입력 메시지(또는 제네릭 입력 메시지)를 나타낸다.
필드Field 사이즈Size 노트Notes
제네릭 입력 타입 IDGeneric Input Type ID 키보드Keyboard
길이Length 따르는 필드의 옥텟 단위의 길이Length of the following fields in octets.
문자/제어 식별자Character/Control Identifier 0: 문자 타입(ISO/IEC 10646, 유니코드)1: 제어 키 타입(ISO/IEC 9995)0: Character type (ISO/IEC 10646, Unicode)1: Control Key type (ISO/IEC 9995)
설명Describe 사용자가 입력한 “Unicode” Key 값(ISO/IEC 10646 or ISO/IEC 2022)사용자가 입력한 “control Key” 값(ISO/IEC 9995)
예를 들어, 사용자가 제어 키를 키보드를 통해 입력한 경우, ISO/IEC 9995에서 정의된 키 값뿐만 아니라 문자 제어 식별자도 UIBC 입력 메시지에 함께 포함되어 전달될 수 있다.
또한, 본 발명의 실시예에 따르면, UIBC를 통한 다국어 지원을 위해 wfd2-다국어-능력 파라메터가 정의될 수 있다.
wfd2-multilingual-capability = “wfd2_multilingual_capability:” SP (“none” / (supportedKey) CRLF; “none” if not supportedsupportedkey = “ASCII” / “ISOIEC10646” / “ISOIEC2022” / “ISOIEC9995”
표 20을 참조하면, wfd2-다국어-능력 파라메터를 기반으로 UIBC 입력 메시지를 통해 지원되는 아스키 코드, 논 아스키 코드(“ISOIEC10646”/“ISOIEC2022”/“ISOIEC9995”)에 대한 정보가 전달될 수 있다.
도 20은 본 발명의 실시예에 따른 다국어 지원을 위한 능력 협상 절차를 나타낸 흐름도이다.
도 20을 참조하면, WFD 소스는 RTSP M3 요청 메시지(2000)를 WFD 싱크로 전송할 수 있다. RTSP M3 요청 메시지(2000)는 wfd2-다국어-능력 파라메터를 포함할 수 있다.
WFD 소스에 의해 전송되는 RTSP M3 요청 메시지(2000)는 wfd2-다국어-능력 파라메터를 통해 WFD 소스에 의해 UIBC 입력 메시지를 통해 지원되는 아스키 코드, 논 아스키 코드(“ISOIEC10646”/“ISOIEC2022”/“ISOIEC9995”)에 대한 정보를 전송할 수 있다. 또한, WFD 소스에 의해 전송되는 RTSP M3 요청 메시지(2000)는 WFD 싱크에 의해 지원되는 UIBC 입력 메시지를 통해 지원되는 아스키 코드, 논 아스키 코드에 대한 정보를 요청할 수 있다.
WFD 싱크는 WFD 소스에 의해 전송된 RTSP M3 요청 메시지(2000)에 대한 응답으로 RTSP M3 응답 메시지(2010)를 전송할 수 있다.
RTSP M3 응답 메시지(2010)는 wfd2-다국어-능력 파라메터를 포함하고, wfd2-다국어-능력 파라메터는 UIBC 입력 메시지를 통해 지원되는 아스키 코드, 논 아스키 코드에 대한 정보를 포함할 수 있다.
또한, WFD 소스에 의해 전송되는 RTSP M4/M14 요청 메시지(2020)는 wfd2-다국어-능력 파라메터를 통해 WFD 소스에 의해 UIBC 입력 메시지를 통해 지원되는 아스키 코드, 논 아스키 코드를 설정할 수 있다.
WFD 싱크는 RTSP M4/M14 요청 메시지(2020)에 대한 응답으로 RTSP M4/M14 응답 메시지(2030)를 전송할 수 있다.
도 21은 본 발명의 실시예가 적용될 수 있는 무선 장치를 나타내는 블록도이다.
도 21을 참조하면, 무선 장치는 상술한 실시예를 구현할 수 있는 WFD 소스(2100)(또는 제1 WFD 장치) 및 WFD 싱크(2150) (또는 제2 WFD 장치)일 수 있다.
WFD 소스(2100)는 프로세서(2110), 메모리(2120) 및 통신부(2130)를 포함한다.
RF부(2130)는 프로세서(2110)와 연결하여 무선신호를 송신/수신할 수 있다.
프로세서(2110)는 본 발명에서 제안된 기능, 과정 및/또는 방법을 구현할 수 있다. 예를 들어, 프로세서(2110)는 전술한 본 발명의 실시예에 따른 WFD 소스(2100)의 동작을 수행하도록 구현될 수 있다. 프로세서는 도 1 내지 20의 실시예에서 개시한 WFD 소스(2100)의 동작을 수행할 수 있다.
예를 들어, 프로세서(2110)는 제2 WFD 장치(또는 WFD 싱크)와의 UIBC(user input back channel) 능력 협상 절차를 통해 제2 WFD 장치로 문자 전환 능력 파라메터를 전송하고, 제1 WFD 장치와 제2 WFD 장치 각각의 화면 상에서 출력되는 제1 문자(예를 들어, 영문)를 설정하기 위해 UIBC 설정 절차를 통해 제2 WFD 장치로 제1 문자 전환 설정 파라메터를 전송하도록 구현될 수 있다.
또한, 프로세서(2110)는 제1 WFD 장치의 사용자 입력 장치를 통해 문자 전환 버튼에 대한 키 코드를 UIBC를 통해 상기 제2 WFD 장치로 전송하고, 제1 WFD 장치와 제2 WFD 장치 각각의 화면 상에서 출력되는 상기 제1 문자를 제2 문자(예를 들어, 국문)로 스위칭하기 위해 UIBC 재설정 절차를 통해 제2 WFD 장치로 제2 문자 전환 설정 파라메터를 전송하도록 구현될 수 있다.
제1 WFD 장치는 멀티미디어 컨텐츠의 스트리밍을 지원하는 장치이고, 제2 WFD 장치는 제1 WFD 장치와의 P2P(peer-to-peer) 링크를 통해 제1 WFD 장치로부터 멀티미디어 컨텐츠를 수신하고 렌더링하는 장치일 수 있다.
이때, 문자 전환 능력 파라메터는 모드 파라메터, 프라이머리 문자 파라메터, 세컨더리 문자 파라메터 및 상태 파라메터를 포함할 수 있다.
모드 파라메터는 상기 제1 WFD 장치에 의해 지원되는 적어도 하나의 문자 전환 타입에 대한 정보를 포함하고, 프라이머리 문자 파라메터는 제1 WFD 장치에 의해 UIBC 상에서 우선적으로 설정되는 프라이머리 문자에 대한 정보를 포함하고, 세컨더리 문자 파라메터는 문자 전환 버튼에 대응되는 키 코드가 입력된 경우, 제1 WFD 장치에 의해 UIBC 상에서 프라이머리 문자에서 전환되어 설정되는 세컨더리 문자에 대한 정보를 포함할 수 있다.
상태 파라메터는 키 코드의 입력에 따라 제1 WFD 장치에 의해 현재 설정된 문자가 프라이머리 문자인지 세컨더리 문자인지 여부를 지시하는 정보를 포함할 수 있고, 상태 파라메터는 키 코드의 입력에 따라 프라이머리 문자 또는 세컨더리 문자로 토글(toggle)될 수 있다.
제1 문자 전환 설정 파라메터는 제1 상태 파라메터를 포함하고, 제2 문자 전환 설정 파라메터는 제2 상태 파라메터를 포함하고, 제1 상태 파라메터는 상기 프라이머리 문자를 지시하고, 제2 상태 파라메터는 상기 세컨더리 문자를 지시할 수 있다.
또한, 프로세서(2110)가 사용자 입력 장치를 통해 상기 제2 문자에 대응되는 유니코드 키 값을 포함하는 제네릭 입력 메시지(generic input message)를 제2 WFD 장치로 전송하도록 구현될 수 있되, 제네릭 입력 메시지는 제네릭 입력 타입 식별자 필드, 길이 필드 및 설명 필드를 포함할 수 있다.
제네릭 입력 타입 식별자 필드는 상기 제2 문자를 입력한 상기 사용자 입력 장치에 대한 정보를 포함하고, 길이 필드는 설명 필드의 길이에 대한 정보를 포함하고, 설명 필드는 유니코드 키 값에 대한 정보를 포함할 수 있다.
제네릭 입력 메시지는 문자/제어 식별자를 더 포함하고, 문자/제어 식별자는 설명 필드에 포함되는 값이 문자키에 대한 유니코드 키 값인지, 기능키에 대한 제어 키 값인지 여부를 지시할 수 있다.
WFD 싱크(2150)는 프로세서(2160), 메모리(2170) 및 통신부(2180)를 포함한다.
RF부(2180)는 프로세서(2160)와 연결하여 무선신호를 송신/수신할 수 있다.
프로세서(2160)는 본 발명에서 제안된 기능, 과정 및/또는 방법을 구현할 수 있다. 예를 들어, 프로세서(2160)는 전술한 본 발명의 실시예에 따른 WFD 싱크(2150)의 동작을 수행하도록 구현될 수 있다. 프로세서는 도 1 내지 20의 실시예에서 WFD 싱크(2150)(또는 제2 WFD 장치)의 동작을 수행할 수 있다.
예를 들어, 프로세서(2160)는 제1 WFD 장치(또는 WFD 소스)와의 UIBC(user input back channel) 능력 협상 절차를 통해 제1 WFD 장치로 문자 전환 능력 파라메터를 전송하고, 제1 WFD 장치와 제2 WFD 장치 각각의 화면 상에서 출력되는 제1 문자(예를 들어, 영문)를 설정하기 위해 UIBC 설정 절차를 통해 제1 WFD 장치로 제1 문자 전환 설정 파라메터를 전송하도록 구현될 수 있다.
또한, 프로세서(2160)는 제2 WFD 장치의 사용자 입력 장치를 통해 문자 전환 버튼에 대한 키 코드를 UIBC를 통해 상기 제1 WFD 장치로 전송하고, 제2 WFD 장치와 제1 WFD 장치 각각의 화면 상에서 출력되는 상기 제1 문자를 제2 문자(예를 들어, 국문)로 스위칭하기 위해 UIBC 재설정 절차를 통해 제1 WFD 장치로 제2 문자 전환 설정 파라메터를 전송하도록 구현될 수 있다.
프로세서(2110, 2160)는 ASIC(application-specific integrated circuit), 다른 칩셋, 논리 회로, 데이터 처리 장치 및/또는 베이스밴드 신호 및 무선 신호를 상호 변환하는 변환기를 포함할 수 있다. 메모리(2120, 2170)는 ROM(read-only memory), RAM(random access memory), 플래쉬 메모리, 메모리 카드, 저장 매체 및/또는 다른 저장 장치를 포함할 수 있다. RF부(2130, 2180)는 무선 신호를 전송 및/또는 수신하는 하나 이상의 안테나를 포함할 수 있다.
실시예가 소프트웨어로 구현될 때, 상술한 기법은 상술한 기능을 수행하는 모듈(과정, 기능 등)로 구현될 수 있다. 모듈은 메모리(2120, 2170)에 저장되고, 프로세서(2110, 2160)에 의해 실행될 수 있다. 메모리(2120, 2170)는 프로세서(2110, 2160) 내부 또는 외부에 있을 수 있고, 잘 알려진 다양한 수단으로 프로세서(2110, 2160)와 연결될 수 있다.

Claims (10)

  1. WFD(WiFi display)에서 입력 문자 전환 방법은,
    제1 WFD 장치가 제2 WFD 장치와의 UIBC(user input back channel) 능력 협상 절차를 통해 상기 제2 WFD 장치로 문자 전환 능력 파라메터를 전송하는 단계;
    상기 제1 WFD 장치가 상기 제1 WFD 장치와 상기 제2 WFD 장치 각각의 화면 상에서 출력되는 제1 문자를 설정하기 위해 UIBC 설정 절차를 통해 상기 제2 WFD 장치로 제1 문자 전환 설정 파라메터를 전송하는 단계;
    상기 제1 WFD 장치가 상기 제1 WFD 장치의 사용자 입력 장치를 통해 문자 전환 버튼에 대한 키 코드를 UIBC를 통해 상기 제2 WFD 장치로 전송하는 단계; 및
    상기 제1 WFD 장치가 상기 제1 WFD 장치와 상기 제2 WFD 장치 각각의 화면 상에서 출력되는 상기 제1 문자를 제2 문자로 스위칭하기 위해 UIBC 재설정 절차를 통해 상기 제2 WFD 장치로 제2 문자 전환 설정 파라메터를 전송하는 단계를 포함하되,
    상기 제1 WFD 장치는 멀티미디어 컨텐츠의 스트리밍을 지원하는 장치이고,
    상기 제2 WFD 장치는 상기 제1 WFD 장치와의 P2P(peer-to-peer) 링크를 통해 상기 제1 WFD 장치로부터 상기 멀티미디어 컨텐츠를 수신하고 렌더링하는 장치인 것을 특징으로 하는 방법.
  2. 제1항에 있어서,
    상기 문자 전환 능력 파라메터는 모드 파라메터, 프라이머리 문자 파라메터, 세컨더리 문자 파라메터 및 상태 파라메터를 포함하고,
    상기 모드 파라메터는 상기 제1 WFD 장치에 의해 지원되는 적어도 하나의 문자 전환 타입에 대한 정보를 포함하고,
    상기 프라이머리 문자 파라메터는 상기 제1 WFD 장치에 의해 상기 UIBC 상에서 우선적으로 설정되는 프라이머리 문자에 대한 정보를 포함하고,
    상기 세컨더리 문자 파라메터는 상기 문자 전환 버튼에 대응되는 상기 키 코드가 입력된 경우, 상기 제1 WFD 장치에 의해 상기 UIBC 상에서 상기 프라이머리 문자에서 전환되어 설정되는 세컨더리 문자에 대한 정보를 포함하고,
    상기 상태 파라메터는 상기 키 코드의 입력에 따라 상기 제1 WFD 장치에 의해 현재 설정된 문자가 상기 프라이머리 문자인지 상기 세컨더리 문자인지 여부를 지시하는 정보를 포함하고,
    상기 상태 파라메터는 상기 키 코드의 입력에 따라 상기 프라이머리 문자 또는 상기 세컨더리 문자로 토글(toggle)되는 것을 특징으로 하는 방법.
  3. 제2항에 있어서,
    상기 제1 문자 전환 설정 파라메터는 제1 상태 파라메터를 포함하고,
    상기 제2 문자 전환 설정 파라메터는 제2 상태 파라메터를 포함하고,
    상기 제1 상태 파라메터는 상기 프라이머리 문자를 지시하고,
    상기 제2 상태 파라메터는 상기 세컨더리 문자를 지시하는 것을 특징으로 하는 방법.
  4. 제3항에 있어서,
    상기 제1 WFD 장치가 상기 사용자 입력 장치를 통해 상기 제2 문자에 대응되는 유니코드 키 값을 포함하는 제네릭 입력 메시지(generic input message)를 상기 제2 WFD 장치로 전송하는 단계를 포함하되,
    상기 제네릭 입력 메시지는 제네릭 입력 타입 식별자 필드, 길이 필드 및 설명 필드를 포함하고,
    상기 제네릭 입력 타입 식별자 필드는 상기 제2 문자를 입력한 상기 사용자 입력 장치에 대한 정보를 포함하고,
    상기 길이 필드는 상기 설명 필드의 길이에 대한 정보를 포함하고,
    상기 설명 필드는 상기 유니코드 키 값에 대한 정보를 포함하는 것을 특징으로 하는 방법.
  5. 제4항에 있어서,
    상기 제네릭 입력 메시지는 문자/제어 식별자를 더 포함하고,
    상기 문자/제어 식별자는 상기 설명 필드에 포함되는 값이 문자키에 대한 유니코드 키 값인지, 기능키에 대한 제어 키 값인지 여부를 지시하는 것을 특징으로 하는 방법.
  6. 입력 문자 전환을 수행하는 제1 WFD(WiFi display) 장치는,
    제2 WFD 장치와의 통신을 위한 통신부; 및
    상기 통신부와 동작 가능하게 연결되는 프로세서를 포함하되,
    상기 프로세서는 상기 제2 WFD 장치와의 UIBC(user input back channel) 능력 협상 절차를 통해 상기 제2 WFD 장치로 문자 전환 능력 파라메터를 전송하고,
    상기 제1 WFD 장치와 상기 제2 WFD 장치 각각의 화면 상에서 출력되는 제1 문자를 설정하기 위해 UIBC 설정 절차를 통해 상기 제2 WFD 장치로 제1 문자 전환 설정 파라메터를 전송하고,
    상기 제1 WFD 장치의 사용자 입력 장치를 통해 문자 전환 버튼에 대한 키 코드를 UIBC를 통해 상기 제2 WFD 장치로 전송하고,
    상기 제1 WFD 장치와 상기 제2 WFD 장치 각각의 화면 상에서 출력되는 상기 제1 문자를 제2 문자로 스위칭하기 위해 UIBC 재설정 절차를 통해 상기 제2 WFD 장치로 제2 문자 전환 설정 파라메터를 전송하도록 구현되되,
    상기 제1 WFD 장치는 멀티미디어 컨텐츠의 스트리밍을 지원하는 장치이고,
    상기 제2 WFD 장치는 상기 제1 WFD 장치와의 P2P(peer-to-peer) 링크를 통해 상기 제1 WFD 장치로부터 상기 멀티미디어 컨텐츠를 수신하고 렌더링하는 장치인 것을 특징으로 하는 제1 WFD 장치.
  7. 제6항에 있어서,
    상기 문자 전환 능력 파라메터는 모드 파라메터, 프라이머리 문자 파라메터, 세컨더리 문자 파라메터 및 상태 파라메터를 포함하고,
    상기 모드 파라메터는 상기 제1 WFD 장치에 의해 지원되는 적어도 하나의 문자 전환 타입에 대한 정보를 포함하고,
    상기 프라이머리 문자 파라메터는 상기 제1 WFD 장치에 의해 상기 UIBC 상에서 우선적으로 설정되는 프라이머리 문자에 대한 정보를 포함하고,
    상기 세컨더리 문자 파라메터는 상기 문자 전환 버튼에 대응되는 상기 키 코드가 입력된 경우, 상기 제1 WFD 장치에 의해 상기 UIBC 상에서 상기 프라이머리 문자에서 전환되어 설정되는 세컨더리 문자에 대한 정보를 포함하고,
    상기 상태 파라메터는 상기 키 코드의 입력에 따라 상기 제1 WFD 장치에 의해 현재 설정된 문자가 상기 프라이머리 문자인지 상기 세컨더리 문자인지 여부를 지시하는 정보를 포함하고,
    상기 상태 파라메터는 상기 키 코드의 입력에 따라 상기 프라이머리 문자 또는 상기 세컨더리 문자로 토글(toggle)되는 것을 특징으로 하는 제1 WFD 장치.
  8. 제7항에 있어서,
    상기 제1 문자 전환 설정 파라메터는 제1 상태 파라메터를 포함하고,
    상기 제2 문자 전환 설정 파라메터는 제2 상태 파라메터를 포함하고,
    상기 제1 상태 파라메터는 상기 프라이머리 문자를 지시하고,
    상기 제2 상태 파라메터는 상기 세컨더리 문자를 지시하는 것을 특징으로 하는 제1 WFD 장치.
  9. 제8항에 있어서,
    상기 프로세서가 상기 사용자 입력 장치를 통해 상기 제2 문자에 대응되는 유니코드 키 값을 포함하는 제네릭 입력 메시지(generic input message)를 상기 제2 WFD 장치로 전송하도록 구현되되,
    상기 제네릭 입력 메시지는 제네릭 입력 타입 식별자 필드, 길이 필드 및 설명 필드를 포함하고,
    상기 제네릭 입력 타입 식별자 필드는 상기 제2 문자를 입력한 상기 사용자 입력 장치에 대한 정보를 포함하고,
    상기 길이 필드는 상기 설명 필드의 길이에 대한 정보를 포함하고,
    상기 설명 필드는 상기 유니코드 키 값에 대한 정보를 포함하는 것을 특징으로 하는 제1 WFD 장치.
  10. 제9항에 있어서,
    상기 제네릭 입력 메시지는 문자/제어 식별자를 더 포함하고,
    상기 문자/제어 식별자는 상기 설명 필드에 포함되는 값이 문자키에 대한 유니코드 키 값인지, 기능키에 대한 제어 키 값인지 여부를 지시하는 것을 특징으로 하는 제1 WFD 장치.
PCT/KR2016/002459 2015-04-17 2016-03-11 Wfd에서 입력 문자 전환 방법 및 장치 WO2016167475A1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US15/567,023 US10540302B2 (en) 2015-04-17 2016-03-11 Method and apparatus for switching input character in WFD

Applications Claiming Priority (10)

Application Number Priority Date Filing Date Title
US201562148753P 2015-04-17 2015-04-17
US62/148,753 2015-04-17
US201562149535P 2015-04-18 2015-04-18
US201562149534P 2015-04-18 2015-04-18
US62/149,535 2015-04-18
US62/149,534 2015-04-18
US201562175438P 2015-06-15 2015-06-15
US62/175,438 2015-06-15
US201562180090P 2015-06-16 2015-06-16
US62/180,090 2015-06-16

Publications (1)

Publication Number Publication Date
WO2016167475A1 true WO2016167475A1 (ko) 2016-10-20

Family

ID=57126603

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2016/002459 WO2016167475A1 (ko) 2015-04-17 2016-03-11 Wfd에서 입력 문자 전환 방법 및 장치

Country Status (2)

Country Link
US (1) US10540302B2 (ko)
WO (1) WO2016167475A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106604122A (zh) * 2016-12-15 2017-04-26 广州视源电子科技股份有限公司 电视屏幕的控制方法和装置

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180295414A1 (en) * 2015-05-21 2018-10-11 Lg Electronics Inc. Method and device for processing voice command through uibc
KR20210130424A (ko) 2020-04-22 2021-11-01 엘지전자 주식회사 무선 디바이스

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120082846A (ko) * 2011-01-14 2012-07-24 삼성전자주식회사 와이파이 다이렉트 통신 방식에서의 싱크 디바이스에서 소스 디바이스로 사용자의 입력을 송신하기 위한 방법 및 장치
KR20130038544A (ko) * 2011-10-10 2013-04-18 삼성전기주식회사 통합 입력 장치 및 이를 이용한 대상 디바이스의 제어 방법
JP2013150282A (ja) * 2012-01-23 2013-08-01 Toshiba Corp 無線基地局装置、無線端末装置及び無線伝送システム
KR20130126973A (ko) * 2011-01-21 2013-11-21 퀄컴 인코포레이티드 무선 싱크와 무선 소스 디바이스 사이에서 능력들의 협상
KR20140081172A (ko) * 2012-12-21 2014-07-01 주식회사 팬택 싱크 장치, 소스 장치, 이들을 포함하는 무선랜 시스템 및 싱크 장치를 제어하는 방법

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101732057B1 (ko) * 2009-11-02 2017-05-02 삼성전자주식회사 Ａｖ 시스템에서 사용자 입력 백 채널을 제공하는 방법 및 기기

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120082846A (ko) * 2011-01-14 2012-07-24 삼성전자주식회사 와이파이 다이렉트 통신 방식에서의 싱크 디바이스에서 소스 디바이스로 사용자의 입력을 송신하기 위한 방법 및 장치
KR20130126973A (ko) * 2011-01-21 2013-11-21 퀄컴 인코포레이티드 무선 싱크와 무선 소스 디바이스 사이에서 능력들의 협상
KR20130038544A (ko) * 2011-10-10 2013-04-18 삼성전기주식회사 통합 입력 장치 및 이를 이용한 대상 디바이스의 제어 방법
JP2013150282A (ja) * 2012-01-23 2013-08-01 Toshiba Corp 無線基地局装置、無線端末装置及び無線伝送システム
KR20140081172A (ko) * 2012-12-21 2014-07-01 주식회사 팬택 싱크 장치, 소스 장치, 이들을 포함하는 무선랜 시스템 및 싱크 장치를 제어하는 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106604122A (zh) * 2016-12-15 2017-04-26 广州视源电子科技股份有限公司 电视屏幕的控制方法和装置
CN106604122B (zh) * 2016-12-15 2019-10-29 广州视源电子科技股份有限公司 电视屏幕的控制方法和装置

Also Published As

Publication number Publication date
US20180129615A1 (en) 2018-05-10
US10540302B2 (en) 2020-01-21

Similar Documents

Publication Publication Date Title
WO2020076110A1 (en) Electronic device for determining p2p operating channel and method thereof
WO2018222024A1 (ko) 블루투스 le 기술을 이용하여 디바이스를 연결하기 위한 방법 및 장치
WO2015069093A1 (ko) 블루투스 연결 방법 및 장치
WO2017030232A1 (ko) 데이터 송수신 방법 및 이를 위한 디바이스
WO2015182896A1 (ko) 블루투스 연결 방법 및 장치
WO2015069031A1 (ko) 블루투스를 이용한 커뮤니케이션 링크 형성 방법 및 장치
WO2014204272A1 (ko) 무선 통신시스템에서 블루투스를 이용하여 멀티미디어 콘텐츠를 재생하기 위한 방법 및 장치
WO2013015571A2 (ko) 전자기기 및 전자기기의 동작 방법
WO2015190877A1 (ko) Hdmi를 사용하여 데이터를 송수신하기 위한 방법 및 장치
WO2013058423A1 (ko) 전자기기 및 전자기기의 동작 방법
WO2015002385A1 (ko) 무선 통신시스템에서 디바이스들 간에 커뮤니케이션을 위한 방법 및 장치
WO2017146438A1 (en) Display apparatus and method of setting operating channel of the same
WO2016093623A1 (ko) Wfd에서 보조 컨텐츠를 출력하는 방법 및 장치
WO2016178542A1 (ko) 블루투스에서 데이터를 송수신하기 위한 방법 및 장치
WO2018021877A1 (ko) 디바이스의 연결을 형성하기 위한 방법 및 장치
WO2019164268A1 (ko) 무선랜 시스템에서 무선 연결을 위한 방법 및 이를 이용한 무선 장치
WO2015133865A1 (en) Method and system for establishing a service session between seeker device and advertiser device
WO2016167475A1 (ko) Wfd에서 입력 문자 전환 방법 및 장치
WO2019031822A1 (ko) 블루투스 저전력 에너지 기술을 이용하여 디바이스간 연결을 형성하기 위한 방법 및 장치
WO2015190880A1 (ko) Hdmi를 사용하여 데이터를 송수신하기 위한 방법 및 장치
WO2015163547A1 (ko) 무선 통신시스템에서 블루투스를 이용하여 http 데이터를 전송하기 위한 방법 및 장치
WO2017043718A1 (ko) Wfd 싱크에 의해 영상의 오리엔테이션을 변화시키는 방법 및 장치
WO2016089161A1 (ko) Ip 기반의 hdmi 기기 제어 방법
WO2021096257A1 (ko) 무선 통신 시스템에서 근거리 무선 통신을 이용한 오디오 데이터 전송 방법 및 이에 대한 장치
WO2017119571A1 (ko) 디지털 디바이스 및 그를 이용한 컬러 제어 시스템 및 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16780198

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 15567023

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16780198

Country of ref document: EP

Kind code of ref document: A1