KR20210049786A - 송신 장치, 송신 방법, 수신 장치 및 수신 방법 - Google Patents

송신 장치, 송신 방법, 수신 장치 및 수신 방법 Download PDF

Info

Publication number
KR20210049786A
KR20210049786A KR1020217003824A KR20217003824A KR20210049786A KR 20210049786 A KR20210049786 A KR 20210049786A KR 1020217003824 A KR1020217003824 A KR 1020217003824A KR 20217003824 A KR20217003824 A KR 20217003824A KR 20210049786 A KR20210049786 A KR 20210049786A
Authority
KR
South Korea
Prior art keywords
signal
channel
predetermined number
channels
transmission
Prior art date
Application number
KR1020217003824A
Other languages
English (en)
Inventor
겐 이치무라
Original Assignee
소니 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니 주식회사 filed Critical 소니 주식회사
Publication of KR20210049786A publication Critical patent/KR20210049786A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/025—Systems for the transmission of digital non-picture data, e.g. of text during the active part of a television frame
    • H04N7/035—Circuits for the digital non-picture data signal, e.g. for slicing of the data signal, for regeneration of the data-clock signal, for error detection or correction of the data signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4131—Peripherals receiving signals from specially adapted client devices home appliance, e.g. lighting, air conditioning system, metering devices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614—Multiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/60—Receiver circuitry for the reception of television signals according to analogue transmission standards for the sound signals
    • H04N5/602—Receiver circuitry for the reception of television signals according to analogue transmission standards for the sound signals for digital sound signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/60—Receiver circuitry for the reception of television signals according to analogue transmission standards for the sound signals
    • H04N5/607—Receiver circuitry for the reception of television signals according to analogue transmission standards for the sound signals for more than one sound signal, e.g. stereo, multilanguages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/08—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/10—Adaptations for transmission by electrical cable

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Automation & Control Theory (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Radar Systems Or Details Thereof (AREA)
  • Electrotherapy Devices (AREA)
  • Burglar Alarm Systems (AREA)

Abstract

촉각 진동 신호를 오디오 신호와 동기하여 양호하게 전송한다. 복수 프레임을 포함하는 블록마다의 전송 신호를 순차로 소정 전송로를 통해 수신측에 송신한다. 전송 신호에는, 소정 채널수의 오디오 신호와 소정 채널수의 촉각 진동 신호가 포함되어 있다. 예를 들어, 오디오 신호에 관련되는 미디어 신호에 기초하여 촉각 진동 신호를 생성한다. 예를 들어, 전송 신호에, 소정 채널수의 오디오 신호와 소정 채널수의 촉각 진동 신호의 구성 정보를 부가한다.

Description

송신 장치, 송신 방법, 수신 장치 및 수신 방법
본 기술은, 송신 장치, 송신 방법, 수신 장치 및 수신 방법에 관한 것이고, 상세하게는 오디오 신호와 함께 촉각 진동 신호를 취급하는 송신 장치, 송신 방법, 수신 장치 및 수신 방법에 관한 것이다.
5.1채널, 7.1채널 등의 멀티채널 오디오 애플리케이션에 있어서는, 각각의 채널 이용법을 식별하기 위해 이름이 붙여져 운용되고 있다. 예를 들어, 라이트 채널, 레프트 채널, 센터 채널, LFE(Low Frequency Effect) 채널 등이다. 이들은 그 이름이 나타내는 위치에 배치된 라우드 스피커에 보내지고, 소리로서 재생될 것이 기대되고 있다.
근년, 멀티미디어 애플리케이션이 제안되고, 그 중에는 종래의 오디오 비디오와 동기하여 이용되는 촉각 진동 애플리케이션 등이 있다. 예를 들어, 특허문헌 1에는, 촉각 진동 신호(촉각 신호)를 송신하고, 수신측에서는, 그 촉각 진동 신호에 기초하여 진동부를 진동시키는 기술에 관한 기재가 있다.
일본 특허 공개 제2018-060313호 공보
오디오 비디오와 동기하여 이용되는 촉각 진동 애플리케이션에 있어서는, 촉각 진동 신호를 오디오 신호와 동기하여 전송할 것이 요망된다. 그리고, 그 때 촉각 진동 신호는 오디오 신호와는 신호 성질이 다르고, 촉각 진동 신호를 오디오 신호와 명확하게 구별할 수 있을 것이 요망된다. 또한, 그 때 촉각 진동 신호 자체도 복수 신호를 조합하여 운용하는 것이 상정되어, 그것들도 식별할 수 있을 것이 요망된다.
본 기술의 목적은, 촉각 진동 신호를 오디오 신호와 동기하여 양호하게 전송하는 데에 있다.
본 기술의 개념은,
복수 프레임을 포함하는 블록마다의 전송 신호를 순차로 소정 전송로를 통해 수신측에 송신하는 송신부를 구비하고,
상기 전송 신호는, 소정 채널수의 오디오 신호와 소정 채널수의 촉각 진동 신호를 포함하는
송신 장치에 있다.
본 기술에 있어서, 송신부에 의해, 복수 프레임을 포함하는 블록마다의 전송 신호가 순차로 소정 전송로를 통해 수신측에 송신된다. 여기서, 전송 신호에는, 소정 채널수의 오디오 신호와 소정 채널수의 촉각 진동 신호가 포함되어 있다. 예를 들어, 소정 전송로는 동축 케이블, 광케이블, 이더넷(IEC 61883-6) 케이블, HDMI 케이블, MHL 케이블 또는 디스플레이 포토케이블이어도 된다. 또한, 예를 들어 오디오 신호에 관련되는 미디어 신호에 기초하여 촉각 진동 신호를 생성하는 처리부를 더 구비하도록 해도 된다.
예를 들어, 전송 신호에, 소정 채널수의 오디오 신호와 소정 채널수의 촉각 진동 신호의 구성 정보를 부가하는 정보 부가부를 더 구비하도록 해도 된다. 이 경우, 예를 들어 구성 정보는, 촉각 진동 신호를 오디오 신호와 구별하기 위한 식별 정보를 포함하도록 해도 된다. 그리고, 이 경우, 예를 들어 식별 정보는, 소정 채널수의 촉각 진동 신호의 각각이 대상으로 하는 진동 위치의 정보를 포함하도록 해도 된다.
또한, 예를 들어 정보 부가부는, 블록마다 구성되는 채널 스테이터스의 소정 비트 영역을 사용하여 구성 정보를 부가하도록 해도 된다. 또한, 예를 들어 정보 부가부는, 연속되는 소정수의 프레임의 유저 데이터 비트를 사용하여 구성 정보를 부가하도록 해도 된다.
또한, 예를 들어 복수 프레임은, 소정수의 프레임을 포함하는 멀티채널 그룹의 반복으로 구성되고, 송신부는, 소정 채널수의 오디오 신호 및 소정 채널수의 촉각 진동 신호를, 멀티채널 그룹마다, 소정수의 프레임의 전부 또는 일부에 채널별로 시분할적으로 배치하여 송신하도록 해도 된다.
이렇게 본 기술에 있어서는, 소정 채널수의 오디오 신호와 소정 채널수의 촉각 진동 신호를 포함하는, 복수 프레임을 포함하는 블록마다의 전송 신호를, 순차로 소정 전송로를 통해, 수신측에 송신하는 것이다. 그 때문에, 촉각 진동 신호를 오디오 신호와 동기하여 양호하게 송신할 수 있다.
또한, 본 기술의 다른 개념은,
복수 프레임을 포함하는 블록마다의 전송 신호를 송신측으로부터 순차로 소정 전송로를 통해 수신하는 수신부를 구비하고,
상기 전송 신호는, 소정 채널수의 오디오 신호와 소정 채널수의 촉각 진동 신호를 포함하는
수신 장치에 있다.
본 기술에 있어서, 수신부에 의해, 복수 프레임을 포함하는 블록마다의 전송 신호가 송신측으로부터 순차로 소정 전송로를 통해 수신된다. 여기서, 전송 신호에는, 소정 채널수의 오디오 신호와 소정 채널수의 촉각 진동 신호가 포함되어 있다. 예를 들어, 소정 전송로는 동축 케이블, 광케이블, 이더넷(IEC 61883-6) 케이블, HDMI 케이블, MHL 케이블 또는 디스플레이 포토케이블이어도 된다.
예를 들어, 전송 신호를 처리하여 소정 채널수의 오디오 신호와 소정 채널수의 촉각 진동 신호를 출력하는 처리부를 더 구비하도록 해도 된다. 그리고, 이 경우, 예를 들어 전송 신호는 소정 채널수의 오디오 신호와 소정 채널수의 촉각 진동 신호의 구성 정보를 포함하고, 처리부는 구성 정보에 기초하여 신호를 처리하여, 소정 채널수의 오디오 신호와 소정 채널수의 촉각 진동 신호를 출력하도록 해도 된다.
또한, 예를 들어 구성 정보는, 블록마다 구성되는 채널 스테이터스의 소정 비트 영역을 사용하여 부가되도록 해도 된다. 또한, 예를 들어 구성 정보는, 연속되는 소정수의 프레임의 유저 데이터 비트를 사용하여 부가되도록 해도 된다. 또한, 예를 들어, 복수 프레임은, 소정수의 프레임을 포함하는 멀티채널 그룹의 반복으로 구성되고, 소정 채널수의 오디오 신호 및 소정 채널수의 촉각 진동 신호는, 멀티채널 그룹마다, 소정수의 프레임의 전부 또는 일부에 채널별로 시분할적으로 배치되도록 해도 된다.
이렇게 본 기술에 있어서는, 소정 채널수의 오디오 신호와 소정 채널수의 촉각 진동 신호를 포함하는, 복수 프레임을 포함하는 블록마다의 전송 신호를, 순차로 소정 전송로를 통해, 송신측에 수신하는 것이다. 그 때문에, 촉각 진동 신호를 오디오 신호와 동기하여 양호하게 수신할 수 있다.
도 1은 실시 형태로서의 AV 시스템의 구성예를 나타내는 블록도이다.
도 2는 비디오 신호, 오디오 신호 및 촉각 진동 신호의 다이내믹 레인지, 샘플링 주파수, 연속/불연속, 차원의 일례를 비교하여 나타내는 도면이다.
도 3은 텔레비전 수신기의 HDMI 수신부와 오디오 앰프의 HDMI 송신부의 구성예를 나타내는 블록도이다.
도 4는 TMDS 채널에 있어서 가로×세로가 1920픽셀×1080라인의 화상 데이터가 전송되는 경우의 각종 전송 데이터의 구간을 나타내는 도면이다.
도 5는 HDMI 커넥터의 핀 배열을 나타내는 도면이다.
도 6은 텔레비전 수신기의 고속 버스 인터페이스의 구성예를 나타내는 도면이다.
도 7은 오디오 앰프의 고속 버스 인터페이스의 구성예를 나타내는 도면이다.
도 8은 IEC 60958 규격에 있어서의 프레임 구성을 나타내는 도면이다.
도 9는 IEC 60958 규격에 있어서의 서브 프레임 구성을 나타내는 도면이다.
도 10은 IEC 60958 규격에 있어서의 신호 변조 방식을 나타내는 도면이다.
도 11은 IEC 60958 규격에 있어서의 프리앰블의 채널 코딩을 나타내는 도면이다.
도 12는 멀티채널 전송 포맷에 있어서의 프레임 구성의 일례를 나타내는 도면이다.
도 13은 IEC 60958 규격에 있어서의 채널 스테이터스의 포맷을 개략적으로 나타내는 도면이다.
도 14는 멀티채널 컨피규레이션의 값과, 그것에서 나타나는 오디오 채널 세트의 대응 관계를 나타내는 도면이다.
도 15는 높이마다의 스피커수를 특정하는 패킷의 일례를 나타내는 도면이다.
도 16은 멀티채널 그룹 내의 송신순에 대하여 몇번의 오디오 채널을 송신할지를 지정하는 패킷의 일례를 나타내는 도면이다.
도 17은 멀티채널 전송 포맷에 있어서의 멀티채널 그룹 1 내지 4의 지정 방법의 구체예를 나타내는 도면이다.
도 18은 멀티채널 오디오 신호와 소정 채널수의 촉각 진동 신호를 동시에 전송하는 경우의 멀티채널 전송 포맷의 프레임 구성의 일례를 나타내는 도면이다.
도 19는 5.1채널 오디오와 2채널의 촉각 진동 신호를 포함하는 전송 신호를 나타내는 도면이다.
도 20은 멀티채널 오디오 신호와 소정 채널수의 촉각 진동 신호를 동시에 전송하기 위한 멀티채널 서브그룹이 제2 방법으로 지정되는 예를 설명하기 위한 도면이다.
도 21은 AV 시스템의 다른 구성예를 나타내는 블록도이다.
도 22는 촉각 진동 신호를 구성하는 X축, Y축, Z축의 진동 데이터를 설명하기 위한 도면이다.
도 23은 촉각 진동 신호를 구성하는 X축, Y축, Z축의 진동 데이터를 IEC 60958-1의 서브 프레임 내의 24비트 슬롯에 할당하는 것을 설명하기 위한 도면이다.
도 24는 유저를 덮는 입방체의 공간을 생각하고, 그 입방체의 각 정점에 있어서의 촉각 진동 신호를 대표로서 송신하는 경우를 설명하기 위한 도면이다.
이하, 발명을 실시하기 위한 형태(이하, 「실시 형태」라 함)에 대하여 설명한다. 또한, 설명을 이하의 순서로 행한다.
1. 실시 형태
2. 변형예
<1. 실시 형태>
[AV 시스템의 구성예]
도 1은, 실시 형태로서의 AV(Audio/Visual) 시스템(10)의 구성예를 나타내고 있다. 이 AV 시스템(10)은 텔레비전 수신기(100)와 오디오 앰프(200)를 갖고 있다. 텔레비전 수신기(100)에는, 텔레비전 방송의 수신 안테나(121)와, BD(Blu-ray Disc) 플레이어(122)와, 인터넷(123)이 접속되어 있다. 또한, 오디오 앰프(200)에는, 2채널 혹은 멀티채널의 스피커 시스템(250)과, 1채널 또는 복수 채널의 진동 시스템(260)이 접속되어 있다. 또한, 「Blu-ray」는 등록 상표이다.
텔레비전 수신기(100) 및 오디오 앰프(200)는 HDMI 케이블(300)을 통해 접속되어 있다. 또한, 「HDMI」는 등록 상표이다. 텔레비전 수신기(100)에는, HDMI 수신부(HDMI RX)(102)와, 통신부를 구성하는 고속 버스 인터페이스(103)가 접속된 HDMI 단자(101)가 마련되어 있다. 오디오 앰프(200)에는, HDMI 송신부(HDMI TX)(202)와, 통신부를 구성하는 고속 버스 인터페이스(203)가 접속된 HDMI 단자(201)가 마련되어 있다. HDMI 케이블(300)의 일단부는 텔레비전 수신기(100)의 HDMI 단자(101)에 접속되고, 그 타단부는 오디오 앰프(200)의 HDMI 단자(201)에 접속되어 있다.
텔레비전 수신기(100)는 HDMI 수신부(102)와, 고속 버스 인터페이스(103)와, SPDIF 송신 회로(104)를 갖고 있다. 또한, 텔레비전 수신기(100)는 시스템 컨트롤러(105)와, 디지털 방송 수신 회로(107)와, 콘텐츠 재생 회로(108)와, 표시부(109)와, 이더넷 인터페이스(110)를 갖고 있다. 또한, 「이더넷」 및 「Ethernet」는 등록 상표이다. 또한, 도시된 예에서는, 설명의 간단화를 위해서, 화상계의 각 부에 대하여는 적절히 생략되어 있다.
시스템 컨트롤러(105)는 텔레비전 수신기(100)의 각 부의 동작을 제어한다. 디지털 방송 수신 회로(107)는 수신 안테나(121)로부터 입력된 텔레비전 방송 신호를 처리하여, 방송 콘텐츠에 관한 비디오 신호, 멀티채널 오디오 신호(리니어 PCM 신호) 및 소정 채널수의 촉각 진동 신호를 출력한다. 여기서, 멀티채널 오디오 신호는 복수 채널수의 오디오 신호에 의해 구성되어 있다.
이더넷 인터페이스(110)는 인터넷(123)을 통해 외부 서버와 통신을 행하여, 넷 콘텐츠에 관한 비디오 신호, 멀티채널 오디오 신호(리니어 PCM 신호) 및 소정 채널수의 촉각 진동 신호를 출력한다. BD 플레이어(122)는 재생 동작에 의해, 재생 콘텐츠에 관한 비디오 신호, 멀티채널 오디오 신호(리니어 PCM 신호) 및 소정 채널수의 촉각 진동 신호를 출력한다.
콘텐츠 재생 회로(108)는 디지털 방송 수신 회로(107), 이더넷 인터페이스(110) 혹은 BD 플레이어(122)에서 얻어진 비디오 신호, 멀티채널 오디오 신호 및 소정 채널수의 촉각 진동 신호를 선택적으로 인출한다. 그리고, 콘텐츠 재생 회로(108)는 비디오 신호를 표시부(109)에 보낸다. 표시부(109)는 이 비디오 신호에 의한 화상을 표시한다.
또한, 콘텐츠 재생 회로(108)는 멀티채널 오디오 신호 및 소정 채널수의 촉각 진동 신호를, SPDIF 송신 회로(104)에 보낸다. SPDIF 송신 회로(104)는 IEC 60958 규격의 디지털 오디오 전송 신호(이하, 적절히 「SPDIF 신호」라고 함)를 송신하기 위한 회로이다. 이 SPDIF 송신 회로(104)는 IEC 60958 규격에 준거한 송신 회로이다. 또한, SPDIF 신호의 상세한 것은 후술한다.
SPDIF 송신 회로(104)는 멀티채널 오디오 신호(리니어 PCM 신호) 및 소정 채널수의 촉각 진동 신호를, 오디오 앰프(200)에 동시에 송신한다. 이 경우, SPDIF 신호로서, 복수 프레임, 여기에서는 192 프레임을 포함하는 블록마다의 전송 신호가 순차로 송신된다. 그리고, 이 전송 신호에, 멀티채널 오디오 신호(리니어 PCM 신호) 및 소정 채널수의 촉각 진동 신호가 포함된다.
여기서, 복수 프레임은 소정수의 프레임을 포함하는 멀티채널 그룹의 반복으로 구성되어 있다. 멀티채널 오디오 신호 및 소정 채널수의 촉각 진동 신호는, 멀티채널 그룹마다, 소정수의 프레임의 전부 또는 일부에 채널별로 시분할적으로 배치되어 있다.
전송 신호에는, 멀티채널 오디오 신호 및 소정 채널수의 촉각 진동 신호의 구성 정보가 부가된다. 이 구성 정보에는, 촉각 진동 신호를 오디오 신호와 구별하기 위한 식별 정보가 포함된다. 또한, 이 식별 정보에는, 소정 채널수의 촉각 진동 신호의 각각이 대상으로 하는 진동 위치의 정보가 포함된다. 예를 들어, 구성 정보는 블록마다 구성되는 채널 스테이터스의 소정 비트 영역을 사용하여 부가된다. 또한, 예를 들어 구성 정보는 연속되는 소정수의 프레임의 유저 데이터 비트를 사용하여 부가된다.
HDMI 수신부(102)는 HDMI에 준거한 통신에 의해, HDMI 케이블(300)을 통해 HDMI 단자(101)에 공급되는 비디오나 오디오의 데이터를 수신한다. 고속 버스 인터페이스(103)는, HDMI 케이블(300)을 구성하는 리저브 라인 및 HPD(Hot Plug Detect) 라인을 사용하여 구성되는 쌍방향 통신로의 인터페이스이다. 또한, HDMI 수신부(102)와 고속 버스 인터페이스(103)의 상세한 것은 후술한다.
오디오 앰프(200)는 HDMI 송신부(202)와, 고속 버스 인터페이스(203)와, SPDIF 수신 회로(204)를 갖고 있다. 또한, 오디오 앰프(200)는 시스템 컨트롤러(205)와, 오디오 앰프(208)와, 진동 증폭기(209)와, 이더넷 인터페이스(210)를 갖고 있다.
시스템 컨트롤러(205)는 오디오 앰프(200)의 각 부의 동작을 제어한다. HDMI 송신부(202)는 HDMI에 준거한 통신에 의해, 비디오나 오디오의 데이터를, HDMI 단자(201)로부터 HDMI 케이블(300)에 송출한다. 고속 버스 인터페이스(203)는, HDMI 케이블(300)을 구성하는 리저브 라인 및 HPD(Hot Plug Detect) 라인을 사용하여 구성되는 쌍방향 통신로의 인터페이스이다. 또한, HDMI 송신부(202)와 고속 버스 인터페이스(203)의 상세한 것은 후술한다.
SPDIF 수신 회로(204)는 SDPIF 신호(IEC 60958 규격의 디지털 오디오 신호)로서의 전송 신호를 수신하고, 거기에 포함되는 멀티채널 오디오 신호 및 소정 채널수의 촉각 진동 신호를 취득한다. 이 경우, 전송 신호에 포함되는 구성 정보에 기초하여, 멀티채널 오디오 신호 및 소정 채널수의 촉각 진동 신호의 인출이 행해진다.
오디오 앰프(208)는 SPDIF 수신 회로(204)에서 인출된 멀티채널 오디오 신호를 채널마다 증폭시키고, 각각의 채널에 대응한 스피커를 갖는 스피커 시스템(250)에 보낸다. 이에 의해, 스피커 시스템(250)에서, 멀티채널 오디오 신호에 의한 음성 재생이 행해진다.
또한, 진동 증폭기(209)는, SPDIF 수신 회로(204)에서 인출된 소정 채널수의 촉각 진동 신호를 채널마다 증폭시키고, 각각의 채널에 대응한 진동 디바이스를 갖는 진동 시스템(260)에 보낸다. 이에 의해, 진동 시스템(260)에서, 소정 채널수의 촉각 진동 신호에 의한 진동 재생이 행해진다. 이 경우, 상술한 바와 같이, 소정 채널수의 촉각 진동 신호가 멀티채널 오디오 신호와 동시에 보내져 오는 것이기 때문에, 이 진동 재생은 음성 재생과 정확하게 동기한 것이 되고, 또한 텔레비전 수신기(100)의 표시부(109)에 있어서의 영상 표시와도 동기한 것이 된다.
도 2는, 비디오 신호, 오디오 신호 및 촉각 진동 신호의 다이내믹 레인지, 샘플링 주파수, 연속/불연속, 차원의 일례를 비교하여 나타내고 있다. 비디오 신호에 대하여는, 다이내믹 레인지는 48-96dB, 샘플링 주파수는 60Hz, 불연속 신호, 및 2차원 또는 3차원의 신호이다. 또한, 오디오 신호에 대하여는, 다이내믹 레인지는 96dB-144dB, 샘플링 주파수는 48kHz, 연속 신호 및 1차원의 신호이다.
그리고, 촉각 진동 신호에 대하여는, 다이내믹 레인지는 40-60dB이며, 샘플링 주파수는 2kHz, 연속 신호 및 1차원의 신호이다. 이렇게 촉각 진동 신호는 오디오 신호와 마찬가지로 샘플링 주파수가 높으며 연속 신호이다. 그 때문에, 상술한 바와 같이, 촉각 진동 신호를, 오디오 신호의 전송로를 사용하여, 오디오 신호와 동시에 전송함으로써, 오디오 신호와 동기한 전송을, 간단하면서 용이하게 달성할 수 있다.
또한, 촉각 진동 신호는 상술한 바와 같이, 다이내믹 레인지는 40-60dB, 주파수 대역은 DC-1kHz로 말해지고 있지만, 비디오 신호보다는 오디오 신호에 가깝다. 리니어 PCM을 전송할 수 있는 디지털 오디오 인터페이스라면 촉각 진동 신호도 전송할 수 있다. 이 경우, DC 영역에 대하여는 플러스로 “누른다”, 마이너스로 “뺀다” 혹은 “끌어 당긴다”와 같은 표현이 가능하다.
「HDMI 송신부/수신부의 구성예」
도 3은, 도 1의 AV 시스템(10)에 있어서의, 텔레비전 수신기(100)의 HDMI 수신부(102)와 오디오 앰프(200)의 HDMI 송신부(202)의 구성예를 나타내고 있다.
HDMI 송신부(202)는, 어떤 수직 동기 신호로부터 다음 수직 동기 신호까지의 구간(이하, 적절히 「비디오 필드」라고 함)에서, 수평 블랭킹 기간 및 수직 블랭킹 기간을 제외한 구간인 유효 화상 구간(이하, 적절히 「액티브 비디오 구간」이라고 함)에 있어서, 기저 대역(비압축)의 1화면분의 화상 데이터의 차동 신호를, 복수의 채널에서, HDMI 수신부(102)에 일방향으로 송신한다. 또한, HDMI 송신부(202)는 수평 블랭킹 기간 및 수직 블랭킹 기간에 있어서, 화상 데이터에 부수되는 음성 데이터 및 제어 패킷(Control Packet), 또한 기타 보조 데이터 등에 대응하는 차동 신호를, 복수의 채널에서, HDMI 수신부(102)에 일방향으로 송신한다.
HDMI 송신부(202)는 소스 신호 처리부(71) 및 HDMI 트랜스미터(72)를 갖는다. 소스 신호 처리부(71)에는, 기저 대역의 비압축 화상(Video) 및 음성(Audio)의 데이터가 공급된다. 소스 신호 처리부(71)는 공급되는 화상 및 음성의 데이터에 필요한 처리를 실시하고, HDMI 트랜스미터(72)에 공급한다. 또한, 소스 신호 처리부(71)는 HDMI 트랜스미터(72)와의 사이에서, 필요에 따라서 제어용의 정보나 스테이터스를 알리는 정보(Control/Status) 등을 주고받는다.
HDMI 트랜스미터(72)는 소스 신호 처리부(71)로부터 공급되는 화상 데이터를, 대응하는 차동 신호로 변환하고, 복수의 채널인 3개의 TMDS 채널 #0, #1, #2에서, HDMI 케이블(300)을 통해 접속되어 있는 HDMI 수신부(102)에, 일방향으로 송신한다.
또한, 트랜스미터(72), 소스 신호 처리부(71)로부터 공급되는, 비압축의 화상 데이터에 부수되는 음성 데이터나 제어 패킷 그 밖의 보조 데이터(auxiliary data)와, 수직 동기 신호(VSYNC), 수평 동기 신호(HSYNC) 등의 제어 데이터(control data)를, 대응하는 차동 신호로 변환하고, 3개의 TMDS 채널 #0, #1, #2에서, HDMI 케이블(300)을 통해 접속되어 있는 HDMI 수신부(102)에, 일방향으로 송신한다.
또한, 트랜스미터(72)는, 3개의 TMDS 채널 #0, #1, #2에서 송신하는 화상 데이터에 동기한 픽셀 클럭을, TMDS 클럭 채널에서, HDMI 케이블(300)을 통해 접속되어 있는 HDMI 수신부(102)에 송신한다.
HDMI 수신부(102)는 액티브 비디오 구간에 있어서, 복수 채널에서, HDMI 송신부(202)로부터 일방향으로 송신되어 오는, 화상 데이터에 대응하는 차동 신호를 수신함과 함께, 수평 블랭킹 기간 및 수직 블랭킹 기간에 있어서, 복수의 채널에서, HDMI 송신부(202)로부터 송신되어 오는, 보조 데이터나 제어 데이터에 대응하는 차동 신호를 수신한다.
HDMI 수신부(102)는 HDMI 리시버(81) 및 싱크 신호 처리부(82)를 갖는다. HDMI 리시버(81)는 TMDS 채널 #0, #1, #2에서, HDMI 케이블(300)을 통해 접속되어 있는 HDMI 송신부(202)로부터 일방향으로 송신되어 오는, 화상 데이터에 대응하는 차동 신호와, 보조 데이터나 제어 데이터에 대응하는 차동 신호를, 동일하게 HDMI 송신부(202)로부터 TMDS 클럭 채널에서 송신되어 오는 픽셀 클럭에 동기하여 수신한다. 또한, HDMI 리시버(81)는 차동 신호를, 대응하는 화상 데이터, 보조 데이터, 제어 데이터로 변환하고, 필요에 따라서 싱크 신호 처리부(82)에 공급한다.
싱크 신호 처리부(82)는 HDMI 리시버(81)로부터 공급되는 데이터에 필요한 처리를 실시하여 출력한다. 그 밖에도, 싱크 신호 처리부(82)는 HDMI 리시버(81)와의 사이에서, 필요에 따라서 제어용의 정보나 스테이터스를 알리는 정보(Control/Status) 등을 주고받는다.
HDMI의 전송 채널에는, HDMI 송신부(202)로부터 HDMI 수신부(102)에 대하여 화상 데이터, 보조 데이터 및 제어 데이터를, 픽셀 클럭에 동기하여, 일방향으로 시리얼 전송하기 위한 3개의 TMDS 채널 #0, #1, #2와, 픽셀 클럭을 전송하는 전송 채널로서의 TMDS 클럭 채널과 그 밖에도, DDC(Display Data Channel)(83), 나아가 CEC 라인(84)이라고 불리는 전송 채널이 있다.
DDC(83)는 HDMI 케이블(300)에 포함되는 도시하지 않은 2개의 라인(신호선)을 포함하고, 소스 기기가, HDMI 케이블(300)을 통해 접속된 싱크 기기로부터, E-EDID(Enhanced-Extended Display Identification)를 판독하기 위해 사용된다. 즉, 싱크 기기는 EDIDROM(85)을 갖고 있다. 소스 기기는, HDMI 케이블(300)을 통해 접속되어 있는 싱크 기기로부터, EDIDROM(85)이 기억하고 있는 E-EDID를, DDC(83)를 통해 판독하고, 당해 E-EDID에 기초하여 싱크 기기의 설정, 성능을 인식한다.
CEC 라인(84)은, HDMI 케이블(300)이 포함되는 도시하지 않은 1개의 라인을 포함하고, 소스 기기와 싱크 기기 사이에서, 제어용의 데이터의 쌍방향 통신을 행하기 위해 사용된다.
또한, HDMI 케이블(300)에는, HPD(Hot Plug Detect)라고 불리는 핀에 접속되는 라인(86)이 포함되어 있다. 소스 기기는 당해 라인(86)을 이용하여, 싱크 기기의 접속을 검출할 수 있다. 또한, HDMI 케이블(300)에는, 소스 기기로부터 싱크 기기에 전원을 공급하기 위해 사용되는 라인(87)이 포함되어 있다. 또한, HDMI 케이블(300)에는, 리저브 라인(88)이 포함되어 있다.
도 4는, TMDS 채널에 있어서, 가로×세로가 1920픽셀×1080라인의 화상 데이터가 전송되는 경우의, 각종 전송 데이터의 구간을 나타내고 있다. HDMI의 3개의 TMDS 채널에서 전송 데이터가 전송되는 비디오 필드(Video Field)에는, 전송 데이터의 종류에 따라서, 비디오 데이터 구간(24)(Video Data Period), 데이터 아일랜드 구간(25)(Data Island Period) 및 컨트롤 구간(26)(Control Period)의 3종류의 구간이 존재한다.
여기서, 비디오 필드 구간은, 어떤 수직 동기 신호의 상승 에지(Active Edge)로부터 다음 수직 동기 신호의 상승 에지까지의 구간이며, 수평 귀선 기간(22)(Horizontal Blanking), 수직 귀선 기간(23)(Vertical Blanking), 그리고, 비디오 필드 구간으로부터, 수평 귀선 기간 및 수직 귀선 기간을 제외한 구간인 유효 화소 구간(21)(Active Video)으로 나뉜다.
비디오 데이터 구간(24)은 유효 화소 구간(21)에 할당된다. 이 비디오 데이터 구간(24)에서는, 비압축의 1화면분의 화상 데이터를 구성하는 1920픽셀(화소)×1080라인분의 유효 화소(Active Pixel)의 데이터가 전송된다. 데이터 아일랜드 구간(25) 및 컨트롤 구간(26)은 수평 귀선 기간(22) 및 수직 귀선 기간(23)에 할당된다. 이 데이터 아일랜드 구간(25) 및 컨트롤 구간(26)에서는, 보조 데이터(Auxiliary Data)가 전송된다.
즉, 데이터 아일랜드 구간(25)은 수평 귀선 기간(22)과 수직 귀선 기간(23)의 일부분에 할당되어 있다. 이 데이터 아일랜드 구간(25)에서는, 보조 데이터 중, 제어에 관계되지 않는 데이터인, 예를 들어 음성 데이터의 패킷 등이 전송된다. 컨트롤 구간(26)은 수평 귀선 기간(22)과 수직 귀선 기간(23)의 다른 부분에 할당되어 있다. 이 컨트롤 구간(26)에서는, 보조 데이터 중의, 제어에 관계되는 데이터인, 예를 들어 수직 동기 신호 및 수평 동기 신호, 제어 패킷 등이 전송된다.
도 5는, HDMI 커넥터의 핀 배열을 나타내고 있다. 이 핀 배열은 타입 A(type-A)의 예이다. TMDS 채널 #i의 차동 신호인 TMDS Data#i+와 TMDS Data#i-가 전송되는 차동선인 2개의 라인은, TMDS Data#i+가 할당되어 있는 핀(핀 번호가 1, 4, 7인 핀)과, TMDS Data#i-가 할당되어 있는 핀(핀 번호가 3, 6, 9인 핀)에 접속된다.
또한, 제어용의 데이터인 CEC 신호가 전송되는 CEC 라인(84)은, 핀 번호가 13인 핀에 접속되고, 핀 번호가 14인 핀은 빈(Reserved) 핀으로 되어 있다. 또한, E-EDID 등의 SDA(Serial Data) 신호가 전송되는 라인은, 핀 번호가 16인 핀에 접속되고, SDA 신호의 송수신 시의 동기에 사용되는 클럭 신호인 SCL(Serial Clock) 신호가 전송되는 라인은, 핀 번호가 15인 핀에 접속된다. 상술한 DDC(83)는, SDA 신호가 전송되는 라인 및 SCL 신호가 전송되는 라인에 의해 구성된다.
또한, 상술한 바와 같이 소스 기기가 싱크 기기의 접속을 검출하기 위한 HPD 라인(86)은, 핀 번호가 19인 핀에 접속된다. 또한, 상술한 바와 같이 전원을 공급하기 위한 전원 라인(87)은, 핀 번호가 18인 핀에 접속된다.
「고속 버스 인터페이스의 구성예」
도 6은, 도 1의 AV 시스템(10)에 있어서의 텔레비전 수신기(100)의 고속 버스 인터페이스(103)의 구성예를 나타내고 있다. 이더넷 인터페이스(110)는 HDMI 케이블(300)을 구성하는 복수의 라인 중, 리저브 라인 및 HPD 라인의 한 쌍의 라인에 의해 구성된 전송로를 사용하여 LAN(Local Area Network) 통신, 즉 이더넷 신호의 송수신을 행한다. SPDIF 송신 회로(104)는 상술한 한 쌍의 라인에 의해 구성된 전송로를 사용하여, SPDIF 신호를 송신한다.
텔레비전 수신기(100)는 LAN 신호 송신 회로(441), 종단 저항(442), AC 결합 용량(443, 444), LAN 신호 수신 회로(445), 감산 회로(446), 가산 회로(449, 450) 및 증폭기(451)를 갖고 있다. 이들은 고속 버스 인터페이스(103)를 구성하고 있다. 또한, 텔레비전 수신기(100)는 플러그 접속 전달 회로(128)를 구성하는, 초크코일(461), 저항(462) 및 저항(463)을 갖고 있다.
HDMI 단자(101)의 14핀 단자(521)와 19핀 단자(522) 사이에는, AC 결합 용량(443), 종단 저항(442) 및 AC 결합 용량(444)의 직렬 회로가 접속된다. 또한, 전원선(+5.0V)과 접지선 사이에는, 저항(462) 및 저항(463)의 직렬 회로가 접속된다. 그리고, 이 저항(462)과 저항(463)의 상호 접속점은, 초크코일(461)을 통해, 19핀 단자(522)와 AC 결합 용량(444)의 접속점 Q4에 접속된다.
AC 결합 용량(443)과 종단 저항(442)의 상호 접속점 P3은, 가산 회로(449)의 출력측에 접속됨과 함께, LAN 신호 수신 회로(445)의 정입력측에 접속된다. 또한, AC 결합 용량(444)과 종단 저항(442)의 상호 접속점 P4는, 가산 회로(450)의 출력측에 접속됨과 함께, LAN 신호 수신 회로(445)의 부입력측에 접속된다.
가산 회로(449)의 한쪽의 입력측은 LAN 신호 송신 회로(441)의 정출력측에 접속되고, 이 가산 회로(449)의 다른 쪽의 입력측에는 SPDIF 송신 회로(104)로부터 출력되는 SPDIF 신호가 증폭기(451)를 통해 공급된다. 또한, 가산 회로(450)의 한쪽의 입력측은 LAN 신호 송신 회로(441)의 부출력측에 접속되고, 이 가산 회로(450)의 다른 쪽의 입력측에는 SPDIF 송신 회로(104)로부터 출력되는 SPDIF 신호가 증폭기(451)를 통해 공급된다.
LAN 신호 송신 회로(441)의 입력측에는, 이더넷 인터페이스(110)로부터 송신 신호(송신 데이터) SG417이 공급된다. 또한, 감산 회로(446)의 플러스측 단자에는, LAN 신호 수신 회로(445)의 출력 신호 SG418이 공급되고, 이 감산 회로(446)의 마이너스측 단자에는, 송신 신호 SG417이 공급된다. 이 감산 회로(446)에서는, LAN 신호 수신 회로(445)의 출력 신호 SG418로부터 송신 신호 SG417이 감산되어, 수신 신호(수신 데이터) SG419가 얻어진다. 이 수신 신호 SG419는, 리저브 라인 및 HPD 라인을 통해 LAN 신호(이더넷 신호)가 차동 신호로서 송신되어 올 경우에는, 당해 LAN 신호가 된다. 이 수신 신호 SG419는 이더넷 인터페이스(110)에 공급된다.
도 7은, 도 1의 AV 시스템(10)에 있어서의 오디오 앰프(200)의 고속 버스 인터페이스(203)의 구성예를 나타내고 있다. 이더넷 인터페이스(210)는 HDMI 케이블(610)을 구성하는 복수의 라인 중, 리저브 라인 및 HPD 라인의 한 쌍의 라인에 의해 구성된 전송로를 사용하여 LAN(Local Area Network) 통신, 즉 이더넷 신호의 송수신을 행한다. SPDIF 수신 회로(204)는 상술한 한 쌍의 라인에 의해 구성된 전송로를 사용하여, SPDIF 신호를 수신한다.
오디오 앰프(200)는 LAN 신호 송신 회로(411), 종단 저항(412), AC 결합 용량(413, 414), LAN 신호 수신 회로(415), 감산 회로(416), 가산 회로(419) 및 증폭기(420)를 갖고 있다. 이들은 고속 버스 인터페이스(203)를 구성하고 있다. 또한, 오디오 앰프(200)는 플러그 접속 검출 회로(221)를 구성하는, 풀 다운 저항(431), 저항(432), 용량(433) 및 비교기(434)를 갖고 있다. 여기서, 저항(432) 및 용량(433)은 저역 통과 필터를 구성하고 있다.
HDMI 단자(201)의 14핀 단자(511)와 19핀 단자(512) 사이에는, AC 결합 용량(413), 종단 저항(412) 및 AC 결합 용량(414)의 직렬 회로가 접속된다. AC 결합 용량(413)과 종단 저항(412)의 상호 접속점 P1은, LAN 신호 송신 회로(411)의 정출력측에 접속됨과 함께, LAN 신호 수신 회로(415)의 정입력측에 접속된다.
AC 결합 용량(414)과 종단 저항(412)의 상호 접속점 P2는, LAN 신호 송신 회로(411)의 부출력측에 접속됨과 함께, LAN 신호 수신 회로(415)의 부입력측에 접속된다. LAN 신호 송신 회로(411)의 입력측에는, 이더넷 인터페이스(210)로부터 송신 신호(송신 데이터) SG411이 공급된다.
감산 회로(416)의 플러스측 단자에는, LAN 신호 수신 회로(415)의 출력 신호 SG412가 공급되고, 이 감산 회로(416)의 마이너스측 단자에는, 송신 신호(송신 데이터) SG411이 공급된다. 이 감산 회로(416)에서는, LAN 신호 수신 회로(415)의 출력 신호 SG412로부터 송신 신호 SG411이 감산되어, 수신 신호 SG413이 얻어진다. 이 수신 신호 SG413은 리저브 라인 및 HPD 라인을 통해, LAN 신호(이더넷 신호)가 차동 신호로서 송신되어 올 경우에는, 당해 LAN 신호가 된다. 이 수신 신호 SG413은 이더넷 인터페이스(210)에 공급된다.
AC 결합 용량(414)과 19핀 단자(512)의 접속점 Q2는, 풀 다운 저항(431)을 통해 접지선에 접속됨과 함께, 저항(432) 및 용량(433)의 직렬 회로를 통해 접지선에 접속된다. 그리고, 저항(432) 및 용량(433)의 상호 접속점에 얻어지는 저역 통과 필터의 출력 신호는 비교기(434)의 한쪽의 입력 단자에 공급된다. 이 비교기(434)에서는, 저역 통과 필터의 출력 신호가 다른 쪽의 입력 단자에 공급되는 기준 전압 Vref2(+1.4V)와 비교된다. 이 비교기(434)의 출력 신호 SG415는, 오디오 앰프(200)의 도시하지 않은 제어부(CPU)에 공급된다.
또한, AC 결합 용량(413)과 종단 저항(412)의 상호 접속점 P1은, 가산 회로(419)의 한쪽의 입력 단자에 접속된다. 또한, AC 결합 용량(414)과 종단 저항(412)의 상호 접속점 P2는, 가산 회로(419)의 다른 쪽의 입력 단자에 접속된다. 이 가산 회로(419)의 출력 신호는 증폭기(420)를 통해 SPDIF 수신 회로(204)에 공급된다. 이 가산 회로(419)의 출력 신호는 리저브 라인 및 HPD 라인을 통해, SPDIF 신호가 동상 신호로서 송신되어 올 경우에는, 당해 SPDIF 신호가 된다.
「SPDIF 신호의 상세」
먼저, IEC 60958 규격의 개요에 대하여 설명한다. 도 8은, IEC 60958 규격에 있어서의 프레임 구성을 나타내고 있다. 각 프레임은 2개의 서브 프레임으로 구성된다. 2채널 스테레오 음성의 경우, 첫번째 서브 프레임에 좌채널 신호가 포함되고, 두번째 서브 프레임에 우채널 신호가 포함된다.
서브 프레임의 선두에는 후술하는 바와 같이 프리앰블이 마련되고, 좌채널 신호에는 프리앰블로서 「M」이, 우채널 신호에는 프리앰블로서 「W」가 부여된다. 단, 192 프레임마다 선두의 프리앰블에는 블록의 개시를 나타내는 「B」가 부여된다. 즉, 1 블록은 192 프레임에 의해 구성된다. 블록은 후술하는 채널 스테이터스를 구성하는 단위이다.
도 9는, IEC 60958 규격에 있어서의 서브 프레임 구성을 나타내고 있다. 서브 프레임은 제0 내지 제31의 계 32의 타임 슬롯으로 구성된다. 제0 내지 제3 타임 슬롯은 프리앰블(Sync preamble)을 나타낸다. 이 프리앰블은, 상술한 바와 같이 좌우 채널의 구별이나 블록의 개시 위치를 나타내기 위해서, 「M」, 「W」 또는 「B」 중 어느 것을 나타낸다.
제4 내지 제27 타임 슬롯은 메인 데이터 필드이며, 24비트 코드 레인지가 채용되는 경우에는 전체가 오디오 데이터를 나타낸다. 또한, 20비트 코드 레인지가 채용되는 경우에는 제8 내지 제27 타임 슬롯이 오디오 데이터(Audio sample word)를 나타낸다. 후자의 경우, 제4 내지 제7 타임 슬롯은 추가 정보(Auxiliary sample bits)로서 이용할 수 있다. 도시한 예는 후자의 경우를 나타내고 있다.
제28 타임 슬롯은 메인 데이터 필드의 유효 플래그(Validity flag)이다. 제29 타임 슬롯은 유저 데이터(User data)의 1비트분을 나타낸다. 각 프레임에 걸쳐서 이 제29 타임 슬롯을 누적함으로써 일련의 유저 데이터를 구성할 수 있다. 이 유저 데이터의 메시지는 8비트의 정보 유닛(IU: Information Unit)을 단위로 하여 구성되고, 하나의 메시지에는 3 내지 129개의 정보 유닛이 포함된다.
정보 유닛간에는 0 내지 8비트의 「0」이 존재할 수 있다. 정보 유닛의 선두는 개시 비트 「1」에 의해 식별된다. 메시지 내의 최초의 7개의 정보 유닛은 예약되어 있으며, 8개째 이후의 정보 유닛에 유저는 임의의 정보를 설정할 수 있다. 메시지간은 8비트 이상의 「0」에 의해 분할된다.
제30 타임 슬롯은 채널 스테이터스(Channel status)의 1비트분을 나타낸다. 각 프레임에 걸쳐 블록마다 제30 타임 슬롯을 누적함으로써 일련의 채널 스테이터스를 구성할 수 있다. 또한, 블록의 선두 위치는 상술한 바와 같이, 「B」의 프리앰블(제0 내지 제3 타임 슬롯)에 의해 나타난다.
제31 타임 슬롯은 패리티 비트(Parity bit)이다. 제4 내지 제31 타임 슬롯에 포함되는 「0」 및 「1」의 수가 짝수가 되게, 이 패리티 비트가 부여된다.
도 10은, IEC 60958 규격에 있어서의 신호 변조 방식을 나타내고 있다. 서브 프레임 중 프리앰블을 제외한 제4 내지 제31 타임 슬롯이 바이페이즈 마크 변조된다. 이 바이페이즈 마크 변조 시에는, 원래 신호(소스 코딩)의 2배속의 클럭이 사용된다. 원래 신호의 클럭 사이클을 전반과 후반으로 나누면, 전반의 클럭 사이클의 에지에서, 바이페이즈 마크 변조의 출력은 반드시 반전된다. 또한, 후반 클럭 사이클의 에지에 있어서, 원래 신호가 「1」을 나타내고 있을 때에는 반전되고, 원래 신호가 「0」을 나타내고 있을 때에는 반전되지 않는다. 이에 의해, 바이페이즈 마크 변조된 신호로부터 원래 신호에 있어서의 클럭 성분을 추출 가능하게 된다.
도 11은, IEC 60958 규격에 있어서의 프리앰블의 채널 코딩을 나타내고 있다. 상술한 바와 같이, 서브 프레임 중 제4 내지 제31 타임 슬롯은 바이페이즈 마크 변조된다. 한편, 제0 내지 제3 타임 슬롯의 프리앰블은 통상의 바이페이즈 마크 변조가 아니고, 2배속의 클럭에 동기한 비트 패턴으로서 다루어진다. 즉, 제0 내지 제3 타임 슬롯의 각 타임 슬롯에 2비트씩 할당함으로써, 동 도와 같은 8 비트 패턴을 얻는다.
직전의 상태가 「0」이면, 프리앰블 「B」에는 「11101000」이, 「M」에는 「11100010」이, 「W」에는 「1100100」이 각각 할당된다. 한편, 직전의 상태가 「1」이면, 프리앰블 「B」에는 「00010111」이, 「M」에는 「00011101」이, 「W」에는 「00011011」이 각각 할당된다.
이 실시 형태에 있어서는, IEC 60958 규격을 기초로 하는 멀티채널 전송 포맷을 이용하여, 상술한 멀티채널 오디오 신호 및 소정 채널수의 촉각 진동 신호를 동시에 전송한다.
먼저, 멀티채널 전송 포맷에 대하여 설명한다. 도 12는, 멀티채널 전송 포맷에 있어서의 프레임 구성의 일례를 나타내고 있다. IEC 60958 규격에서는, 192 프레임에서 하나의 블록이 구성되지만, 이 192 프레임은 소정수의 서브 프레임을 포함하는 멀티채널 그룹(Multichannel group)의 반복을 포함한다. 각각의 서브 프레임 부분은 멀티채널 오더를 구성하고 있다. 멀티채널 그룹에 포함하는 서브 프레임의 수를 몇으로 할지는, 블록마다 구성되는 채널 스테이터스의 소정 비트 영역을 사용하여 나타낼 수 있다.
또한, 멀티채널 그룹 내에, 각각 멀티채널 오디오 신호를 전송하기 위한 하나의 또는 복수의 멀티채널 서브그룹이 형성된다. 멀티채널 서브그룹은 하나의 또는 복수의 멀티채널 오더를 포함한다. 이 멀티채널 서브그룹을 구성하는 각각의 멀티채널 오더에 멀티채널 오디오 신호의 각 채널의 신호가 순차로 배치된다. 멀티채널 그룹 내에 어떤 멀티채널 서브그룹이 형성될지는, 블록마다 구성되는 채널 스테이터스의 소정 비트 영역을 사용하여 나타낼 수 있고, 또한 소정수의 프레임의 유저 데이터 비트를 사용해도 나타낼 수 있다.
도시한 예에 있어서는, 하나의 멀티채널 그룹이 8 서브 프레임, 즉 멀티채널 오더 1 내지 8로 구성되어 있다. 또한, 멀티채널 그룹 내에, 멀티채널 서브그룹 1 내지 4의 4개의 멀티채널 서브그룹이 형성되어 있다.
멀티채널 서브그룹 1은 멀티채널 오더 1 내지 3을 포함하고, 각각의 멀티채널 오더에 3채널의 멀티채널 오디오 신호의 각 채널의 신호(채널 번호 65, 66, 67의 신호)가 순서대로 배치되어 있다. 여기서, 채널 번호 65는 프론트 레프트(FL)를 나타내고, 채널 번호 66은 프론트 라이트(FR)를 나타내고, 채널 번호 67은 프론트 센터(FC)를 나타낸다.
또한, 멀티채널 서브그룹 2는 멀티채널 오더 4 내지 5를 포함하고, 각각의 멀티채널 오더에 2채널의 멀티채널 오디오 신호의 각 채널의 신호(채널 번호 77, 78의 신호)가 순서대로 배치되어 있다. 여기서, 채널 번호 77은 하이 프론트 레프트(HFL)를 나타내고, 채널 번호 78은 프론트 라이트(HFR)를 나타낸다.
또한, 멀티채널 서브그룹 3은 멀티채널 오더 6을 포함하고, 그 멀티채널 오더에 1채널의 멀티채널 오디오 신호(채널 번호 80의 신호)가 배치되어 있다. 여기서, 채널 번호 80은 오버헤드 센터(OhC)를 나타낸다.
또한, 멀티채널 서브그룹 4는 멀티채널 오더 7 내지 8을 포함하고, 그 멀티채널 오더에 2채널의 멀티채널 오디오 신호(채널 번호 65, 66의 신호)가 순서대로 배치되어 있다.
멀티채널 그룹 내에 형성되는 멀티채널 서브그룹의 지정 방법에 대하여 설명한다. 멀티채널 서브그룹의 지정 방법으로서, 예를 들어 이하의 제1 내지 제3 방법이 있다.
제1 방법은, 블록마다 구성되는 채널 스테이터스의 비트 63 내지 60에 저장되는 멀티채널 컨피규레이션의 정보에 의해, 멀티채널 서브그룹을 직접 지정하는 방법이다. 여기서, 멀티채널 컨피규레이션은, 미리 소정의 오디오 채널이 조합된 오디오 채널 세트를 나타내는 것이다. 이 제1 방법으로는, 미리 소정의 오디오 채널이 조합된 오디오 채널 세트밖에 지정할 수 없다.
제2 방법은, 블록마다 구성되는 채널 스테이터스의 비트 165 내지 191에 저장되는 멀티채널 맵을 이용하여, 해당하는 채널에 맞는 비트에 1을 세움으로써 채널 서브그룹을 지정하는 방법이다. 이 제2 방법으로는, 임의의 오디오 채널을 조합한 오디오 채널 세트를 지정할 수 있지만, 송신순은 멀티채널 맵에 나오는 순번이 되고, 임의의 송신순으로 할 수는 없다.
도 13은, IEC 60958 규격에 있어서의 채널 스테이터스의 포맷을 개략적으로 나타내고 있다. 채널 스테이터스는 서브 프레임에 있어서의 제30 타임 슬롯을 블록마다 누적한 것이다(도 9 참조). 이 도면에서는, 채널 스테이터스의 내용이 세로 방향으로 1바이트씩 배치되고, 가로 방향으로는 각 바이트에 있어서의 비트 구성이 나타나 있다. 또한, 여기에서는, 민간용(Consumer use)의 포맷을 상정하여 설명한다.
제0 비트(bit 0) a는 “0”이 되고, 이 채널 스테이터스가 민간용인 것을 나타낸다. 또한, 제1 비트(bit 1) b는 “0”이 되고, 리니어 PCM의 샘플인 것을 나타낸다. 또한, 제6 및 7비트(bit 6-7)은 채널 스테이터스의 모드를 나타낸다.
또한, 제44 비트 내지 제47 비트(bit 44-47)는 「Multichannel Count」의 4비트 필드를 구성하고 있으며, 멀티채널 그룹에 포함하는 서브 프레임의 수가 나타난다. 예를 들어, “0000”는 2ch LPCM, 즉 멀티채널 그룹에 포함하는 서브 프레임의 수가 2인 것을 나타내고, “1011”는 64ch LPCM, 즉 멀티채널 그룹에 포함하는 서브 프레임의 수가 64인 것을 나타내고, “1100”는 32ch LPCM, 즉 멀티채널 그룹에 포함하는 서브 프레임의 수가 32인 것을 나타내고, “1101”는 16ch LPCM, 즉 멀티채널 그룹에 포함하는 서브 프레임의 수가 16인 것을 나타내고, “1110”는 8ch LPCM, 즉 멀티채널 그룹에 포함하는 서브 프레임의 수가 8인 것을 나타내고, 또한 “1111”는 4ch LPCM, 즉 멀티채널 그룹에 포함하는 서브 프레임의 수가 4인 것을 나타낸다.
또한, 제53 비트 내지 제60 비트는 「Multichannel configuration value」의 8비트 필드를 구성하고 있으며, 제1 방법에 의한 멀티채널 서브그룹의 지정에 사용되는 멀티채널 컨피규레이션의 값을 나타낸다.
도 14는, 멀티채널 컨피규레이션의 값과, 그것에서 나타나는 오디오 채널 세트의 대응 관계를 나타내고 있다. 각각의 오디오 채널 세트는 ISO/IEC 23001-8 2016에서 결정된 것이며, 멀티채널 컨피규레이션의 값으로 식별된다. 또한, 도 14에는 나타나 있지 않지만, ITU-R BS.2094-1에서 규정되어 있는 오디오 채널 세트나 IEC 독자의 오디오 채널 세트를 지정하는 것도 가능하다.
멀티채널 컨피규레이션의 값이 “10000000”이면, 채널 컨피규레이션 1(ChannelConfiguration 1)인 오디오 채널 세트(멀티채널 서브그룹)가 존재하고, 이 오디오 채널 세트는 「67:FC」의 오디오 채널만으로 구성되는 것을 나타낸다. 또한, 멀티채널 컨피규레이션의 값이 “01000000”이면, 채널 컨피규레이션 2(ChannelConfiguration 2)인 오디오 채널 세트(멀티채널 서브그룹)가 존재하고, 이 오디오 채널 세트는 「65:FL」, 「66:FR」의 오디오 채널로 구성되고, 이 순서로 송신되는 것을 나타낸다.
또한, 멀티채널 컨피규레이션의 값이 “11000000”이면, 채널 컨피규레이션 3(ChannelConfiguration 3)인 오디오 채널 세트(멀티채널 서브그룹)가 존재하고, 이 오디오 채널 세트는 「65:FL」, 「66:FR」, 「67:FC」의 오디오 채널로 구성되고, 이 순서로 송신되는 것을 나타낸다. 또한, 멀티채널 컨피규레이션의 값이 “00100000”이면, 채널 컨피규레이션 4(ChannelConfiguration 4)인 오디오 채널 세트(멀티채널 서브그룹)가 존재하고, 이 오디오 채널 세트는 「65:FL」, 「66:FR」, 「67:FC」, 「184: MS」의 오디오 채널로 구성되고, 이 순서로 송신되는 것을 나타낸다.
또한, 멀티채널 컨피규레이션의 값이 “10100000”이면, 채널 컨피규레이션5(ChannelConfiguration 5)인 오디오 채널 세트(멀티채널 서브그룹)가 존재하고, 이 오디오 채널 세트는 「65:FL」, 「66:FR」, 「67:FC」, 「69:LS」, 「70:RS」의 오디오 채널로 구성되고, 이 순서로 송신되는 것을 나타낸다.
또한, 멀티채널 컨피규레이션의 값이 “01100000”이면, 채널 컨피규레이션6(ChannelConfiguration 6)인 오디오 채널 세트(멀티채널 서브그룹)가 존재하고, 이 오디오 채널 세트는 「65:FL」, 「66:FR」, 「67:FC」, 「68: LFE」, 「69:LS」, 「70:RS」의 오디오 채널로 구성되고, 이 순서로 송신되는 것을 나타낸다.
또한, 멀티채널 컨피규레이션의 값이 “11100000”이면, 채널 컨피규레이션7(ChannelConfiguration 7)인 오디오 채널 세트(멀티채널 서브그룹)가 존재하고, 이 오디오 채널 세트는 「65:FL」, 「66:FR」, 「67:FC」, 「68: LFE」, 「69:LS」, 「70:RS」, 「109:FLmid」, 「110:FRmid」의 오디오 채널로 구성되고, 이 순서로 송신되는 것을 나타낸다.
여기서, 65, 66, 67, 68, 69, 70, 109, 110 등의 번호는, 제2 방법에서 사용되는 멀티채널 맵으로 결정되는 오디오 채널 특유의 번호이며, 각각 특정한 스피커에 대응하고 있다. 예를 들어, 프론트 레프트 스피커는 65번, 프론트 라이트 스피커는 66번이다. 이 번호는 제3 방법에서도 사용된다. 이들 스피커 위치, 번호는 ITU-R BS.2094-1, ISO/IEC 23001-8을 바탕으로 IEC 62574에서 정해져 있지만, 거기에 한정되는 것은 아니며, 그 밖에 독자적으로 할당하는 채널이 있어도 된다. 또한, 멀티채널 컨피규레이션 값이 “00000000”인 경우에는, 제1 방법으로 지정된 오디오 채널 세트(멀티채널 서브그룹)는 존재하지 않는 것을 나타낸다.
도 13으로 되돌아가서, 제64 비트(bit 64)는 제65 비트로부터 제191 비트의 멀티채널 맵이 이용되어, 오디오 채널 세트(멀티채널 서브그룹)의 지정이 되어 있는지 여부를 나타낸다. 예를 들어, “0”는 지정되어 있지 않은 것을 나타내고, “1”는 지정되어 있는 것을 나타낸다. 제65 비트로부터 제191 비트의 멀티채널 맵에 있어서는, 비트 번호가 그대로 채널 특유의 번호에 대응하도록 되어 있다.
예를 들어, 제65 비트는 「65:FL」의 오디오 채널에 대응하고, 제2 방법으로 지정되는 오디오 채널 세트에, 이 「65:FL」의 오디오 채널을 포함하는 경우에는, 이 제65 비트에 1이 세워진다. 상세 설명은 생략하지만, 제2 방법으로 지정되는 오디오 채널 세트에 기타 오디오 채널을 포함하는 경우도, 마찬가지로 하여 행해진다.
제3 방법은, 연속되는 소정수의 프레임의 유저 데이터 비트를 사용하여, 멀티채널 서브그룹을 지정하는 방법이다. 이 제3 방법에서는, 임의의 오디오 채널을 조합한 오디오 채널 세트를 지정할 수 있고, 각 오디오 채널의 송신순도 임의로 설정할 수 있다.
제3 방법은, 유저 데이터 비트를 이용하여 멀티채널 컨피규레이션 정보를 패킷화하여 내장한다는 방법이다. 이 경우, 먼저 높이마다의 스피커수를 특정하는 패킷을 보낸다. 도 15는, 그 패킷의 일례를 나타내고 있다. 여기서, 높이의 종류는 「Overhead」, 「High」, 「Middle」, 「Bottom」, 「LFE」이다. 각각의 레이어에 스피커가 토탈 몇개 배치되어 있는지 규정한다. 이 구조를 패킷 내에서 반복함으로써 복수개의 멀티채널 서브그룹을 구성할 수 있다. 이어서, 멀티채널 그룹 내의 송신순에 대하여 몇번의 오디오 채널을 송신할지를 지정하는 패킷을 보낸다. 도 16은, 그 패킷의 일례를 나타내고 있다.
이 제3 방법은, 오디오 채널 세트(멀티채널 서브그룹)를 지정하는 방법으로서 가장 자유도가 높고, 특정한 오디오 채널을 특정한 순서로 송신하는 것이 가능하며, 또한 복수회 송신하는 것도 가능하다.
도 17은, 상술한 도 12에 나타내는 멀티채널 전송 포맷에 있어서의 프레임 구성의 일례에 있어서의, 멀티채널 그룹 1 내지 4의 지정 방법의 구체예를 나타내고 있다. 멀티채널 서브그룹 1은 제1 방법으로 지정된다. 이 경우, 채널 스테이터스의 제53 비트 내지 제60 비트의 「Multichannel configuration value」의 값이 “11000000”이 되고, 「65:FL」, 「66:FR」, 「67:FC」로 구성되는 오디오 채널 세트(멀티채널 서브그룹)의 존재가 나타난다(도 14 참조).
또한, 멀티채널 서브그룹 2는 제2 방법으로 지정된다. 이 경우, 채널 스테이터스의 제64 비트가 “1”이 되어 멀티채널 맵 이용의 제2 방법으로 지정되는 오디오 채널 세트(멀티채널 서브그룹)의 존재가 나타나고, 또한 제77 비트 및 제78 비트에 1이 세워지고, 이 오디오 채널 세트(멀티채널 서브그룹)은 「77:HFL」, 「78:HFR」의 오디오 채널이 이 순으로 포함된 구성인 것이 나타난다.
또한, 멀티채널 서브그룹 3, 4는 제3 방법으로 지정된다. 이 경우, 멀티채널 서브그룹 3에 대하여는, 높이마다의 스피커수를 특정하는 패킷(도 15 참조)에 오버헤드 스피커수가 1개로 구성되는 것이 나타나고, 몇번의 오디오 채널을 송신할지를 지정하는 패킷(도 16 참조)에서 「80:OhC」의 오디오 채널이 나타난다.
또한, 멀티채널 서브그룹 4에 대하여는, 높이마다의 스피커수를 특정하는 패킷(도 15 참조)에 보텀 스피커수가 2개로 구성되는 것이 나타나고, 몇번의 오디오 채널을 송신할지를 지정하는 패킷(도 16 참조)에서 「65:FL」, 「66:FR」의 오디오 채널이 나타난다.
이 실시 형태에 있어서는, 상술한 제1 내지 제3 방법으로 지정되는 멀티채널 서브그룹을 이용하여, 멀티채널 오디오 신호와 소정 채널수의 촉각 진동 신호를 동시에 전송한다. 또한, ISO/IEC 23001-8 2016에 현시점에서는 촉각 진동 신호를 포함하는 세트는 정의되어 있지 않다. 그러나, 장래 정의된다면, 제1 방법에서 멀티채널 오디오 신호와 소정 채널수의 촉각 진동 신호를 동시에 전송하기 위한 멀티채널 서브그룹을 지정하는 것도 가능하다.
또한, 제2 방법에서 멀티채널 오디오 신호와 소정 채널수의 촉각 진동 신호를 동시에 전송하는 멀티채널 서브그룹을 지정하기 위해서, 채널 스테이터스의 멀티채널 맵을 구성하는 제65 비트 내지 제191 비트 중, 미정의된 비트에, 촉각 진동 신호를 새롭게 정의하는 것을 생각할 수 있다. 이 실시 형태에 있어서는, 예를 들어 도 13에 나타내는 바와 같이, 제120 내지 122비트에 촉각 진동 신호가 정의된다.
멀티미디어 신호의 일종인 촉각 진동 신호는 인체에 설치한 액추에이터를 진동시키는 용도의 신호이다. 이 촉각 진동 신호는 비압축 오디오 신호 전송로를 이용하여 전송할 수는 있지만, 신호는 저역에 치우쳐 있어, 경우에 따라서는 압력을 나타내기 위해 직류 성분을 포함하는 경우가 있다.
이 촉각 진동 신호를 구래의 오디오 앰프에서 재생하면, 정확하게 재생할 수 없거나, 증폭 소자를 열에 의한 대미지 등으로 파손시키거나, 스피커가 연결되었을 경우, 최악 보이스 코일이 단선되거나 한다. 이 문제를 회피하기 위해서, 촉각 진동 신호에 독자적인 채널 번호를 할당하여 오디오 채널 신호와 구별한다. 예를 들어, 오른팔 진동 신호를 120번이라 하고, 멀티채널 맵의 제120 비트에 정의한다. 또한, 예를 들어 왼팔 진동 신호를 121번이라 하고, 멀티채널 맵의 제121 비트에 정의한다. 또한, 양쪽 발 진동 신호를 122번이라 하고, 멀티채널 맵의 제122 비트에 정의한다. 또한, 촉각 진동 신호는 이들에 한정되는 것은 아니고, 이들 촉각 진동 신호에 대해서도, 독자의 번호를 할당하여 오디오 채널 신호와 구별하면 된다.
또한, 상술한 제2 방법에서 정한 촉각 진동 신호의 채널 번호를 이용하여, 제3 방법에서, 멀티채널 오디오 신호와 소정 채널수의 촉각 진동 신호를 동시에 전송하기 위한 멀티채널 서브그룹을 지정하는 것도 가능하다. 혹은, 이 제3 방법 독자적으로 촉각 진동 신호의 채널 번호를 정하여 독자적으로 운용하는 것도 가능하다.
또한, 멀티채널 오디오 신호와 소정 채널수의 촉각 진동 신호를 동시에 전송하기 위한 멀티채널 서브그룹의 지정은 블록(192 프레임)마다 변경하는 것이 가능하고, 시분할로 함으로써, 멀티채널 서브그룹에 할당된 촉각 진동 신호의 채널수 이상의 채널의 촉각 진동 신호를, 전송하는 것도 가능해진다. 예를 들어, 유저의 전신에 다수의 진동 유닛을 붙여, 아래에서부터 1초마다 위로 진동시켜 가는 경우 등을 생각할 수 있다.
도 18은, 멀티채널 오디오 신호와 소정 채널수의 촉각 진동 신호를 동시에 전송하는 경우의 멀티채널 전송 포맷의 프레임 구성의 일례를 나타내고 있다. 이 도 18의 프레임 구성은, 상세 설명은 생략하지만, 전체적으로는 도 12의 프레임 구성과 마찬가지이다.
이 예에 있어서는, 8 서브 프레임, 즉 멀티채널 오더 1 내지 8로 구성되어 있는 멀티채널 그룹 내에, 멀티채널 서브그룹 1에 하나의 멀티채널 서브그룹이 형성되어 있다. 그리고, 이 예는, 그 하나의 멀티채널 서브그룹에 의해, 도 19에 나타내는 바와 같은, 5.1채널 오디오와 2채널의 촉각 진동 신호를 전송하는 예이다.
멀티채널 서브그룹 1을 구성하는 멀티채널 오더 1 내지 8에, 멀티채널 오디오 신호와 소정 채널수의 촉각 진동 신호의 각 채널의 신호(채널 번호 65, 66, 67, 68, 69, 78, 120, 121의 신호)가 순서대로 배치되어 있다.
여기서, 채널 번호 65 내지 70은 멀티채널 오디오 신호를 구성하는 각 오디오 채널을 나타내고, 「65」는 프론트 레프트(FL)를 나타내고, 「66」은 프론트 라이트(FR)를 나타내고, 「67」은 프론트 센터(FC)를 나타내고, 「68」은 LFE를 나타내고, 「69」는 레프트 서라운드를 나타내고, 「70」은 라이트 서라운드를 나타낸다. 또한, 채널 번호 120, 121은 촉각 진동 신호의 각 채널을 나타내고, 「120」은 레프트 핸드(오른팔 진동 신호)를 나타내고, 「121」은 라이트 핸드(왼팔 신호 신호)를 나타낸다.
또한, 도 18의 프레임 구성에서는, 멀티채널 그룹 내에 하나의 멀티채널 서브그룹이 형성되는 예를 나타내었지만, 멀티채널 그룹 내에 복수의 멀티채널 서브그룹을 형성하는 것도 생각할 수 있고, 또한 모두에 멀티채널 오디오 신호와 소정 채널수의 촉각 진동 신호의 각 채널의 신호가 순서대로 배치되는 경우뿐만 아니라, 일부의 멀티채널 서브그룹에, 멀티채널 오디오 신호의 각 채널의 신호만이 배치되는 경우, 혹은 소정 채널수의 촉각 진동 신호의 각 채널의 신호만이 배치되는 경우도 생각할 수 있다.
멀티채널 오디오 신호와 소정 채널수의 촉각 진동 신호의 각 채널의 신호를 순서대로 배치하는 멀티채널 서브그룹의 지정도, 상술한 제1 내지 제3 방법에 의해 행할 수 있다. 이 경우의 지정 정보는 멀티채널 오디오 신호 및 소정 채널수의 촉각 진동 신호의 구성 정보가 된다. 이 구성 정보에는, 촉각 진동 신호를 오디오 신호와 구별하기 위한 식별 정보가 포함된다. 또한, 이 식별 정보에는, 소정 채널수의 촉각 진동 신호의 각각이 대상으로 하는 진동 위치의 정보가 포함된다.
도 20은, 상술한 도 18에 나타내는 멀티채널 전송 포맷에 있어서의 프레임 구성의 일례에 있어서의, 멀티채널 서브그룹 1이 제2 방법으로 지정되는 경우에 대하여 나타내고 있다. 이 경우, 채널 스테이터스(도 13 참조)의 제64 비트가 “1”이 되어 멀티채널 맵 이용의 제2 방법으로 지정되는 멀티채널 서브그룹의 존재가 나타난다.
그리고, 채널 스테이터스의 제65 비트 내지 제70 비트 및 제120 비트 내지 제121 비트에 1이 세워지고, 이 멀티채널 서브그룹은, 「65:FL」, 「66:FR」, 「67:FC」, 「68: LFE」, 「69:LS」, 「70:RS」의 오디오 채널이 이 순으로 포함되고, 또한 「120: 레프트 핸드」, 「121: 레프트 핸드」의 촉각 진동 신호의 채널이 이 순으로 포함된 구성인 것이 나타난다.
상술한 바와 같이, 도 1에 나타내는 AV 시스템(10)에 있어서는, 소정 채널수의 오디오 신호와 소정 채널수의 촉각 진동 신호를 포함하는, 192 프레임을 포함하는 블록마다의 신호를, 텔레비전 수신기(100)로부터 오디오 앰프(200)에, HDMI 케이블(300)을 통해 송신하는 것이다. 그 때문에, 텔레비전 수신기(100)로부터 오디오 앰프(200)에, 촉각 진동 신호를 오디오 신호와 동기하여 양호하게 전송할 수 있다.
또한, 도 1에 나타내는 AV 시스템(10)에 있어서는, 블록을 구성하는 192 프레임을 소정수의 서브 프레임을 포함하는 멀티채널 그룹의 반복으로 하고, 그 멀티채널 그룹 내에 형성된, 채널 스테이터스의 소정 비트 영역 혹은 연속되는 소정수의 유저 데이터 비트로 지정된 구성의 멀티채널 서브그룹에, 멀티채널 오디오 신호(소정 채널수의 오디오 신호)와 소정 채널수의 촉각 진동 신호의 각 채널의 신호를 순서대로 배치하여 송신하는 것이다. 그 때문에, 수신측인 오디오 앰프(200)에서는, 소정 채널수의 오디오 신호와 소정 채널수의 촉각 진동 신호를, 채널 스테이터스의 소정 비트 영역 혹은 연속되는 소정수의 유저 데이터 비트로부터 취득되는 구성 정보에 기초하여, 간단하면서 적절하게 취득할 수 있다.
또한, 도 1에 나타내는 AV 시스템(10)에 있어서는, 상술한 구성 정보는 동시에 송신되는 멀티채널 오디오 신호와 소정 채널수의 촉각 진동 신호를 구별할 수 있는 식별 정보를 포함하는 것이다. 그 때문에, 수신측인 오디오 앰프(200)에서는, 동시에 송신되는 멀티채널 오디오 신호와 소정 채널수의 촉각 진동 신호로부터, 각각의 신호를 구별하여 취득할 수 있고, 따라서 예를 들어 촉각 진동 신호가 잘못해서 오디오 신호의 재생계에 공급되는 등의 오동작을 방지할 수 있다.
또한, 도 1에 나타내는 AV 시스템(10)에 있어서는, 복수 채널의 촉각 진동 신호를 송신하는 경우, 상술한 구성 정보는 각각의 채널의 촉각 진동 신호가 대상으로 하는 진동 위치의 정보를 포함하는 것이다. 그 때문에, 수신측인 오디오 앰프(200)에서는, 각각의 채널의 촉각 진동 신호에 의해 대상으로 하는 진동 위치의 진동 디바이스를 적절하게 진동시키는 것이 가능해진다.
또한, 본 명세서에 기재된 효과는 어디까지나 예시이며 한정되는 것은 아니며, 또한 부가적인 효과가 있어도 된다.
<2. 변형예>
또한, 상술 실시 형태에 있어서는, 텔레비전 수신기(100)가 오디오 앰프(200)에 송신하는 촉각 진동 신호는 방송 콘텐츠, 넷 콘텐츠 혹은 재생 콘텐츠에 포함되어 있는 것이었다. 그러나, 이들 콘텐츠에 촉각 진동 신호가 포함되어 있지 않은 경우, 오디오 신호에 관련되는 미디어 신호, 예를 들어 콘텐츠에 포함되는 오디오 신호나 비디오 신호를 분석하여 촉각 진동 신호를 생성하여 이용하는 것도 생각할 수 있다.
도 21은, 그 경우에 있어서의 AV 시스템(10A)의 구성예를 나타내고 있다. 이 도 21에 있어서, 도 1과 대응하는 부분에는, 동일 부호를 붙이고, 적절히 그 상세 설명은 생략한다. 텔레비전 수신기(100)는 촉각 진동 신호 생성부(111)를 더 갖는 것으로 되어 있다. 이 촉각 진동 신호 생성부(111)는, 콘텐츠 재생 회로(108)로부터 입력되는 오디오 신호나 비디오 신호를 분석하여 촉각 진동 신호를 생성하여 SPDIF 송신 회로(104)에 공급한다. 텔레비전 수신기(100) 그 밖에는, 도 1의 AV 시스템(10)의 텔레비전 수신기(100)와 마찬가지로 구성된다.
또한, 콘텐츠에 예를 들어 MIDI(Musical Instrument Digital Interface)와 같은 진동 지시 신호가 포함되는 경우, 촉각 진동 신호 생성부(111)는 그 진동 지시 신호에 기초하여 촉각 진동 신호를 생성하는 것도 생각할 수 있다.
또한, 상술하지 않지만, 촉각 진동 신호 자체가 다차원인 경우도 생각할 수 있다. 예를 들어, 촉각 진동 신호를 구성하는 X축, Y축, Z축의 진동 데이터(도 22 참조)를 전송하는 경우, 각각 8비트의 데이터로 디지털화하고, 도 23에 나타내는 바와 같이, IEC 60958-1의 서브 프레임 내의 24비트 슬롯에 할당함으로써 전송할 수 있다. 서브 프레임 중, 리니어 PCM에서는 비트 4로부터 비트 27의 합계 24비트가 오디오 채널 전송에 사용되고 있지만, 8비트씩 3 분할하여 사용된다. 또한, 예를 들어 Z축은 피부에 수직이며, X축, Y축은 피부에 평행하게 되어 있다. 또한, 비트 할당은 가중치 부여가 가능하며, Z축에 10비트, X축, Y축에 7비트와 같이 불균일하게 할당되어도 된다.
도 23에 나타내는 바와 같이 24비트 슬롯을 3 분할하여 사용하는 경우, Z축밖에 구동하지 않는 디바이스에서도, 이 24비트 데이터라면, 하위를 노이즈로 간주하여 1차원의 경우와 호환성을 가지고 드라이브할 수 있다. 또한, 이 경우, 손가락 하나하나에 채널을 할당하거나, 더욱 미세한 접촉 평면을 구성하도록 분할하거나 할 수 있다.
또한, 상술하지 않지만, 도 24에 나타내는 바와 같이, 유저를 덮는 입방체의 공간을 생각하고, 이 입방체의 a 내지 h의 각 정점에 있어서의 촉각 진동 신호를 대표로서 송신하고, 이 입방체의 공간에 포함되는 실제의 구동점에 있어서의 촉각 진동 신호를 각 정점에 있어서의 촉각 진동 신호로부터 선형 보완 등에 의해 구하는 것도 생각할 수 있다. 이 경우의 각 정점에 있어서의 촉각 진동 신호의 신호명으로서는, 전방 우측 상단 코너, 후방 하단 좌측 코너 등을 생각할 수 있다.
또한, 상술하지 않지만, 도 12에 나타내는 멀티채널 전송 포맷의 신호 기록 재생에 대응하고 있는 기기라면, 도 18에 나타내는 멀티채널 오디오 신호 및 소정 채널수의 촉각 진동 신호를 포함하는 멀티채널 전송 포맷의 신호도 마찬가지로 기록 재생할 수 있다.
또한, 상술 실시 형태에 있어서는, 촉각 진동 신호를 오디오 신호와 동시에 전송하는 예를 나타내었다. 마찬가지로, 발화 대응 로보틱스 머신 컨트롤 신호, 혹은 오디오 마이크 신호에 각종 센서 신호를 팩하여 동시에 전송하는 경우에도, 본 기술을 적용할 수 있다. 또한, 차의 엔진 소리와 온도 센서 데이터 등의 일괄 동기 전송에도, 본 기술을 적용할 수 있다.
또한, 상술 실시 형태에 있어서는, IEC 60958 전송로로서 HDMI ARC를 이용하는 예를 나타내었지만, IEC 60958 전송로로서, 동축 케이블이나 광케이블을 이용하는 예도 생각할 수 있다. 또한, IEC 60958 전송로로서, HDMI 전송로를 이용하는 예도 생각할 수 있다. 이 경우, SPDIF 신호(IEC 60958 신호)는 오디오 샘플 패킷(audio sample packet)에 매핑되어, 비디오 전송과 동일한 순방향으로 전송된다. 마찬가지로, IEC 60958 전송로로서, IEC 61883-6 전송로, MHL 전송로, 디스플레이 포트 전송로(DP 전송로) 등을 이용하는 예도 생각할 수 있다. 이들 경우도, SPDIF 신호(IEC 60958 신호)는 오디오 샘플 패킷(audio sample packet)에 매핑되어, 비디오 전송과 동일한 순방향으로 전송된다.
또한, 첨부 도면을 참조하면서 본 개시의 적합한 실시 형태에 대하여 상세하게 설명하였지만, 본 개시의 기술적 범위는 이러한 예에 한정되지는 않는다. 본 개시의 기술 분야에 있어서의 통상의 지식을 갖는 사람이면, 특허 청구 범위에 기재된 기술적 사상의 범주 내에서, 각종 변경예 또는 수정예에 상도할 수 있는 것은 명확하고, 이들에 대해서도, 당연히 본 개시의 기술적 범위에 속하는 것으로 이해된다.
또한, 기술은 이하와 같은 구성도 취할 수 있다.
(1) 복수 프레임을 포함하는 블록마다의 전송 신호를 순차로 소정 전송로를 통해 수신측에 송신하는 송신부를 구비하고,
상기 전송 신호는, 소정 채널수의 오디오 신호와 소정 채널수의 촉각 진동 신호를 포함하는
송신 장치.
(2) 상기 전송 신호에, 상기 소정 채널수의 오디오 신호와 상기 소정 채널수의 촉각 진동 신호의 구성 정보를 부가하는 정보 부가부를 더 구비하는
상기 (1)에 기재된 송신 장치.
(3) 상기 구성 정보는, 상기 촉각 진동 신호를 상기 오디오 신호와 구별하기 위한 식별 정보를 포함하는
상기 (2)에 기재된 송신 장치.
(4) 상기 식별 정보는, 상기 소정 채널수의 촉각 진동 신호의 각각이 대상으로 하는 진동 위치의 정보를 포함하는
상기 (3)에 기재된 송신 장치.
(5) 상기 정보 부가부는, 상기 블록마다 구성되는 채널 스테이터스의 소정 비트 영역을 사용하여 상기 구성 정보를 부가하는
상기 (2) 내지 (4) 중 어느 것에 기재된 송신 장치.
(6) 상기 정보 부가부는, 연속되는 소정수의 프레임의 유저 데이터 비트를 사용하여 상기 구성 정보를 부가하는
상기 (2) 내지 (5) 중 어느 것에 기재된 송신 장치.
(7) 상기 복수 프레임은, 소정수의 프레임을 포함하는 멀티채널 그룹의 반복으로 구성되고,
상기 송신부는, 상기 소정 채널수의 오디오 신호 및 상기 소정 채널수의 촉각 진동 신호를, 상기 멀티채널 그룹마다, 상기 소정수의 프레임의 전부 또는 일부에 채널별로 시분할적으로 배치하여 송신하는
상기 (1) 내지 (6) 중 어느 것에 기재된 송신 장치.
(8) 상기 오디오 신호에 관련되는 미디어 신호에 기초하여 상기 촉각 진동 신호를 생성하는 처리부를 더 구비하는
상기 (1) 내지 (7) 중 어느 한 항에 기재된 송신 장치.
(9) 상기 소정 전송로는 동축 케이블, 광케이블, 이더넷(IEC 61883-6) 케이블, HDMI 케이블, MHL 케이블 또는 디스플레이 포토케이블인
상기 (1) 내지 (8) 중 어느 것에 기재된 송신 장치.
(10) 복수 프레임을 포함하는 블록마다의 전송 신호를 순차로 소정 전송로를 통해 수신측에 송신하는 수순을 갖고,
상기 전송 신호는, 소정 채널수의 오디오 신호와 소정 채널수의 촉각 진동 신호를 포함하는
송신 방법.
(11) 복수 프레임을 포함하는 블록마다의 전송 신호를 송신측으로부터 순차로 소정 전송로를 통해 수신하는 수신부를 구비하고,
상기 전송 신호는, 소정 채널수의 오디오 신호와 소정 채널수의 촉각 진동 신호를 포함하는
수신 장치.
(12) 상기 전송 신호를 처리하여 상기 소정 채널수의 오디오 신호와 상기 소정 채널수의 촉각 진동 신호를 출력하는 처리부를 더 구비하는
상기 (11)에 기재된 수신 장치.
(13) 상기 전송 신호는 상기 소정 채널수의 오디오 신호와 상기 소정 채널수의 촉각 진동 신호의 구성 정보를 포함하고,
상기 처리부는, 상기 구성 정보에 기초하여 상기 전송 신호를 처리하여, 상기 소정 채널수의 오디오 신호와 상기 소정 채널수의 촉각 진동 신호를 출력하는
상기 (12)에 기재된 수신 장치.
(14) 상기 구성 정보는, 상기 블록마다 구성되는 채널 스테이터스의 소정 비트 영역을 사용하여 부가되어 있는
상기 (13)에 기재된 수신 장치.
(15) 상기 구성 정보는, 연속되는 소정수의 프레임의 유저 데이터 비트를 사용하여 부가되어 있는
상기 (13) 또는 (14)에 기재된 수신 장치.
(16) 상기 복수 프레임은, 소정수의 프레임을 포함하는 멀티채널 그룹의 반복으로 구성되고,
상기 소정 채널수의 오디오 신호 및 상기 소정 채널수의 촉각 진동 신호는, 상기 멀티채널 그룹마다, 상기 소정수의 프레임의 전부 또는 일부에 채널별로 시분할적으로 배치되어 있는
상기 (11) 내지 (15) 중 어느 것에 기재된 수신 장치.
(17) 상기 소정 전송로는 동축 케이블, 광케이블, 이더넷(IEC 61883-6) 케이블, HDMI 케이블, MHL 케이블 또는 디스플레이 포토케이블인
상기 (11) 내지 (16) 중 어느 것에 기재된 수신 장치.
(18) 복수 프레임을 포함하는 블록마다의 전송 신호를 송신측으로부터 순차로 소정 전송로를 통해 수신하는 수순을 갖고,
상기 전송 신호는, 소정 채널수의 오디오 신호와 소정 채널수의 촉각 진동 신호를 포함하는
수신 방법.
10, 10A…AV 시스템
100…텔레비전 수신기
101…HDMI 단자
102…HDMI 수신부
103…고속 버스 인터페이스
104…SPDIF 송신 회로
105…시스템 컨트롤러
107…디지털 방송 수신 회로
108…콘텐츠 재생 회로
109…표시부
110…이더넷 인터페이스
111…촉각 진동 신호 생성부
121…수신 안테나
122…BD 플레이어
123…인터넷
200…오디오 앰프
201…HDMI 단자
202…HDMI 송신부
203…고속 버스 인터페이스
204…SPDIF 수신 회로
205…시스템 컨트롤러
208…오디오 앰프
209…진동 증폭기
210…이더넷 인터페이스
250…스피커 시스템
260…진동 시스템
300…HDMI 케이블

Claims (18)

  1. 복수 프레임을 포함하는 블록마다의 전송 신호를 순차로 소정 전송로를 통해 수신측에 송신하는 송신부를 구비하고,
    상기 전송 신호는, 소정 채널수의 오디오 신호와 소정 채널수의 촉각 진동 신호를 포함하는
    송신 장치.
  2. 제1항에 있어서, 상기 전송 신호에, 상기 소정 채널수의 오디오 신호와 상기 소정 채널수의 촉각 진동 신호의 구성 정보를 부가하는 정보 부가부를 더 구비하는
    송신 장치.
  3. 제2항에 있어서, 상기 구성 정보는, 상기 촉각 진동 신호를 상기 오디오 신호와 구별하기 위한 식별 정보를 포함하는
    송신 장치.
  4. 제3항에 있어서, 상기 식별 정보는, 상기 소정 채널수의 촉각 진동 신호의 각각이 대상으로 하는 진동 위치의 정보를 포함하는
    송신 장치.
  5. 제2항에 있어서, 상기 정보 부가부는, 상기 블록마다 구성되는 채널 스테이터스의 소정 비트 영역을 사용하여 상기 구성 정보를 부가하는
    송신 장치.
  6. 제2항에 있어서, 상기 정보 부가부는, 연속되는 소정수의 프레임의 유저 데이터 비트를 사용하여 상기 구성 정보를 부가하는
    송신 장치.
  7. 제1항에 있어서, 상기 복수 프레임은, 소정수의 프레임을 포함하는 멀티채널 그룹의 반복으로 구성되고,
    상기 송신부는, 상기 소정 채널수의 오디오 신호 및 상기 소정 채널수의 촉각 진동 신호를, 상기 멀티채널 그룹마다, 상기 소정수의 프레임의 전부 또는 일부에 채널별로 시분할적으로 배치하여 송신하는
    송신 장치.
  8. 제1항에 있어서, 상기 오디오 신호에 관련되는 미디어 신호에 기초하여 상기 촉각 진동 신호를 생성하는 처리부를 더 구비하는
    송신 장치.
  9. 제1항에 있어서, 상기 소정 전송로는 동축 케이블, 광케이블, 이더넷(IEC 61883-6) 케이블, HDMI 케이블, MHL 케이블 또는 디스플레이 포토케이블인
    송신 장치.
  10. 복수 프레임을 포함하는 블록마다의 전송 신호를 순차로 소정 전송로를 통해 수신측에 송신하는 수순을 갖고,
    상기 전송 신호는, 소정 채널수의 오디오 신호와 소정 채널수의 촉각 진동 신호를 포함하는
    송신 방법.
  11. 복수 프레임을 포함하는 블록마다의 전송 신호를 송신측으로부터 순차로 소정 전송로를 통해 수신하는 수신부를 구비하고,
    상기 전송 신호는, 소정 채널수의 오디오 신호와 소정 채널수의 촉각 진동 신호를 포함하는
    수신 장치.
  12. 제11항에 있어서, 상기 전송 신호를 처리하여 상기 소정 채널수의 오디오 신호와 상기 소정 채널수의 촉각 진동 신호를 출력하는 처리부를 더 구비하는
    수신 장치.
  13. 제12항에 있어서, 상기 전송 신호는 상기 소정 채널수의 오디오 신호와 상기 소정 채널수의 촉각 진동 신호의 구성 정보를 포함하고,
    상기 처리부는, 상기 구성 정보에 기초하여 상기 전송 신호를 처리하여, 상기 소정 채널수의 오디오 신호와 상기 소정 채널수의 촉각 진동 신호를 출력하는
    수신 장치.
  14. 제13항에 있어서, 상기 구성 정보는, 상기 블록마다 구성되는 채널 스테이터스의 소정 비트 영역을 사용하여 부가되어 있는
    수신 장치.
  15. 제13항에 있어서, 상기 구성 정보는, 연속되는 소정수의 프레임의 유저 데이터 비트를 사용하여 부가되어 있는
    수신 장치.
  16. 제11항에 있어서, 상기 복수 프레임은, 소정수의 프레임을 포함하는 멀티채널 그룹의 반복으로 구성되고,
    상기 소정 채널수의 오디오 신호 및 상기 소정 채널수의 촉각 진동 신호는, 상기 멀티채널 그룹마다, 상기 소정수의 프레임의 전부 또는 일부에 채널별로 시분할적으로 배치되어 있는
    수신 장치.
  17. 제11항에 있어서, 상기 소정 전송로는 동축 케이블, 광케이블, 이더넷(IEC 61883-6) 케이블, HDMI 케이블, MHL 케이블 또는 디스플레이 포토케이블인
    수신 장치.
  18. 복수 프레임을 포함하는 블록마다의 전송 신호를 송신측으로부터 순차로 소정 전송로를 통해 수신하는 수순을 갖고,
    상기 전송 신호는, 소정 채널수의 오디오 신호와 소정 채널수의 촉각 진동 신호를 포함하는
    수신 방법.
KR1020217003824A 2018-08-30 2019-08-09 송신 장치, 송신 방법, 수신 장치 및 수신 방법 KR20210049786A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JPJP-P-2018-162146 2018-08-30
JP2018162146 2018-08-30
PCT/JP2019/031547 WO2020045044A1 (ja) 2018-08-30 2019-08-09 送信装置、送信方法、受信装置および受信方法

Publications (1)

Publication Number Publication Date
KR20210049786A true KR20210049786A (ko) 2021-05-06

Family

ID=69644915

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020217003824A KR20210049786A (ko) 2018-08-30 2019-08-09 송신 장치, 송신 방법, 수신 장치 및 수신 방법

Country Status (7)

Country Link
US (1) US11991473B2 (ko)
EP (1) EP3833039A1 (ko)
JP (1) JP7439758B2 (ko)
KR (1) KR20210049786A (ko)
CN (1) CN112585982B (ko)
TW (1) TWI802739B (ko)
WO (1) WO2020045044A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023008605A1 (ko) * 2021-07-28 2023-02-02 엘지전자 주식회사 영상표시장치
US12003886B2 (en) 2018-12-26 2024-06-04 Sony Group Corporation Transmission device, transmission method, reception device, and reception method

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018060313A (ja) 2016-10-04 2018-04-12 ソニー株式会社 受信装置および方法、送信装置および方法、並びにプログラム

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4022489B2 (ja) * 2003-03-10 2007-12-19 独立行政法人科学技術振興機構 振動通知装置
US7088224B2 (en) 2003-03-11 2006-08-08 National Institute Of Advanced Industrial Science And Technology Audio information transmitting apparatus and the method thereof, and a vibrator holding structure
US7624021B2 (en) 2004-07-02 2009-11-24 Apple Inc. Universal container for audio data
US8700791B2 (en) * 2005-10-19 2014-04-15 Immersion Corporation Synchronization of haptic effect data in a media transport stream
US9019087B2 (en) * 2007-10-16 2015-04-28 Immersion Corporation Synchronization of haptic effect data in a media stream
JP2011124925A (ja) * 2009-12-14 2011-06-23 Sony Corp 出力制御装置、出力制御方法、プログラム、及び出力制御システム
US10013857B2 (en) 2011-12-21 2018-07-03 Qualcomm Incorporated Using haptic technologies to provide enhanced media experiences
JP5390667B2 (ja) * 2012-06-11 2014-01-15 株式会社東芝 映像送信機器及び映像受信機器
WO2014055329A1 (en) * 2012-10-01 2014-04-10 Internet Services, Llc System and method for synchronization of haptic data and media data
US9997032B2 (en) * 2013-04-09 2018-06-12 Immersion Corporation Offline haptic conversion system
US9164587B2 (en) * 2013-11-14 2015-10-20 Immersion Corporation Haptic spatialization system
US9946348B2 (en) * 2014-03-21 2018-04-17 Immersion Corporation Automatic tuning of haptic effects
US9996156B2 (en) 2014-12-23 2018-06-12 Immersion Corporation Feedback reduction for a user input element associated with a haptic output device

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018060313A (ja) 2016-10-04 2018-04-12 ソニー株式会社 受信装置および方法、送信装置および方法、並びにプログラム

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US12003886B2 (en) 2018-12-26 2024-06-04 Sony Group Corporation Transmission device, transmission method, reception device, and reception method
WO2023008605A1 (ko) * 2021-07-28 2023-02-02 엘지전자 주식회사 영상표시장치

Also Published As

Publication number Publication date
EP3833039A4 (en) 2021-06-09
WO2020045044A1 (ja) 2020-03-05
JP7439758B2 (ja) 2024-02-28
US20210297627A1 (en) 2021-09-23
CN112585982A (zh) 2021-03-30
TW202015375A (zh) 2020-04-16
CN112585982B (zh) 2024-04-16
JPWO2020045044A1 (ja) 2021-08-12
US11991473B2 (en) 2024-05-21
EP3833039A1 (en) 2021-06-09
TWI802739B (zh) 2023-05-21

Similar Documents

Publication Publication Date Title
JP2009033650A (ja) データ送受信システム、データ中継装置、データ受信装置、データ中継方法、データ受信方法
US12003886B2 (en) Transmission device, transmission method, reception device, and reception method
JP4785989B2 (ja) 映像音声送信装置および映像音声受信装置
JP7439758B2 (ja) 送信装置、送信方法、受信装置および受信方法
JP2017516329A (ja) Ｈｄｍｉインタフェースを介して補助データフレームを同期送信するためのトランスミッタ、レシーバ、システム及び信号
US20230004340A1 (en) Transmission apparatus, transmission method, reception apparatus, and reception method
JP7452526B2 (ja) 送信装置、送信方法、受信装置および受信方法
US12014709B2 (en) Transmission device, transmission method, reception device and reception method
US11942103B2 (en) Transmission apparatus, transmission method, reception apparatus, and reception method for transmitting and receiving an audio signal including a mixed signal simultaneously transmitted by mixing a compressed audio signal and a linear pulse code modulation signal
US20210242879A1 (en) Transmission apparatus, transmission method, reception apparatus, and reception method
WO2023189162A1 (ja) 送信装置、受信装置および送受信システム
JPWO2016052185A1 (ja) 送信装置、送信方法、受信装置および受信方法
JP4596085B2 (ja) インターフェース回路
JPWO2017077746A1 (ja) フレーム生成装置、フレーム生成方法、パケット分離装置、パケット分離方法、画像伝送システムおよび画像伝送方法