KR101398032B1 - 파노라마식 사운드 이미지를 생성하고 재생하는 방법과, 그러한 이미지를 재생하기 위한 장치 - Google Patents

파노라마식 사운드 이미지를 생성하고 재생하는 방법과, 그러한 이미지를 재생하기 위한 장치 Download PDF

Info

Publication number
KR101398032B1
KR101398032B1 KR1020097024315A KR20097024315A KR101398032B1 KR 101398032 B1 KR101398032 B1 KR 101398032B1 KR 1020097024315 A KR1020097024315 A KR 1020097024315A KR 20097024315 A KR20097024315 A KR 20097024315A KR 101398032 B1 KR101398032 B1 KR 101398032B1
Authority
KR
South Korea
Prior art keywords
sound
image
panoramic
images
content
Prior art date
Application number
KR1020097024315A
Other languages
English (en)
Other versions
KR20100017242A (ko
Inventor
루이 세발리에
리오넬 으와셀
쟝-로낭 비구루
Original Assignee
톰슨 라이센싱
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 톰슨 라이센싱 filed Critical 톰슨 라이센싱
Publication of KR20100017242A publication Critical patent/KR20100017242A/ko
Application granted granted Critical
Publication of KR101398032B1 publication Critical patent/KR101398032B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • G03B37/04—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe with cameras or projectors providing touching or overlapping fields of view
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B31/00—Associated working of cameras or projectors with sound-recording or sound-reproducing means
    • G03B31/06—Associated working of cameras or projectors with sound-recording or sound-reproducing means in which sound track is associated with successively-shown still pictures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8227—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

본 발명은 파노라마식 사운드 이미지를 생성하고 재생하는 방법에 관한 것이다. 처음에, 사운드 시퀀스들과 연관된 복수의 이미지가 이용 가능하고, 이들 이미지는 예컨대 사진 장치의 도움으로 획득되며, 이 사진 장치는 획득하는 순간에 주변 사운드를 기록한다. 그런 다음 주변 사운드는 필터링되어 정지된 성분만을 보유한다. 그 다음, 이미지들이 연결되어 하나의 소위 "파노라마식" 이미지를 형성하고, 각각의 사운드 시퀀스는 이러한 시퀀스와 연관된 이미지를 포함하는 파노라마식 이미지의 한 부분과 연관된다. 마지막으로, 파노라마식 이미지의 부분들을 디스플레이하기 위한 명령들이 도입된다. 이 명령은 또한 파노라마식 이미지의 적어도 하나의 디스플레이된 부분과 연관된 적어도 하나의 사운드 콘텐츠의 정지된 성분을 계속해서 재생하는 것을 가능하게 한다. 일 개선예에 따르면, 그 사운드 시퀀스는 새로운 명령이 도입될 때까지 영구적으로 재생된다. 본 발명은 또한 파노라마식 이미지와 사운드 시퀀스를 재생하는 것을 가능하게 하는 재생 장치에 관한 것이다.

Description

파노라마식 사운드 이미지를 생성하고 재생하는 방법과, 그러한 이미지를 재생하기 위한 장치{METHOD OF CREATING AND REPRODUCING A PANORAMIC SOUND IMAGE, AND APPARATUS FOR REPRODUCING SUCH AN IMAGE}
본 발명은 파노라마식 사운드 이미지를 생성하고 재생하는 방법과, 그러한 방법을 구현하기 위한 디바이스에 관한 것이다.
디지털 사진(photo) 디바이스들의 다수의 모델들이 현재 시판중이다. 이미지는 디바이스에서 CCD 또는 CMOS 센서로 투영되고, 디지털 데이터로 전환된 후 메모리에 저장된다. 디지털 기술을 사용하여, 사용자는 사진을 찍은 다음 바로 그것을 일반적으로 디바이스의 배면에 위치한 작은 스크린에서 볼 수 있다. 사용자는 디스플레이된 이미지의 품질을 검증하고, 사진을 이동할 수 있는 지체(support)에 기억시킴으로써 유지할지 또는 삭제할지를 판단한다.
일부 디바이스는 비디오 시퀀스를 기록하기에 충분히 빠른 CCD 또는 CMOS 센서들을 가진다. 그러므로 사용자는 인물들에 중심을 둔 움직이는 장면을 촬영할 수 있거나, 심지어 사용자 자신을 회전시킴으로써 파노라마식 애니메이션(animation) 을 기록할 수 있다. 이미지들을 빠르게 인코딩하기 위한 제한된 능력과 카메라의 메모리 용량으로 인해, 시퀀스의 이미지들은 움직이지 않는 이미지들보다 낮은 해상도를 가진다. 이들 디바이스는 또한 비디오 시퀀스를 기록하는 동안 가청 환경을 획득할 수 있도록 마이크(microphone)를 가진다. 비디오 시퀀스를 재생하는 동안, 이미지들과 동시에 녹음된 사운드가 들릴 수 있게 된다.
비디오 성분과 오디오 성분을 포함하는 시퀀스의 디지털 데이터는, 컴퓨터에 전송될 수 있거나 CD-ROM에 새겨질 수 있는 파일로 통합된다. 그러므로 오디오-비디오 시퀀스의 이미지들은 스크린에서 재생될 수 있고, 그 사운드는 스피커에 송신된다. 이러한 식으로, 사용자는 사용자의 카메라로 촬영한 것을 보고들을 수 있다. 기록시 취해진 이미지들의 낮은 해상도로 인해, 특히 이미지들이 큰 크기의 스크린에서 보여지거나 비디오 프로젝터(projector)를 사용하여 보여지는 경우 재생 품질이 우수하지 못하다.
KODAK사에 의해 출원되어, 2007년 4월 5일에 공개된 WO 2007/038198호는 마이크를 가지는 카메라를 설명한다. 작동 모드에 따르면, 사운드 시퀀스가 3초의 지속 시간 동안 이미지와 결합된다. "연결된 파노라마식 캡처 모드(stitched panoramic capture mode)"라는 작동 모드에서, 파노라마식 사진을 형성하기 위해 사진들이 끝과 끝을 접하여(end to end) 배치된다. 각 이미지에 대해 취해진 오디오 시퀀스들이 연관된 이미지들이 디스플레이되는 동안 재생된다. 파노라마식 이미지가 완전히 디스플레이되면, 영상 표시가 재생된 사운드 시퀀스의 식별 정보(identity)를 통지한다.
2002년 6월 20일에 공개된 US 2002/075295호는 2개의 마이크를 가지는 파노라마식 카메라를 설명하고, 이 카메라는 이미지와 2개의 마이크에 의해 수신된 사운드들을 기록하며, 사운드를 방향과 연관시킨다.
2002년 5월 30일에 공개된 US 2002/0063709호는, 파노라마식 이미지의 재생과, 하나 보다 많은 오디오 트랙을 기록하기 위한 시스템을 설명한다. 파노라마식 이미지가 재생될 때, 한 트랙에 기록된 사운드가 끊임없이 재생된다.
2003년 10월 16일에 공개된 US 2003/0193606호는 3차원 음향 산출물(acoustic yield)을 가지도록, 여러 마이크로부터 기록하는 확률을 설명하고 있다. 재생은 사용자가 선택한 각도에 따라 실행된다.
사운드와 이미지를 연관시키는 것을 가능하게 하는 이미지 표현 응용예들 또한 알려져 있다. 이 이미지들은 스크린에서 자동으로 또는 수동으로 스크롤링되고, 각각의 이미지 디스플레이에서 연관된 사운드가 재생된다. 하지만 이들 이미지는 수동으로 선택되고, 반드시 서로 링크되지는 않고, 결과적으로 그것들의 잇따른 재생은 항상 양호한 영상 효과를 획득하는 것은 아니다.
그러므로, 현재 디스플레이되도록 적응된 사운드 콘텐츠를 재생하면서 하나보다 많은 이미지로 이루어진 그래픽 애니메이션의 품질을 향상시킬 실제 필요성이 존재한다.
본 발명의 목적은 복수의 이미지의 순서가 정해진 목록을 정의하는 단계를 포함하는 파노라마식 사운드 이미지의 재생 방법으로서, 각 이미지는 사운드 콘텐츠와 연관되고, 또한
- 정지된 성분만을 보존하도록 각 이미지의 사운드 콘텐츠를 필터링하는 단계,
- "파노라마식(panoramic)"이라고 부르는 고유한 이미지를 생성하도록 정의된 순서로 이미지들을 연결하는 단계로서, 각 사운드 콘텐츠는 이 콘텐츠와 연관된 이미지를 포함하는 파노라마식 이미지의 부분과 연관되는, 연결 단계, 및
- 적어도 그렇게 생성된 파노라마식 이미지의 한 부분을 디스플레이하는 명령의 도입 단계로서, 이 명령은 또한 파노라마식 이미지의 적어도 디스플레이된 부분과 연관된 정지된 사운드 성분을 연속적으로 재생하는 단계를 유발시키는, 명령의 도입 단계를
포함하는 것을 특징으로 한다.
이러한 식으로, 그렇게 생성된 파노라마식 이미지의 한 부분이 디스플레이될 수 있고, 디스플레이된 부분에 적응된 오디오 콘텐츠가 재생된다. 사용자가 그 이미지의 부분의 수정을 가능하게 하는 명령을 도입할 때, 사용자는 더 이상 그 사운드 콘텐츠와의 연관을 수동으로 실행할 필요가 없다. 디스플레이될 때 사운드 시퀀스의 재생은 그 이미지의 시각화를 향상시킨다. 사운드 콘텐츠의 재생 단계는, 그 콘텐츠와 연관된 파노라마식 이미지가 디스플레이되는 동안 연속적으로 실행된다. 이러한 식으로, 사용자는 그 이미지의 동일한 부분에서 긴 시간 동안 머무를 수 있는데, 즉 사용자는 연관된 사운드 시퀀스를 연속적으로 듣는다.
일 개선예에 따르면, 구어를 나타내는 사운드들이 첫 번째 발생의 끝에서부터 필터링된다. 이러한 필터링은 사운드들을 정지된 상태로 유지하는 동안 실행되고, 이러한 식으로, 짧은 사운드는 감쇄되며, 몇몇 유리한 경우들에서는 삭제된다. 이러한 식으로, 사용자는 처음으로 말해진 것을 듣지만, 그 다음 배경 잡음만이 재생된다.
또 다른 일 개선예에 따르면, 연결 단계는 파노라마식 이미지의 한 부분을 정성들여 만드는 단계를 포함하고, 2개의 이미지 사이에 놓인 이 부분은, 영상 전이(visual transition)를 보여주도록 서로에 관해 위치한 2개의 이미지에 특정된 특징들을 가진다. 이러한 식으로, 디스플레이된 우측 부분의 좌측 면과 디스플레이된 좌측 부분의 우측 면이 병합되어 변하기 쉽고(fluid) 마음에 드는 전이를 사용자에게 제시한다. 또 다른 개선예에 따르면, 각 이미지의 데이터는 그러한 이미지들을 만들어내는 것 외의 디바이스에 다운로드된다. 이 디바이스는 사운드 연결 단계, 디스플레이 단계, 및 재생 단계를 실행한다. 이러한 식으로, 다운로드된 이미지들은 임의의 재생 디바이스에서 재생될 수 있다.
또 다른 개선예에 따르면, 파노라마식 이미지의 2개 부분이 디스플레이되면, 이들 2개 부분과 연관된 2개 사운드 콘텐츠가 혼합되고, 콘텐츠의 사운드 레벨은 연관된 부분의 디스플레이된 비율에 의존한다. 이러한 식으로, 2개의 시퀀스 사이의 재생은 디스플레이된 2개의 이미지 부분들 사이의 분포를 고려한다. 또 다른 개선예에 따르면, 파노라마식 이미지 부분들과 연관된 사운드 콘텐츠들은 입체 음향의(stereophonic) 사운드 콘텐츠들이고, 재생 단계는 연관된 파노라마식 이미지 부분의 좌측 부분 또는 우측 부분 상의 존재에 따라 사운드 콘텐츠의 좌측 사운드트랙 또는 우측 사운드트랙을 재생하는 것으로 이루어진다. 이러한 식으로, 2개의 시퀀스 사이의 재생은 디스플레이된 2개의 이미지 부분들의 스크린 상의 각각의 위치를 고려한다. 또 다른 개선예에 따르면, 이미지들은 카메라로 찍힌 사진들이고, 순서가 정해진 목록의 정의 단계는 상기 카메라로 찍은 사진들의 순서를 선택하는 것으로 이루어진다. 이러한 식으로, 사용자는 더 이상 이미지들을 개별적으로 선택하고 연결 순서를 정의할 필요가 없고, 카메라 자체가 그것들을 행한다.
본 발명의 목적은 또한 복수의 이미지와, 각각 이미지와 연관된 복수의 사운드 콘텐츠의 데이터의 기억 수단과, 이미지들의 순서가 정해진 목록 정의를 가능하게 하는 명령 도입 수단, 디스플레이 수단, 및 사운드 재생 수단을 포함하는 재생 디바이스로서,
정지된 성분만을 보존하도록 각 이미지의 사운드 콘텐츠를 필터링하는 수단과,
"파노라마식"이라고 부르는 고유한 이미지를 생성하도록 정의된 순서로 이미지들을 연결하는 수단으로서, 각 사운드 콘텐츠는 이 콘텐츠와 연관된 이미지를 포함하는 파노라마식 이미지의 부분과 연관되는, 연결 수단을 포함하고,
상기 명령 도입 수단은 상기 파노라마식 이미지의 한 부분의 디스플레이와, 상기 파노라마식 이미지의 적어도 디스플레이된 부분과 연관된 적어도 사운드 콘텐츠의 정지된 성분의 연속적인 재생을 유발하는 것을 특징으로 한다.
이제 첨부된 도면을 참조함으로써, 예로서 주어진 실시예들의 후속하는 상세한 설명의 범주 내에서, 본 발명의 다른 특징과 장점이 더 자세히 드러나게 된다.
도 1a와 도 1b는 본 발명의 일 실시예의 구현을 위한 카메라의 정면도와 배면도.
도 2는 본 발명의 방법의 구현을 위해 수행된 주요 단들의 흐름도의 일 예를 도시하는 도면.
도 3은 본 발명의 일 실시예에 따라 생성된 파노라마식 이미지를 포함하는 메모리 콘텐츠의 개략도.
도 4는 서로 독립적으로 취해진 이미지들과, 처음 이미지들의 융합(fusion)으로 생긴 파노라마식 이미지 사이에 존재하는 상관을 도시하는 도면.
도 5a, 도 5b, 및 도 5c는 사용자가 내비게이션 명령들을 도입할 때 재생된 사운드 콘텐츠들과 스크린 외관을 도시하는 도면들.
도 1a와 도 1b에 도시된 것처럼, 디지털 카메라(1)의 기능이 먼저 설명된다. 도 1a와 도 1b는 본 발명의 일 실시예에 따른 카메라의 정면도와 배면도를 보여준다. 먼저 본 발명의 구현을 가능하게 하는 주된 요소들을 열거한다.
외면상, 디지털 카메라(1)는 대물 렌즈(2), LCD 또는 OLED 기술의 스크린(3), 가능하게 이동 가능한 메모리 모듈(4), 및 설정과 사진 찍기를 위한 버튼들 을 포함한다. 버튼들은 카메라(1)가 스크린(3)이 CCD 센서들에 의해 검출된 이미지를 보이게 하는 "사진 찍기(shot taking)" 모드에 있거나 메모리 모듈(4)에서 기록된 이미지들이 스크린(3) 상에 디스플레이되는 기억된 콘텐츠의 재생 모드에 있도록 설정하는 것을 가능하게 한다. 일반적으로, 사진 디바이스(1)는 4개의 방향, 즉 위(up), 아래(down), 좌측(left), 우측(right)을 규정하는 내비게이션을 위한 버튼들을 가진다. 일부 모델들에 따르면, 명령들이 스크린상에 디스플레이된 아이콘들을 통해 액세스 가능하다. 아이콘이 강조되고 "OK" 키를 누름으로써 연관된 기능이 실행된다. 카메라(1)는 "파노라마식 사운드 포토"라고 부르는 그것의 사운드 환경과 함께 파노라마식 이미지의 기록을 가능하게 하는 것을 포함하는 다수의 사진 찍기 모드를 가진다. 사운드 환경의 기록은 카메라의 전면에 있는 마이크(6)를 사용하여 실행된다. 유리하게, 마이크는 예컨대 찍는 방향에서 사운드를 기록하는, 카메라에서 카디오이드(cardioid) 타입의 지향성을 지닌다. 이러한 식으로, 사진에서 찍힌 대상물로부터 오는 사운드만이 기록되고, 나중에 복원된다. 카메라(1)는 또한 옆면에 놓인 작은 스피커(7)를 가진다. 사용자가 사용자의 카메라가 콘텐츠 재생 모드에 있도록 설정하면, 비디오 문서(document)가 사운드 시퀀스와 연관되고, 이러한 사운드 시퀀스는 스피커(7)를 통해 재생된다.
카메라(1)는 또한 휴대용 컴퓨터로의 사운드와 영상 콘텐츠의 전송을 가능하게 하는 커넥터(8)를 포함한다. 통상적으로, 통신은 USB 링크를 통해 가능하게 된다. 사진들은 컴퓨터에 전송되는 파일들에 기록된다. 그러므로, 사용자는 사용자의 사진들을 큰 스크린에서 볼 수 있고, 컴퓨터에 연결된 스피커를 통해 사운드 콘텐 츠를 들을 수 있다.
본 발명의 구현예를 위한 디바이스의 일 예의 주된 성분들을 상세히 설명한 후, 이들 성분이 어떻게 협력하는지가 설명된다.
도 2의 흐름도는 본 발명의 일 실시예에 따른 방법의 구현예를 위한 주된 단계들의 진행을 설명한다. 이 단계들은 2개의 그룹으로 나누어지는데, 한 그룹은 파노라마식 사운드 이미지의 생성을 가능하게 하는 그룹이고, 나머지 한 그룹은 파노라마식 사운드 이미지의 재생을 가능하게 하는 그룹이다. 각 그룹의 단계들은 별도의 디바이스들에서 실행될 수 있다는 점이 이해될 것이다.
단계 2.1에서는, 사용자가 사용자의 카메라(1)를 시동하고, 대물 렌즈(2)가 그것의 구획으로부터 빠져나오며, 디바이스가 "사진 사운드(photo sound)" 모드에 있다면, 스크린이 대물 렌즈(2)에 의해 캡쳐된 이미지를 디스플레이한다. 시동 단계에서 이미 그렇게 되지 않았다면, 사용자는 버튼을 통해 작동 모드를 "사진 사운드"로 선택함으로써, 사용자의 디바이스를 구성한다. 이 작동 모드에서는, 디바이스(1)가 셔터 버튼을 처음 누르는 것을 기다린다. 사운드 사진을 찍을 때, 카메라(1)는 마이크(6)를 사용하여 주변 사운드 시퀀스를 기록한다(단계 2.2). 유리하게, 사운드 시퀀스의 기록 지속 시간은 초기화 메뉴를 통해 설정될 수 있다. 사운드는 디지털 포캣으로 전환되고, 비디오 데이터와 연관되는 데이터 패킷을 구성하여 전체가 이미지 파일을 구성하게 된다. 그런 다음, 사용자는 다른 사진들을 찍고, 이들 사진은 카메라의 메모리(4)에 기억되는 많은 이미지 파일들을 구성한다.
간단한 일 실시예에 따르면, 단계 2.3에서, 사용자 자신은 파노라마식 사운 드 이미지의 실현을 가능하게 하는 사진 파일들을 선택한다. 이러한 선택은 데이터 구성 메뉴를 사용하여 카메라(1)의 레벨에서, 또는 이미지 파일들이 다운로드된 컴퓨터의 레벨에서 이루어질 수 있다. 첫 번째 경우, 사용자는 "파노라마식 이미지의 조립(assembly of a panoramic image)"이라는 옵션을 활성화하고 기억된 이미지들 전부가 미리보기의 형태로 나타난다. 사용자는 결정된 순서대로 제 1 이미지를 선택한 다음 제 2 이미지를 선택하는 등의 식으로 마지막까지 선택한다. 이미지들은, 예컨대 제 1 이미지의 좌측 면이 그 다음 이미지의 우측 면과 접촉하는 식으로, 파노라마식 이미지를 형성하기 위해 서로 나란히 연결된다. 이미지들의 연결을 위한 순서의 전개에 대한 일 변형예는 "파노라마식 이미지"라고 부르는 특정 모드를 카메라(1)에서 구현하는 것으로 이루어진다. 카메라가 이 모드에 있게 되면, 사진들이 찍히는 순서가 연결 순서를 정의한다. 예컨대, 사용자가 이 모드를 활성화하고, 사용자를 일정한 각도로 향하게 하면서 복수의 사진을 찍으며, 모드를 그만둠으로써 일련의 사진을 획득하는 것을 종료한다. 그런 다음 일련의 사진들 전부는 파노라마식 사운드 이미지를 만들어내기 위해 카메라에 의해 자동으로 사용된다.
단계 2.4는 파노라마식 사운드 이미지의 데이터를 만드는 것으로 이루어진다. 하나보다 많은 이미지로부터 파노라마들의 생성을 위한 다수의 기술이 존재한다. 그들 대부분은 재조정될 이미지들 사이의 공통인 구역들의 존재를 요구한다. 2개의 이미지가 조립되는 것을 고려해보자. 이미지(1)가 기준 이미지로서 취해진다.
제 1 단계는 이미지(2)의 공통 구역에 적용할 변형을 추정하여 그러한 변형이 이미지(1) 위에 완전히 겹쳐지도록 하는 것으로 이루어진다. 이를 위해, 이미 지(1)와 이미지(2)에서의 단일 포인트들의 추출과 이어지는 2개의 이미지 사이의 이들 포인트에 대응하여 배치하는 것으로 이루어지는 관심 포인트들에 기초하여 한 방법이 사용될 수 있다. 이러한 대응하는 포인트들의 집합으로부터, 공통 구역의 변경 모델을 계산하는 것이 가능하다. 그런 다음, 이 모델은 이미지(2) 전체가 이미지(1)에 겹쳐지도록 사용될 수 있다. 이 공정은 최종 파노라마를 얻기 위해 모든 이미지에 대해 반복된다(단계 2.4). 단계 2.5에서, 생성된 파노라마식 이미지는 최종 조립을 위해 사용된 각각의 사진에 대응하는 부분들로 나누어진다. 각각의 부분은 이 부분에 대응하는 사진이 찍히는 순간 만들어진 사운드 시퀀스와 연관되는 직교 좌표들에 의해 참조된 구역이다. 그러므로, 각각의 구역은 초기의 사운드 이미지들이 다시 발견되는 것을 가능하게 하는 색인(index)이 되어, 대응하는 사운드 시퀀스를 지닌 파노라마식 이미지의 한 부분 사이의 대응 관계를 생성한다. 도 3은 파노라마식 사운드 이미지의 상이한 요소들, 즉
- 헤더 EN,
- 조립된 파노라마식 이미지를 구성하는 비디오 데이터의 블록: DATA_VIDEO,
- 사운드 시퀀스를 지닌 파노라마식 이미지의 구역을 정의하는 파라미터들을 연관시키는 대응 표: TABLE,
- 파노라마식 이미지의 한 부분에 각각 대응하는 "i" 구역들의 좌표들인 "COORD_j"와 연관된 "AUDIO_i"로서 언급되는 복수의 "i" 사운드 시퀀스들 AUDIO i를 도시한다.
그렇게 생성된 파노라마식 사운드 이미지는 이후 디바이스(1)에서나 컴퓨터 또는 다른 오디오-비디오 재생 디바이스에 전송 및/또는 기억된다.
단계 2.6에서는, 파노라마식 사운드 이미지를 재생하기 위해 파일 콘텐츠가 처리된다. 그러한 재생이 카메라(1)에 의해 실행되면, 파노라마식 이미지의 디스플레이된 부분이 스크린(3)에 디스플레이되고, 그 사진과 연관된 사운드 시퀀스가 스크린에 디스플레이되며, 스피커(7)에 의해 재생된다(단계 2.7). 파노라마식 이미지의 우측 부분이 디스플레이 수단(컴퓨터나 텔레비전 스크린, 비디오 프로젝터, PAD LCD 스크린 등)에 먼저 디스플레이되고, 이 이미지 부분에 대응하는 사운드가 재생된다. 그러한 재생은 또한 파노라마식 사운드 이미지 파일이 다운로드된 디바이스에서 실행될 수 있다. 단계 2.8에서, 사용자는 파노라마식 이미지의 다른 부분들을 디스플레이하기 위해 디스플레이 창의 이동 명령을 도입한다. 재생이 디바이스(1)의 레벨에서 실행된다면, 명령들이 좌측 키 또는 우측 키를 누름으로써 도입된다. 임의의 순간에, 디스플레이된 부분은 디스플레이 창의 중심에서 대부분 나타나는 부분을 결정하기 위해 좌표들인 COORD_i에 의해 참조된 구역들과 비교된다. 이러한 구역이 결정되면, 대응하는 사운드 시퀀스가 파노라마식 사운드 이미지 데이터로부터 추출되고 재생된다. 이러한 식으로, 파노라마식 이미지가 현재 디스플레이된 이미지 부분의 관찰하는 지점 각도에 대응하는 사운드 환경으로 복원된다. 그러므로 사용자는 사용자의 명령들에 따라 변하는 사운드 환경과 이미지 모두에서 내비게이션을 행한다.
도 4는 상이한 각도에서 4개의 사진을 찍는 것을 보여준다. 이 예에서, 사용자는 물의 가장자리에 있는 오래된 건물에 있고, 작은 회전을 수행할 때마다 동일 한 영역으로부터 사진을 찍었다. 사진 1은 바다를 보여주고, 연관된 사운드는 파도의 사운드이다. 사진 2는 바다를 보여주고, 먼 곳까지 걸쳐 있는 큰 길에 면하는 제방이 좌측에 있으며, 해변 부분도 볼 수 있고, 카메라에 가까운 사람들의 대화가 들릴 수 있다. 사진 3은 큰 길에 있는 자동차를 보여주고, 사운드 시퀀스는 차량들의 사운드와 자동차의 경적을 녹화한다. 사진 4는 좌측에 해변이 있는 큰 길의 또 다른 풍경을 보여주고, 연관된 사운드 시퀀스는 차량들의 사운드와 대화를 담고 있다. 파노라마식 이미지는 마치 카메라가 매우 넓은 시야각(viewing angle)을 구비한 것처럼 이들 4개의 사진의 혼합을 실현하게 된다. 그런 다음, 이러한 파노라마식 이미지의 시각화 동안, 재생되도록 선택된 사운드 시퀀스는 디스플레이된 사진과 연관된 것이다.
도 5a, 도 5b, 도 5c는 사용자가 내비게이션 명령들을 도입할 때의 스크린 외관을 나타낸다. 도 5a는 스크린의 중앙에 있는 사진 2를 보여주고 인접한 사진들의 부분들을 보여주며, 사진 1의 좌측 부분이 우측에 나타나고, 사진 3의 우측 부분이 좌측에 나타난다. 이때, 재생된 사운드는 사진 2에 대응한다. 그런 다음, 사용자는 좌로 회전 명령을 도입하고, 도 5b의 스크린 외관이 디스플레이된다. 그런 다음 사진 3이 나타나는데, 우측에는 사진 2의 일부가 좌측에는 사진 4의 일부가 나타난다. 그런 다음 재생된 사운드는 사진 3의 것이다. 그런 다음 사용자는 새로운 좌회전 명령을 도입하고, 도 5c의 스크린 외관이 디스플레이된다. 사진 4가 디스플레이된 이미지의 중심에 있고, 사진 3의 좌측 부분이 우측에 나타난다. 그러므로 좌측에 나타나는 흰색 구역은 사용자가 파노라마식 이미지의 끝에 도달했음을 표시한다. 사용자가 계속해서 돌리면, 흰색 구역이 좌측으로부터 전체 스크린을 채우게 되고, 계속해서 돌리게 되면 사진 1이 우측으로부터 조금씩 나타나게 된다. 미세한 검은 선이 또한 파노라마식 이미지의 끝을 가시화하기 위해 디스플레이될 수 있고, 이러한 식으로 사용자는 스크린에서 파노라마식 이미지의 첫 번째 사진과 마지막 사진 모두를 볼 수 있다.
일 개선예에 따르면, 사운드 시퀀스는 무기한 재생된다. 제 1 변형예에 따르면, 녹화된 사운드의 정지 부분만이 재생되고, 그런 다음 본 방법은 연속 사운드를 재생하기 위해 스펙트럼 및 종합 특징들을 추출한다. 루프에서 정지 사운드를 재생하는 기술은, 사운드 시퀀스의 끝과 사운드 시퀀스의 시작 사이의 전이를 지각하는 것을 회피한다. 예컨대, 파노라마식 이미지의 일부가 바다의 한 풍경에 대응한다면, 사용자는 계속해서 파도의 사운드를 연장할 수 있다. 일 개선예에 따르면, 파노라마식 사운드 이미지 재생 디바이스는 언어(speech) 시퀀스들을 필터링하는 수단을 가진다. 제 1 재생 루프에서는 사운드 데이터의 집합이 재생된 다음, 그 다음 루프들에서는 사용자가 어떠한 새로운 명령도 도입하지 않는 한, 그 언어가 필터링된다. 이 개선예에 따르면, 사운드 시퀀스가 녹화되고 그것은 정지 부분이 필터링되는 사운드 시퀀스의 재생 순간, 더 구체적으로는 사운드 시퀀스의 제 2 재생 동안에 이루어진다. 이러한 식으로, 이미지가 스크린에서 한 순간에 디스플레이된 채로 있을 때, 최종적으로 재생되는 것은 배경 잡음(파도, 바람, 차량 사운드, 갈매기가 우는 것 등)이다. 잘릴 수 있고, 반복적으로 듣기에 매우 유쾌하지 않은 언어들은 연속적으로 재생되지 않는다.
일 개선예에 따르면, 사진들과 연관된 사운드 시퀀스들은 모노음향(monophonic)이고, 2개의 연관된 사진이 스크린에서 전체적으로 또는 부분적으로 재생될 때 2개의 사운드 시퀀스의 혼합이 실행된다. 일반적으로, 하나의 시퀀스의 사운드 레벨은 대응하는 사진의 디스플레이된 비율에 의존한다.
또 다른 개선예에 따르면, 사운드 시퀀스의 녹화는 스테레오로 이루어진다. 이를 위해, 디바이스(1)는 사진에 의해 찍힌 대상물의 좌측과 우측을 커버하기 위한 2개의 마이크를 가진다. 파노라마식 이미지 재생 디바이스가 사운드 재생 장비를 가진다면, 파노라마식 이미지의 디스플레이된 부분이 식별된 사진에 대응할 때, 좌측의 사운드트랙이 좌측 오디오 녹화의 사운드들을 재생하고, 우측의 사운드트랙이 우측 오디오 녹화의 사운드들을 재생한다. 사용자가 파노라마식 이미지의 번역을 작동시키고, 2개의 사진의 부분들이 디스플레이될 때, 디바이스는 프레이밍(framing)에 따른 사운드를 재생하게 된다. 이 경우, 좌측 사운드트랙은 좌측에 디스플레이된 사진과 연관된 우측 오디오 녹화의 사운드들을 재생하고, 우측 사운드트랙은 우측에 디스플레이된 사진과 연관된 좌측 오디오 녹화의 사운드들을 재생한다. 유리하게, 공통 영상 부분을 가지는 2개의 사진과 연관된 좌측 사운드트랙과 우측 사운드트랙 사이에 혼합이 이루어진다.
동작의 일 변형예에 따르면, 사용자는 사운드 사진들을 찍을 때 파노라마식 이미지의 조립물을 구성할 수 있다. 이 경우, 사운드 사진들은 그것들이 찍힌 순서에 따라 번호가 매겨지고, 이러한 순서로 사진들을 조립할 때 파노라마식 이미지가 생성된다. 카메라(1)는 잇따라서 찍힌 순서가 정해진 일련의 사진들이 연관될 수 있게 하는 특정 모드를 가진다. 사용자는 카메라의 전원을 끔으로써, 또는 모드를 변경함으로써 파노라마식 이미지를 구성하는 일련의 사진들의 획득을 끝낸다. 이 변형예는 이미지를 수동으로 조립하는 단계 2.3을 억제하고, 파노라마식 사운드 이미지가 직접 얻어질 수 있게 한다. 그런 다음 카메라가 파노라마식 사운드 이미지를 내부에 생성할 수 있거나, 파노라마식 사운드 이미지를 생성하기 위해 연결을 하는 역할을 하는 외부 디바이스에 사진들을 찍힌 번호(shot number)와 함께 송신한다.
본 발명은 특별한 예시된 실시예들을 참조하여 설명되었고, 상기 발명은 결코 이들 실시예에 제한되지 않고 오직 첨부된 청구항들에 의해서 제한된다. 방향 키들과 등가인 임의의 내비게이션 수단이 본 발명의 구현을 위해 적용될 수 있다는 점이 주목된다. 또한 사진 원점(origin) 뿐만 아니라 임의의 이미지들이 파노라마식 이미지를 생성하기 위해 사용될 수 있다는 점이 주목된다.
전술한 바와 같이, 본 발명은 파노라마식 사운드 이미지를 생성하고 재생하는 분야에 이용 가능하다.

Claims (13)

  1. 복수의 이미지의 순서가 정해진 목록을 정의하는 단계(2.3)를 포함하는 파노라마식 사운드 이미지의 재생 방법으로서, 각 이미지는 사운드 콘텐츠와 연관되고,
    - "파노라마식(panoramic)"이라고 부르는 고유한 이미지를 생성하도록 정의된 순서로 이미지들을 연결하는 단계(2.4, 2.5)로서, 각 사운드 콘텐츠는 각 사운드 콘텐츠와 연관된 이미지를 포함하는 파노라마식 이미지의 부분과 연관되는, 연결 단계(2.4, 2.5)를 포함하는 파노라마식 사운드 이미지의 재생 방법에 있어서,
    - 생성된 파노라마식 이미지의 적어도 한 부분을 디스플레이하는 명령의 도입 단계(2.8)로서, 상기 명령은 또한 연관된 이미지의 부분을 디스플레이하는 시간에 사운드 콘텐츠를 연속적으로 재생하는 단계(2.7)를 유발시키고, 상기 사운드 콘텐츠는 첫 번째 발생 동안에는 전체가 재생되며, 다음 발생 동안에는 정지된 사운드만을 유지시킬 목적으로 사운드 콘텐츠에 짧은 사운드들의 필터링 단계가 적용되는, 명령의 도입 단계(2.8)를 또한 포함하는 것을 특징으로 하고,
    파노라마식 이미지의 2개 부분이 디스플레이된다면, 재생 단계(2.7)는 모노음향(monophonic) 사운드를 만들어내기 위해 상기 2개 부분과 연관된 사운드 콘텐츠들의 2개의 정지된 성분을 혼합하는 단계를 포함하고, 각각의 정지된 성분들의 사운드 레벨은 연관된 부분의 디스플레이된 비율에 의존하는 것을 특징으로 하는,
    파노라마식 사운드 이미지의 재생 방법.
  2. 제 1항에 있어서,
    짧은 사운드들의 필터링 단계는 구어(spoken language)를 나타내는 사운드들을 삭제하는 것을 특징으로 하는, 파노라마식 사운드 이미지의 재생 방법.
  3. 제 1항 또는 제 2항에 있어서,
    상기 연결 단계(2.4)는, 2개의 이미지에 특정된 특징들을 가지는 2개의 이미지 사이에 놓인 파노라마식 이미지의 적어도 한 부분을 생성하여, 영상 전이(visual transition)를 도시하는, 생성하는 단계를 포함하는 것을 특징으로 하는, 파노라마식 사운드 이미지의 재생 방법.
  4. 제 1항 또는 제 2항에 있어서,
    이미지들을 생성하는 디바이스와는 다른 디바이스로 각 이미지의 데이터를 다운로드하는 단계를 포함하고, 이 다른 디바이스는 연결 단계, 디스플레이 단계, 및 사운드 재생 단계를 실행하는 것을 특징으로 하는, 파노라마식 사운드 이미지의 재생 방법.
  5. 삭제
  6. 제 1항 또는 제 2항에 있어서,
    파노라마식 이미지의 부분들과 연관된 사운드 콘텐츠들은 입체 음향의 사운드 콘텐츠들이고, 재생 단계(2.7)는 연관된 파노라마식 이미지 부분의 좌측 부분 또는 우측 부분의 디스플레이 상의 존재에 따라 사운드 콘텐츠의 좌측 사운드트랙 또는 우측 사운드트랙의 정지된 성분을 계속해서 선택하는 것을 특징으로 하는, 파노라마식 사운드 이미지의 재생 방법.
  7. 제 1항 또는 제 2항에 있어서,
    파노라마식 이미지의 부분들과 연관된 사운드 콘텐츠들은 입체 음향의 사운드 콘텐츠들이고, 2개의 이미지의 부분들이 디스플레이되면, 우측 이미지의 좌측 사운드트랙의 정지된 성분이 우측 사운드트랙에서 재생되며, 좌측 이미지의 우측 사운드트랙의 정지된 성분이 좌측 사운드트랙에서 재생되는 것을 특징으로 하는, 파노라마식 사운드 이미지의 재생 방법.
  8. 복수의 이미지와, 각각 이미지와 연관된 복수의 사운드 콘텐츠의 데이터의 기억 수단, 이미지들의 순서가 정해진 목록의 정의를 가능하게 하는 명령 도입 수단(4), 디스플레이 수단(3), 사운드 재생 수단(7), 및 "파노라마식"이라고 부르는 고유한 이미지를 생성하도록 정의된 순서로 이미지들을 연결하는 수단으로서, 각 사운드 콘텐츠는 각 사운드 콘텐츠와 연관된 이미지를 포함하는 파노라마식 이미지의 부분과 연관되는, 연결 수단을 포함하는 재생 디바이스(1)에 있어서,
    상기 명령 도입 수단(4)은 상기 파노라마식 이미지의 한 부분의 디스플레이와, 연관된 이미지의 부분을 디스플레이하는 시간에 사운드 콘텐츠를 연속적으로 재생하는 것을 유발하고, 상기 사운드 콘텐츠는 첫 번째 발생 동안에는 전체가 재생되며, 다음 발생 동안에는 정지된 사운드만을 유지시킬 목적으로 필터링 수단이 사운드 콘텐츠의 짧은 사운드들을 삭제하는 것을 특징으로 하고,
    파노라마식 이미지의 2개 부분이 디스플레이된다면, 사운드 재생 수단(7)은 상기 2개 부분과 연관된 사운드 콘텐츠들의 2개의 정지된 성분을 혼합하고 모노음향 사운드를 만들어내며, 각각의 정지된 성분들의 사운드 레벨은 연관된 부분의 디스플레이된 비율에 의존하는 것을 특징으로 하는,
    재생 디바이스.
  9. 제 8항에 있어서,
    짧은 사운드들의 필터링 수단은 구어(spoken language)를 나타내는 사운드들을 삭제하는 것을 특징으로 하는, 재생 디바이스.
  10. 제 8항 또는 제 9항에 있어서,
    상기 연결 수단은 2개의 이미지에 특정된 특징들을 가지는 2개의 이미지 사이에 놓인 파노라마식 이미지의 적어도 한 부분을 생성하여, 영상 전이를 도시하는 것을 특징으로 하는, 재생 디바이스.
  11. 삭제
  12. 제 8항 또는 제 9항에 있어서,
    파노라마식 이미지의 부분들과 연관된 사운드 콘텐츠들은 입체 음향의 사운드 콘텐츠들이고, 사운드 재생 수단(7)은 연관된 파노라마식 이미지 부분의 좌측 부분 또는 우측 부분의 디스플레이 상의 존재에 따라 사운드 콘텐츠의 좌측 사운드트랙 또는 우측 사운드트랙의 정지된 성분을 선택하는 것을 특징으로 하는, 재생 디바이스.
  13. 제 8항 또는 제 9항에 있어서,
    파노라마식 이미지의 부분들과 연관된 사운드 콘텐츠들은 입체 음향의 사운드 콘텐츠들이고, 2개의 이미지의 부분들이 디스플레이되면, 우측 이미지의 좌측 사운드트랙의 정지된 성분이 우측 사운드트랙에서 재생되며, 좌측 이미지의 우측 사운드트랙의 정지된 성분이 좌측 사운드트랙에서 재생되는 것을 특징으로 하는, 재생 디바이스.
KR1020097024315A 2007-05-29 2008-05-27 파노라마식 사운드 이미지를 생성하고 재생하는 방법과, 그러한 이미지를 재생하기 위한 장치 KR101398032B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
FR0755314A FR2916866A1 (fr) 2007-05-29 2007-05-29 Procede de creation et reproduction d'une image panoramique sonore, et appareil de reproduction d'une telle image
FR0755314 2007-05-29
PCT/EP2008/056516 WO2008145661A1 (fr) 2007-05-29 2008-05-27 Procede de creation et reproduction d'une image panoramique sonore, et appareil de reproduction d'une telle image

Publications (2)

Publication Number Publication Date
KR20100017242A KR20100017242A (ko) 2010-02-16
KR101398032B1 true KR101398032B1 (ko) 2014-05-22

Family

ID=38871769

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020097024315A KR101398032B1 (ko) 2007-05-29 2008-05-27 파노라마식 사운드 이미지를 생성하고 재생하는 방법과, 그러한 이미지를 재생하기 위한 장치

Country Status (8)

Country Link
US (1) US8488014B2 (ko)
EP (1) EP2150853B1 (ko)
JP (1) JP5349463B2 (ko)
KR (1) KR101398032B1 (ko)
CN (1) CN101681088B (ko)
AT (1) ATE549859T1 (ko)
FR (1) FR2916866A1 (ko)
WO (1) WO2008145661A1 (ko)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5779938B2 (ja) * 2011-03-29 2015-09-16 ソニー株式会社 プレイリスト作成装置、プレイリスト作成方法及びプレイリスト作成プログラム
JP5992210B2 (ja) * 2012-06-01 2016-09-14 任天堂株式会社 情報処理プログラム、情報処理装置、情報処理システム、および情報処理方法
CN104601880B (zh) * 2014-12-11 2018-03-27 广东欧珀移动通信有限公司 一种生成全景照片的方法及移动终端
US10310719B2 (en) * 2015-06-09 2019-06-04 Whatsapp Inc. Techniques for media album display and management
CN105045840A (zh) * 2015-06-30 2015-11-11 广东欧珀移动通信有限公司 一种图片展示方法及移动终端
US10261749B1 (en) * 2016-11-30 2019-04-16 Google Llc Audio output for panoramic images
CN114513698B (zh) * 2020-11-16 2023-08-22 中国联合网络通信集团有限公司 一种全景声播放系统及方法
CN115134581A (zh) * 2022-08-30 2022-09-30 四川中绳矩阵技术发展有限公司 一种图像和声音的融合重现方法、系统、设备及存储介质
CN115225884A (zh) * 2022-08-30 2022-10-21 四川中绳矩阵技术发展有限公司 一种图像和声音的交互式重现方法、系统、设备和介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0683391A (ja) * 1992-09-04 1994-03-25 Matsushita Electric Ind Co Ltd テレビ会議用発言音声検出装置
JP2005223519A (ja) * 2004-02-04 2005-08-18 Seiko Epson Corp 画像保存装置、画像保存方法および自動保存システム
US20060120624A1 (en) 2004-12-08 2006-06-08 Microsoft Corporation System and method for video browsing using a cluster index
WO2007038198A2 (en) * 2005-09-26 2007-04-05 Eastman Kodak Company Image capture method and device also capturing audio

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6459451B2 (en) * 1996-06-24 2002-10-01 Be Here Corporation Method and apparatus for a panoramic camera to capture a 360 degree image
ATE481825T1 (de) * 1998-04-14 2010-10-15 Hearing Enhancement Co Llc Verfahren und vorrichtung, die es einem end- benutzer ermöglichen, hörer-präferenzen für hörbehinderte und nicht-hörbehinderte einzustellen
US7415120B1 (en) * 1998-04-14 2008-08-19 Akiba Electronics Institute Llc User adjustable volume control that accommodates hearing
JP2002514875A (ja) * 1998-05-13 2002-05-21 アイ ムーヴ コーポレイション 多次元空間において運動をシミュレーションするパノラマムービー
US6532690B1 (en) * 1998-08-26 2003-03-18 Eastman Kodak Company System and article for displaying a lenticular image with sound
US20020075295A1 (en) * 2000-02-07 2002-06-20 Stentz Anthony Joseph Telepresence using panoramic imaging and directional sound
JP2005159731A (ja) * 2003-11-26 2005-06-16 Canon Inc 撮像装置
JP2006203860A (ja) * 2004-12-24 2006-08-03 Fuji Photo Film Co Ltd 撮像装置、撮像方法、再生装置、再生方法、及びプログラム
US7668455B2 (en) * 2004-12-20 2010-02-23 Fujifilm Corporation Image capturing apparatus, image capturing method, reproducing apparatus, reproducing method and program

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0683391A (ja) * 1992-09-04 1994-03-25 Matsushita Electric Ind Co Ltd テレビ会議用発言音声検出装置
JP2005223519A (ja) * 2004-02-04 2005-08-18 Seiko Epson Corp 画像保存装置、画像保存方法および自動保存システム
US20060120624A1 (en) 2004-12-08 2006-06-08 Microsoft Corporation System and method for video browsing using a cluster index
WO2007038198A2 (en) * 2005-09-26 2007-04-05 Eastman Kodak Company Image capture method and device also capturing audio

Also Published As

Publication number Publication date
ATE549859T1 (de) 2012-03-15
JP5349463B2 (ja) 2013-11-20
US8488014B2 (en) 2013-07-16
FR2916866A1 (fr) 2008-12-05
EP2150853B1 (fr) 2012-03-14
US20100321512A1 (en) 2010-12-23
EP2150853A1 (fr) 2010-02-10
KR20100017242A (ko) 2010-02-16
WO2008145661A1 (fr) 2008-12-04
JP2010528546A (ja) 2010-08-19
CN101681088B (zh) 2012-10-24
CN101681088A (zh) 2010-03-24

Similar Documents

Publication Publication Date Title
KR101398032B1 (ko) 파노라마식 사운드 이미지를 생성하고 재생하는 방법과, 그러한 이미지를 재생하기 위한 장치
JP5133816B2 (ja) カメラ、画像合成方法、およびプログラム
JPH11219446A (ja) 映像音響再生システム
KR20040111092A (ko) 화상표시방법, 이 방법을 실행하는 프로그램 및화상표시장치
JP5155092B2 (ja) カメラ、再生装置、および再生方法
JP5393237B2 (ja) 画像表示装置及びその制御方法、並びにプログラム及び記憶媒体
CN101690154B (zh) 用于产生照片的声音序列的方法以及用于产生并且再现该声音序列的装置
JP2005020607A (ja) 合成画像出力装置および合成画像出力処理プログラム
JP5596844B2 (ja) 画像処理装置、画像処理システム及び画像処理方法
KR100776433B1 (ko) 개선된 영상 합성이 가능한 이동통신 단말기
KR20080017747A (ko) 동영상 편집 기능을 구비한 동영상 촬영 장치 및 방법
KR101405091B1 (ko) 개인영상 제작시스템
JP2008236708A (ja) バーチャル撮影スタジオの媒体制作装置
JP2005323008A (ja) 携帯情報端末
JP5509287B2 (ja) 再生表示装置、再生表示プログラム、再生表示方法、および画像処理サーバー
JP5602818B2 (ja) カメラ、画像再生装置、画像合成方法、およびプログラム
JP5058842B2 (ja) 仮想風景表示装置
JP5106240B2 (ja) 画像処理装置および画像処理サーバー
JP4790670B2 (ja) 画像表示システムおよび画像表示方法
KR20010027348A (ko) 크로마키를 이용한 합성 영상 및 음성의 출력장치
JP3043330B1 (ja) 撮影画像処理装置
JP2006138972A (ja) プロジェクタ
JP6643081B2 (ja) アルバム動画生成装置、アルバム動画生成方法及びプログラム
JP2009177515A (ja) 光学機器
JP2010041175A (ja) 画像再生装置、画像再生方法、およびプログラム

Legal Events

Date Code Title Description
PA0105 International application

Patent event date: 20091123

Patent event code: PA01051R01D

Comment text: International Patent Application

PG1501 Laying open of application
A201 Request for examination
PA0201 Request for examination

Patent event code: PA02012R01D

Patent event date: 20130506

Comment text: Request for Examination of Application

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20140217

Patent event code: PE09021S01D

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

Patent event code: PE07011S01D

Comment text: Decision to Grant Registration

Patent event date: 20140425

GRNT Written decision to grant
PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20140515

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20140516

End annual number: 3

Start annual number: 1

PG1601 Publication of registration
FPAY Annual fee payment

Payment date: 20170420

Year of fee payment: 4

PR1001 Payment of annual fee

Payment date: 20170420

Start annual number: 4

End annual number: 4

FPAY Annual fee payment

Payment date: 20180417

Year of fee payment: 5

PR1001 Payment of annual fee

Payment date: 20180417

Start annual number: 5

End annual number: 5

FPAY Annual fee payment

Payment date: 20190430

Year of fee payment: 6

PR1001 Payment of annual fee

Payment date: 20190430

Start annual number: 6

End annual number: 6

PR1001 Payment of annual fee

Payment date: 20200507

Start annual number: 7

End annual number: 7