KR101589889B1 - 화상 처리 장치 및 기록 매체 - Google Patents

화상 처리 장치 및 기록 매체 Download PDF

Info

Publication number
KR101589889B1
KR101589889B1 KR1020157017804A KR20157017804A KR101589889B1 KR 101589889 B1 KR101589889 B1 KR 101589889B1 KR 1020157017804 A KR1020157017804 A KR 1020157017804A KR 20157017804 A KR20157017804 A KR 20157017804A KR 101589889 B1 KR101589889 B1 KR 101589889B1
Authority
KR
South Korea
Prior art keywords
posture
processing apparatus
image processing
specifying
image
Prior art date
Application number
KR1020157017804A
Other languages
English (en)
Other versions
KR20150085121A (ko
Inventor
마사키 다카하시
요시히코 스와
Original Assignee
소니 컴퓨터 엔터테인먼트 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니 컴퓨터 엔터테인먼트 인코포레이티드 filed Critical 소니 컴퓨터 엔터테인먼트 인코포레이티드
Publication of KR20150085121A publication Critical patent/KR20150085121A/ko
Application granted granted Critical
Publication of KR101589889B1 publication Critical patent/KR101589889B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00323—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a measuring, monitoring or signaling apparatus, e.g. for transmitting measured information to a central location
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32128—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title attached to the image data, e.g. file header, transmitted message header, information on the same page or in the same computer file as the image
    • H04N5/225—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/907—Television signal recording using static stores, e.g. storage tubes or semiconductor memories
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077—Types of the still picture apparatus
    • H04N2201/0084—Digital still camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/3254—Orientation, e.g. landscape or portrait; Location or order of the image data, e.g. in memory
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3274—Storage or retrieval of prestored additional information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules

Abstract

본 발명의 접수부(102)가 화상 데이터의 취득 지시를 접수하면, 화상 데이터 취득부(104)는 메모리부(130)로부터 화상 데이터를 취득하여, JPEG 형식으로 압축한다. 자세 특정부(122)는 가속도 센서의 검출값을 사용해서 화상 처리 장치(10)의 자세 정보를 특정한다. 방향 특정부(124)는 지자기 센서의 검출값과, 자세 특정부(122)에 의해 특정된 자세 정보를 사용하여, 렌즈 광축의 방위각을 특정한다. 자세 특정부(122)에 의해 화상 처리 장치(10)가 수평 자세로 있는 것이 판정된 경우, 방향 특정부(124)는 렌즈 광축 방향을 사용하지 않고, 화상 처리 장치(10)에 있어서의 소정의 방향과, 지자기 센서의 검출값으로부터, 렌즈 광축의 방위각을 특정한다.

Description

화상 처리 장치 및 기록 매체{IMAGE PROCESSING DEVICE AND RECORDING MEDIUM}
본 발명은 화상 파일을 생성하는 기술에 관한 것이다.
스마트폰이나 휴대형 게임기 등의 소형 전자 기기가 보급되고 있다. 최근의 전자 기기는 촬상 제어부를 탑재하여, 소위 디지털 카메라의 기능을 구비한 것도 많다. 일반적으로, 디지털 카메라로 촬영된 화상은 JPEG(Joint Photographic Experts Group) 파일 포맷으로 압축되어서 기록된다. 디지털 카메라는 촬상 데이터를 기록할 때, 촬영시의 여러 가지 부속 정보를 포함하는 Exif(Exchangeable Image File Format) 파일을, 촬상 데이터와 함께 화상 파일에 포함한다. 뷰어는 Exif 파일에 포함되는 부속 정보를 해석하여, 화상을 표시부에 표시한다. Exif 규격은 디지털 카메라용 화상 파일 포맷으로서 책정된 경위를 가지고 있다.
「Exchangeabe image file format for digital still cameras: Exif Unified Version 2.3」, Japan Electronics and Information Technology Industries Association (JEITA) and Camera & Imaging Products Association, 2010년 4월, 인터넷 <URL: http://www.jeita.or.jp/cgi-bin/standard_e/pdfpage.cgi?jk_n=47>
Exif 파일 포맷에는 화상 데이터의 구성에 관한 정보로서, GPS(Global Positioning System)의 측정 정보를 저장하는 영역(GPSInfoIFD)이 설치되어 있다. 이 영역에는 렌즈의 광축이 향하고 있는 방향(방위각)을 나타내는 촬영 방향(GPSImgDirection)의 태그가 규정되어 있고, 이 태그에는 북쪽을 기준(0도)으로 했을 때의 촬영 방향이 0 내지 360도의 범위로 입력된다.
촬영 시에 렌즈의 광축이 대략 연직 방향을 향하고 있는 경우, 촬영 방향의 태그에 입력되는 값(촬영 방향 정보)은, 지자기(地磁氣) 센서의 정밀도에 따라 편차가 발생한다. 그로 인해, 디지털 카메라의 자세에 거의 변화가 없어도, 복수매의 사진을 촬영했을 때, 각각의 촬영 방향의 태그에 상이한 촬영 방향 정보가 입력되는 경우가 있어, 촬영 방향 정보를 고정밀도로 입력할 수 있는 기술의 등장이 요망되고 있다.
또한 전자 기기 중에는, 표시부의 전체면 또는 일부에 표시된 화상을 촬영하는, 소위 「스크린 샷」 촬영 기능을 갖는 것이 있다. 예를 들어, 게임 화면을 스크린 샷으로 촬영해서 기록해 둠으로써, 유저는 추후에 그 게임 신을 다시 볼 수 있다. 스크린 샷으로 촬영된 화상 데이터는, 재생 시에 촬영 조건 등의 정보를 필요로 하지 않는 것이 많아, 지금까지 Exif 파일이 생성될 필요성이 부족하다고 여겨져 왔다. 또한 Exif 파일이 생성되어도, 태그에는 기준값의 정보가 입력되고 있었다. 그 때문에 뷰어가 적절한 상태로 스크린 샷을 재생할 수 없는 경우도 발생하고 있었다.
이에 본 발명은, 적절하게 화상 파일을 생성하는 기술을 제공하는 것을 목적으로 한다.
상기 과제를 해결하기 위해서, 본 발명의 일 형태의 화상 처리 장치는, 화상 파일을 생성하는 화상 처리 장치로서, 화상 데이터의 취득 지시를 접수하는 접수부와, 접수부가 취득 지시를 접수한 경우에, 화상 데이터를 취득하는 취득부와, 가속도 센서의 검출값을 사용하여, 당해 화상 처리 장치의 자세를 특정하는 자세 특정부와, 지자기 센서의 검출값과, 자세 특정부에 의해 특정된 자세 정보를 사용하여, 당해 화상 처리 장치의 방향을 특정하는 방향 특정부와, 방향 특정부에 의해 특정된 방향 정보를 화상 데이터에 관련지은 화상 파일을 생성하는 파일 생성부를 구비한다.
또한, 이상의 구성 요소의 임의의 조합, 본 발명의 표현을 방법, 장치, 시스템, 기록 매체, 컴퓨터 프로그램 등의 사이에서 변환한 것도 또한, 본 발명의 형태로서 유효하다.
본 발명의 화상 처리 기술에 의하면, 적절하게 화상 파일을 생성하는 것이 가능하게 된다.
도 1은 실시예에 따른 화상 처리 장치의 외관의 일례를 도시하는 도면이다.
도 2는 화상 처리 장치의 기능 블록도이다.
도 3은 화상 처리 장치에 있어서의 화상 파일 생성 기능을 실현하기 위한 기능 블록을 도시하는 도면이다.
도 4는 화상 처리 장치의 자세를 설명하기 위한 도면이다.
도 5는 자세 특정부에 의한 자세 특정 처리를 설명하기 위한 도면이다.
도 6은 자세 특정부가 실행하는 자세 특정 처리의 흐름도이다.
도 1은 실시예에 따른 화상 처리 장치(10)의 외관의 일례를 도시한다. 화상 처리 장치(10)는 가로로 길고 얇은 두께로, 대략 사변형의 외곽 형상의 하우징을 가진다. 화상 처리 장치(10)의 표면에는 지시 입력 버튼(21), 방향 키(22), R 버튼(23), L 버튼(24) 등의 입력 장치(20)와, 표시부(68)가 구비되어 있다. 표시부(68)에는 유저의 손가락이나 스타일러스 펜 등에 의한 접촉을 검지하기 위한 터치 패널(69)이 병설되어 있다. 또한 화상 처리 장치(10)의 이면에도 터치 패널이 구비된다. 화상 처리 장치(10)의 측면에는 메모리 카드 등의 기록 미디어를 장착하기 위한 제1 슬롯과, 게임 프로그램을 기록한 게임 카트리지를 장착하기 위한 제2 슬롯이 설치된다. 화상 처리 장치(10)의 내부에는, 화상 처리 장치(10)의 움직임을 검지하는 모션 센서(25)가 구비된다.
유저는, 화상 처리 장치(10)를 양손으로 파지한 상태에서, 예를 들어 오른손엄지 손가락으로 지시 입력 버튼(21)을 조작하고, 왼손 엄지 손가락으로 방향 키(22)를 조작하며, 오른손 집게 손가락 또는 가운데 손가락으로 R 버튼(23)을 조작하고, 왼손 집게 손가락 또는 가운데 손가락으로 L 버튼(24)을 조작할 수 있다. 또한 터치 패널(69)을 조작하는 경우에는, 화상 처리 장치(10)를 양손으로 파지한 상태에서, 각각의 엄지 손가락으로 터치 패널(69)을 조작해도 좋고, 또한 화상 처리 장치(10)를 왼손으로 파지한 상태에서, 오른손으로 터치 패널(69)을 조작해도 좋다.
본 실시예의 화상 처리 장치(10)는 촬상 제어부를 구비하고, 피사체를 촬영하는 카메라 기능을 갖는다. 화상 처리 장치(10)의 이면에, 피사체를 촬영하기 위한 촬상부의 렌즈가 설치되고, 화상 처리 장치(10)가 촬영 모드에 있을 경우, 표시부(68)에는 피사체가 표시되며, 입력 장치(20)의 소정의 버튼(예를 들어, R 버튼(23))에는 셔터 버튼의 기능이 할당된다. 또한 촬상부는 화상 처리 장치(10)의 표면에도 설치되어도 좋다. 유저가 R 버튼(23)을 누르면, 촬상부가 피사체를 촬상하고, 촬상부에 의해 촬상된 화상 데이터는, 촬영시의 여러 가지 부속 정보를 포함하는 Exif 파일과 함께, 1개의 화상 파일로서, 제1 슬롯에 장착된 기록 미디어에 기록된다.
또한 본 실시예의 화상 처리 장치(10)는 제2 슬롯에 장착된 게임 카트리지로부터 게임 프로그램을 판독해서 실행하는 기능을 갖는다. 유저가 게임을 플레이하고 있을 때, HOME 버튼을 누르면, 「스크린 샷」의 항목을 포함하는 메뉴가 표시부(68)에 표시된다. 유저에 의해 「스크린 샷」의 항목이 탭되면, 게임 화면의 스크린 샷이 촬영된다. 또한, 예를 들어 지시 입력 버튼(21)의 2개의 버튼에 셔터 버튼의 기능이 할당되고, 2개의 버튼이 동시에 눌러졌을 경우에, 게임 화면의 스크린 샷이 촬영되도록 해도 좋다.
도 2는 화상 처리 장치(10)의 기능 블록도다. 각 기능 블록은 버스(90)에 의해 서로 접속되어 있다. 표시부(68)는 액정 표시 장치여도 좋고, 유기 EL 표시 장치여도 좋다. 터치 패널(69)은 표시부(68) 위에 중첩해서 설치되고, 유저의 손가락이나 펜 등에 의한 접촉을 검지한다. 터치 패널(69)은 저항막 방식, 표면형 정전 용량 방식, 투영형 정전 용량 방식 등, 어느 방식이어도 좋다. 표시부(68) 및 터치 패널(69)은 사변형의 디스플레이를 구성한다.
무선 통신 모듈(30)은 IEEE 802.11b/g 등의 통신 규격에 준거한 무선 LAN 모듈에 의해 구성되고, AP(액세스 포인트)(2)를 통해서 외부 네트워크에 접속한다. 휴대 전화 모듈(32)은 ITU(International Telecommunication Union; 국제 전기 통신 연합)에 의해 정해진 IMT-2000(International Mobile Telecommunication 2000) 규격에 준거한 제3 세대(3rd Generation) 디지털 휴대 전화 방식에 대응하여, 휴대 전화망(6)에 접속한다. 휴대 전화 모듈(32)에는 휴대 전화의 전화 번호를 특정하기 위한 고유의 ID 번호가 기록된 SIM 카드가 삽입된다.
인터페이스(50)에 있어서, LED(Light Emitting Diode)(51)는 무선 통신 모듈(30)이나 휴대 전화 모듈(32) 등이 데이터의 송수신을 하고 있을 때 점멸한다. 모션 센서(25)는 화상 처리 장치(10)의 움직임을 검출하고, 지자기 센서(26)는 3축 방향의 지자기를 검출한다. 마이크(52)는 화상 처리 장치(10)의 주변의 음성을 입력한다. 스피커(53)는 화상 처리 장치(10)의 각 기능에 의해 생성되는 음성을 출력한다. 스테레오 입출력 단자(54)는 외부의 마이크로부터 스테레오 음성을 입력하고, 외부의 헤드폰 등에 스테레오 음성을 출력한다. 입력 장치(20)는 상술한 조작 키 등을 포함하고, 유저의 조작 입력을 접수한다.
CPU(Central Processing Unit)(40)는 메인 메모리(44)에 로드된 프로그램 등을 실행하고, 본 실시예에서는 사진 촬영 어플리케이션이나, 스크린 샷 촬영 어플리케이션, 게임 등을 실행한다. GPU(Graphics Processing Unit)(42)는 화상 처리에 필요한 계산을 실행한다. 메인 메모리(44)는 RAM(Random Access Memory) 등에 의해 구성되고, CPU(40)가 사용하는 프로그램이나 데이터 등을 기억한다. 스토리지(46)는 NAND형 플래시 메모리(NAND-type flash memory) 등에 의해 구성되고, 내장형 보조 기억 장치로서 이용된다.
GPS 제어부(60)는 GPS 위성으로부터의 신호를 수신하여, 현재 위치를 산출한다. USB 제어부(61)는 USB(Universal Serial Bus)로 접속된 주변 장치와의 사이의 통신을 제어한다. 비디오 출력 제어부(64)는 HDMI 등의 규격에 기초하여, 외부 표시 장치에 비디오 신호를 출력한다. 메모리 카드 제어부(62)는 제1 슬롯에 장착된 플래시 메모리 등의 기록 미디어(80)의 사이의 데이터의 판독 기입을 제어한다. 리무버블한 기록 미디어(80)가 제1 슬롯에 장착되면, 기록 미디어(80)는 외장형 보조 기억 장치로서 이용된다. 미디어 드라이브(63)는 게임 파일을 기록한 게임 카트리지(70)가 장착되는 제2 슬롯에 설치되고, 게임 카트리지(70)와의 사이의 데이터의 판독 기입을 제어한다. 촬상 제어부(65)는 피사체를 촬상하고, 디지털 화상 데이터를 생성한다.
도 3은 화상 처리 장치(10)에 있어서의 화상 파일 생성 기능을 실현하기 위한 기능 블록을 도시한다. 도 3에 도시하는 구성은, 하드웨어 컴포넌트에서 말하면, 임의의 컴퓨터의 CPU, 메모리, 메모리에 로드된 프로그램 등에 의해 실현되지만, 여기에서는 그것들의 연계에 의해 실현되는 기능 블록을 도시하고 있다. 따라서, 이들 기능 블록이 하드웨어만, 소프트웨어만 또는 그들의 조합에 의해 다양한 형태로 실현할 수 있는 것은, 당업자에게는 이해되는 바이다.
화상 처리 장치(10)는 표시부(68)에 표시하는 화상을 생성하기 위한 구성으로서, 촬상 제어부(65) 및 어플리케이션 실행부(100)를 구비한다. 촬영 모드가 설정되어 있는 경우, 촬상 제어부(65)가 카메라 기능을 실현하고, 화상 처리 장치(10)가 디지털 카메라로서 동작한다. 또한 어플리케이션 모드가 설정되어 있는 경우, 어플리케이션 실행부(100)가 게임 등의 어플리케이션을 실행한다. 메모리부(130)는 메인 메모리(44) 및 프레임 버퍼(112)를 갖는다. 표시 제어부(110)는 프레임 버퍼(112)에 버퍼링된 화상 데이터를 표시부(68)에 출력한다.
촬상 제어부(65)는 렌즈, 광량을 조절하는 조리개(교축 밸브), CCD나 CMOS 등으로 구성되는 촬상 소자를 포함하는 촬상부를 구비한다. 촬상 소자의 수광면에는 포토 센서가 평면적으로 배열되어 있고, 촬상 소자의 수광면에 결상된 피사체상은 각 포토 센서에 의해 입사광량에 따른 양의 신호 전하로 변환된다. 촬상 소자는, 축적한 신호 전하를 아날로그 신호 처리부에 출력하고, 아날로그 신호 처리부는 R, G, B의 각색 신호의 화상 데이터를 생성하여 A/D 변환기에 출력한다. A/D 변환기에서 디지털 신호로 변환된 화상 데이터는, 감마 보정 등의 디지털 처리가 실시된 후, 메인 메모리(44)에 기억된다. 촬상 제어부(65)는 메인 메모리(44)에 기억된 화상 데이터로부터, 표시용 화상 데이터를 생성해서 프레임 버퍼(112)에 공급한다. 프레임 버퍼(112)에 기억된 화상 데이터는 표시 제어부(110)로부터 표시부(68)에 출력되어 표시된다.
촬상 제어부(65)는 이상의 처리를 소정의 주기로 실행한다. 표시용 화상 데이터가 소정의 주기로 표시부(68)에 공급됨으로써, 촬상부에서 촬상한 피사체상이, 동화상으로서 표시부(68)에 표시된다. 이때, 유저가 소정의 셔터 버튼을 누르면, 화상 데이터 취득부(104)가 메인 메모리(44) 상에 전개되어 있는 화상 데이터를 취득하고, 예를 들어 JPEG의 형식에 따라서 압축한다. 또한 화상 데이터 취득부(104)는 프레임 버퍼(112) 상에 전개되어 있는 화상 데이터를 취득해서 압축해도 좋다. 화상 데이터 취득부(104)는 촬상 제어부(65)의 일 기능으로서 구성되어도 좋다.
어플리케이션 실행부(100)는 게임 프로그램을 실행하고, 유저의 조작 입력에 따른 게임 화상을 생성한다. 구체적으로 어플리케이션 실행부(100)는 가상 3차원 게임 공간 내에 가상 카메라를 설치하고, 유저의 조작 입력에 따라서 가상 카메라를 움직이게 하여, 가상 카메라로부터 가상 스크린에 투영되는 게임 화상을 생성한다. 생성된 게임 화상 데이터는 프레임 버퍼(112)에 공급되고, 표시 제어부(110)로부터 표시부(68)에 출력되어, 동화상으로서 유저에게 제공된다. 이때, 유저가 「스크린 샷」의 항목을 포함하는 메뉴를 표시부(68)에 표시시키고, 「스크린 샷」의 항목을 탭하면, 화상 데이터 취득부(104)가 프레임 버퍼(112) 상에 전개되어 있는 화상 데이터를 취득하고, JPEG의 형식에 따라서 압축한다.
센서 정보 처리부(120)는 각종 센서의 검출값을 바탕으로, 화상 처리 장치(10)의 자세나, 촬상부의 촬영 방향(렌즈 광축 방향의 방위각)을 특정한다. 센서 정보 처리부(120)는 화상 처리 장치(10)의 자세를 특정하는 자세 특정부(122)와, 촬상부의 촬영 방향을 특정하는 방향 특정부(124)를 적어도 구비한다. 자세 특정부(122)는 사진 촬영 모드 또는 스크린 샷 촬영 모드에서, 모션 센서(25)에 포함되는 3축 가속도 센서의 검출값을 사용하여, 화상 처리 장치(10)의 자세를 특정한다.
도 4의 (a) 내지 도 4의 (f)는 화상 처리 장치(10)의 6개의 기본 자세를 도시한다. 도면 중, 아래에서 위로 향하는 방향이 연직 상측 방향을 나타낸다. 자세 특정부(122)는 가속도 센서의 검출값을 사용하여, 화상 처리 장치(10)의 자세를, 도 4의 (a) 내지 도 4의 (f)에 도시하는 6개의 자세 중 어느 하나로 특정한다. 도 4의 (a)는 가로 방향(LANDSCAPE) 자세를 도시하고, 도 4의 (b)는 가로 방향 상하 반전(LANDSCAPE_UPSIDE_DOWN) 자세를 도시하며, 도 4의 (c)는 세로 방향 좌측 하향(PORTRAIT_LEFT_DOWN) 자세를 도시하고, 도 4의 (d)는 세로 방향 우측 하향(PORTRAIT_RIGHT_DOWN) 자세를 도시한다. 통상의 사용 상태에서는, 유저는 화상 처리 장치(10)를 도 4의 (a)에 도시하는 가로 방향 자세로 파지해서 조작한다. 자세 특정부(122)는 도 4의 (a) 내지 도 4의 (d)에 도시하는 자세를 「경사 자세」로 판정한다. 또한 경사 자세는 하우징 표면에 수직인 방향이 연직 방향에 직교하는 직립 자세도 포함하고 있다.
또한 도 4의 (e)는 앞면 상향(FACE_UP) 자세를 도시하고, 도 4의 (f)는 앞면 하향(FACE_DOWN) 자세를 도시한다. 예를 들어, 화상 처리 장치(10)가 테이블에 놓인 상태에서는, 화상 처리 장치(10)는 앞면 상향 자세 또는 앞면 하향 자세를 취하게 된다. 자세 특정부(122)는 도 4의 (e), 도 4의 (f)에 도시하는 자세를 「수평 자세」로 판정한다.
자세 특정부(122)는 3축 가속도 센서의 검출값을 사용하여, 화상 처리 장치(10)가 수평 자세로 있는지 또는 경사 자세로 있는지 판정한다. 자세 특정부(122)는 화상 처리 장치(10)가 수평 자세로 있는 것을 판정하면, 수평 자세 중, 앞면 상향 자세인지 또는 앞면 하향 자세인지를 특정한다. 또한 자세 특정부(122)는 화상 처리 장치(10)가 경사 자세로 있는 것을 판정하면, 경사 자세 중, 가로 방향 자세인지, 가로 방향 상하 반전 자세인지, 세로 방향 좌측 하향 자세인지 또는 세로 방향 우측 하향 자세인지를 특정한다.
도 5는 자세 특정부(122)에 의한 자세 특정 처리를 설명하기 위한 도면이다. 도 5의 (a)는 화상 처리 장치(10)에 대하여 설정되는 XYZ축을 도시하고, 이 예에서는 화상 처리 장치(10)의 긴 방향으로 X축, 짧은 방향으로 Y축, 표면에 수직인 방향으로 Z축이 설정되어 있다. X축의 정방향은 화상 처리 장치(10)의 좌변으로부터 우변으로 향하는 방향, Y축의 정방향은 화상 처리 장치(10)의 하변으로부터 상변으로 향하는 방향, Z축의 정방향은 화상 처리 장치(10)의 앞면으로부터 뒷면으로 향하는 방향으로 설정된다. 또한 Z축은 촬상부(렌즈)의 광축에 평행하다.
도 5의 (a)에 나타내는 G는 화상 처리 장치(10)에 걸리는 중력 가속도 벡터를 나타낸다. 중력 가속도 벡터는 연직 하측 방향을 향하고 있고, 모션 센서(25)의 3축 가속도 센서는, 중력 가속도 벡터 G의 X축 성분, Y축 성분, Z축 성분을 검출한다. 이하, 중력 가속도 벡터 G의 3축 성분을 (gx, gy, gz)라고 표현한다. 또한, 중력 가속도 벡터 G와, Z축과의 이루는 각도를 (angle_z)라고 표현하고, 또한 중력 가속도 벡터 G를 XY 평면에 사상(寫象)한 벡터 accel_xy와 X축과의 이루는 각도를 (angle_x), 벡터 accel_xy와 Y축과의 이루는 각도를 (angle_y)라고 표현한다. 또한, angle_x, angle_y, angle_z는 각각 0도 이상, 90도 이하의 값을 취한다.
도 6은 자세 특정부(122)가 실행하는 자세 특정 처리의 흐름도이다. 자세 특정부(122)는 2단계의 자세 판정을 행한다. 제1 단계에서는, 화상 처리 장치(10)의 자세가 수평 자세인지 판정된다. 화상 처리 장치(10)의 자세가, 수평 자세가 아니면, 제2 단계로 진행한다. 제2 단계에서는 화상 처리 장치(10)의 자세가 경사 자세 중, 도 4의 (a)에 도시하는 가로 방향(LANDSCAPE) 자세, 도 4의 (b)에 도시하는 가로 방향 상하 반전(LANDSCAPE_UPSIDE_DOWN) 자세, 도 4의 (c)에 도시하는 세로 방향 좌측 하향(PORTRAIT_LEFT_DOWN) 자세 또는 도 4의 (d)에 도시하는 세로 방향 우측 하향(PORTRAIT_RIGHT_DOWN) 자세 중 어느 것인지 판정된다. 도 6에 도시하는 흐름도에 있어서, 가로 방향 상하 반전(LANDSCAPE_UPSIDE_DOWN) 자세를 「UPSIDE_DOWN」, 세로 방향 좌측 하향(PORTRAIT_LEFT_DOWN) 자세를 「LEFT_DOWN」, 세로 방향 우측 하향(PORTRAIT_RIGHT_DOWN) 자세를 「RIGHT_DOWN」이라고 표기하고 있다. 자세 특정 처리는 소정의 주기로 반복 실행된다.
도 5의 (b)는 제1 단계의 판정 처리를 설명하기 위한 도면이다. 제1 단계에 있어서, 자세 특정부(122)는 벡터 G와 Z축의 이루는 각도(angle_z)가 각도 B 이하인지 판정한다(스텝 S10). 각도 B는, 예를 들어 10도로 설정되어 있다. angle_z가 각도 B 이하이면(스텝 S10의 "예"), 화상 처리 장치(10)가 수평 자세로 있는 것이 특정된다. 계속해서 자세 특정부(122)는 벡터 G의 Z축 성분(gz)이 플러스인지 마이너스인지를 판정하여(스텝 S12), gz가 플러스이면(스텝 S12의 "예"), 현재의 자세(ori)가 앞면 상향(FACE_UP) 자세인 것을 특정하고(스텝 S14), gz가 마이너스이면(스텝 S12의 "아니오"), 현재의 자세(ori)가 앞면 하향(FACE_DOWN) 자세인 것을 특정한다(스텝 S16). 특정된 자세(ori)는 다음번의 자세 특정 처리를 위해서, 직전의 자세(prev_ori)로서 기억된다(스텝 S50). 이 경우, 제1 단계에서 당회의 자세 특정 처리는 종료되고, 다음번의 자세 특정 처리가 스텝 S10부터 개시된다.
angle_z가 각도 B보다 큰 경우(스텝 S10의 "아니오"), 제2 단계의 판정 처리로 이행한다. 도 5의 (b)에는 angle_z가 각도 B보다도 큰 모습이 도시되어 있다. 도 5의 (c)는 제2 단계의 판정 처리를 설명하기 위한 도면이다.
제2 단계에 있어서, 자세 특정부(122)가 angle_z가 각도 E 이상인지 판정한다(스텝 S18). 각도 E는, 예를 들어 20도로 설정되어 있다(각도 A는 70도). angle_z가 각도 E 이상이면(스텝 S18의 "예"), 화상 처리 장치(10)가 경사 자세로 있는 것이 특정된다. 계속해서 자세 특정부(122)는 벡터 accel_xy와 Y축의 이루는 각도(angle_y)가 각도 D 이하인지 판정한다(스텝 S20). 각도 D는, 예를 들어 25도로 설정되어 있다. angle_y가 각도 D 이하이면(스텝 S20의 "예"), 벡터 G의 Y축 성분(gy)이 플러스인지 마이너스인지를 판정하여(스텝 S22), gy가 플러스이면(스텝 S22의 "예"), 현재의 자세(ori)가 가로 방향 상하 반전(LANDSCAPE_UPSIDE_DOWN) 자세인 것을 특정하고(스텝 S24), gy가 마이너스이면(스텝 S22의 "아니오"), 현재의 자세(ori)가 가로 방향(LANDSCAPE) 자세인 것을 특정한다(스텝 S26). 특정된 자세(ori)는 다음번의 자세 특정 처리를 위해서, 직전의 자세(prev_ori)로서 기억된다(스텝 S50).
한편, angle_y가 각도 D보다 큰 경우(스텝 S20의 "아니오"), 벡터 accel_xy와 X축의 이루는 각도(angle_x)가 각도 C 이하인지 판정한다(스텝 S28). 각도 C는, 예를 들어 25도로 설정되어 있다. angle_x가 각도 C 이하이면 (스텝 S28의 "예"), 벡터 G의 X축 성분(gx)이 플러스인지 마이너스인지를 판정하여(스텝 S30), gy가 플러스이면(스텝 S30의 "예"), 현재의 자세(ori)가 세로 방향 우측 하향(PORTRAIT_RIGHT_DOWN) 자세인 것을 특정하고(스텝 S32), gx가 마이너스이면(스텝 S30의 "아니오"), 현재의 자세(ori)가 세로 방향 좌측 하향(PORTRAIT_LEFT_DOWN) 자세인 것을 특정한다(스텝 S34). 특정된 자세(ori)는 다음번의 자세 특정 처리를 위해서, 직전의 자세(prev_ori)로서 기억된다(스텝 S50).
도 5의 (b)를 참조하여, angle_z가 각도 B보다도 크고, 각도 E보다도 작은 경우(스텝 S18의 "아니오"), 직전의 자세(prev_ori)가 수평 자세였는지 판정된다(스텝 S36). 즉 스텝 S36에서는 angle_z가 각도 B 이하였던 상태로부터, 각도 E에 도달하는 과정에 있는지 여부가 판정된다. 직전의 자세가 수평 자세였을 경우(스텝 S36의 "예"), 현재의 자세(ori)는 계속해서, 직전의 자세(prev_ori)로 설정된다(스텝 S38). 따라서, angle_z가 각도 B 이하였던 상태로부터, 각도 B보다 커졌지만, 아직 각도 E보다도 작으면, 현재의 자세는 직전의 자세와 동일하다고 특정된다. 이와 같이, 각도 B부터 각도 E의 사이에 중립 구역을 형성하고, 스텝 S10과 스텝 S18에 있어서의 판정의 경계를 연속시키지 않음으로써, 특정되는 자세가 수평 자세와 경사 자세의 사이에서 빈번히 교체되는 사태를 피할 수 있다. 한편, 직전의 자세(prev_ori)가 수평 자세가 아니었을 경우(스텝 S36의 "아니오"), 스텝 S20으로부터의 제2 단계의 판정 처리가 실행된다.
도 5의 (c)를 참조하여, angle_y가 각도 D보다도 크고, angle_x가 각도 C보다도 큰 경우(스텝 S28의 "아니오"), 직전의 자세(prev_ori)가 수평 자세였는지 판정된다(스텝 S40). 직전의 자세(prev_ori)가 수평 자세가 아니었을 경우(스텝 S40의 "아니오"), 현재의 자세(ori)는 계속해서, 직전의 자세(prev_ori)로 설정된다(스텝 S38). 따라서, angle_y가 각도 D이하였던 직전의 상태(가로 방향 상하 반전(LANDSCAPE_UPSIDE_DOWN) 자세 또는 가로 방향(LANDSCAPE) 자세)로부터, 각도 D보다도 커진 경우에는, 현재의 자세는 직전의 자세와 동일하다고 특정된다. 마찬가지로 angle_x가 각도 C이하였던 직전의 상태(세로 방향 우측 하향(PORTRAIT_RIGHT_DOWN) 자세 또는 세로 방향 좌측 하향(PORTRAIT_LEFT_DOWN) 자세)로부터, 각도 C보다도 커진 경우에는, 현재의 자세는 직전의 자세와 동일하다고 특정된다. 이와 같이, 중립 구역을 형성하고, 스텝 S20과 스텝 S28에 있어서의 판정의 경계를 연속시키지 않음으로써, 특정되는 자세가 빈번히 교체되는 사태를 피할 수 있다.
한편, 직전의 자세(prev_ori)가 수평 자세였을 경우(스텝 S40의 "예"), 현재의 자세가 수평 자세가 아님은 이미 판명되었으므로, 자세 특정부(122)는 화상 처리 장치(10)의 자세를 경사 자세 중 어느 하나로 특정할 필요가 있다. 그로 인해, 스텝 S20과 스텝 S28에 있어서의 판정의 경계를 연속시켜, 즉 각도 C 및 각도 D를, 각각 일시적으로 45도로 설정하여, 스텝 S20부터의 스텝을 재실행한다. 이에 의해, 자세 특정부(122)는 현재의 자세를 특정한다. 또한 자세를 특정한 후, 각도 C 및 각도 D는 원래의 값(25도)으로 복귀된다.
이상과 같이 하여, 자세 특정부(122)는 화상 처리 장치(10)의 자세를 특정한다. 또한, 자세 특정부(122)는 화상 처리 장치(10)가 경사 자세로부터 수평 자세로 변화했을 때, 수평 자세로 변화하기 직전의 경사 자세 정보를, 메인 메모리(44)에 유지한다. 직전 경사 자세 정보는 경사 자세 중, 가로 방향 자세, 가로 방향 상하 반전 자세, 세로 방향 좌측 하향 자세 또는 세로 방향 우측 하향 자세 중 어느 하나를 특정하는 정보이다. 예를 들어, 수평 자세로 변화하기 직전의 경사 자세가 가로 방향 자세이면, 자세 특정부(122)는 수평 자세가 유지되는 사이, 직전의 경사 자세가 가로 방향 자세였던 것을 나타내는 정보(직전 경사 자세 정보)를 메인 메모리(44)에 계속해서 유지한다. 화상 처리 장치(10)가 수평 자세로부터 경사 자세로 변화하면, 자세 특정부(122)는 직전 경사 자세 정보를, 메인 메모리(44)로부터 삭제한다. 또한, 카메라 기동 시에는 가로 방향 자세가 직전 경사 자세 정보의 초기값으로 설정된다.
방향 특정부(124)는 지자기 센서(26)의 검출값을 사용하여, 화상 처리 장치(10)의 방향을 특정하고, 구체적으로는 촬상부의 촬영 방향, 즉 촬상부의 광축과 북쪽 방향이 이루는 각도를 특정한다. 지자기 센서(26)는 3축의 자기 벡터를 검출하고, 각 축은 가속도 센서의 각 축과 같다. 방향 특정부(124)는 지자기 센서(26)의 검출값으로부터 북쪽 방향을 도출하고, 북쪽 방향을 기준으로 한 렌즈 광축의 방향(방위각)을 특정한다. 구체적으로 방향 특정부(124)는 북쪽을 기준(0도)으로 했을 때의 렌즈 광축의 방위각(촬영 방향)을, 0 내지 360도의 범위에서 특정한다. 렌즈 광축은 지자기 센서(26)(가속도 센서)의 Z축 방향에 대응한다.
이때, 렌즈 광축이 대략 연직 방향을 향하고 있으면, 도출한 기준 방향(북쪽)과, 렌즈 광축이 대략 수직이 되기 때문에, 방향 특정부(124)가 렌즈 광축 방향의 방위각을 안정되게 특정하는 것이 어렵다. 이 경우, 방향 특정부(124)가 지자기 센서(26)의 검출값만으로부터 렌즈 광축의 방위각을 특정하면, 화상 처리 장치(10)의 자세가 거의 변화하지 않아도, 지자기 센서(26)의 검출값 편차에 의해, 어떤 타이밍에서는 서쪽이라고 특정하고, 또한 다음 타이밍에서는 동쪽이라고 특정하는 일도 발생할 수 있다. 따라서 방향 특정부(124)는 자세 특정부(122)에 의해 특정된 자세 정보도 사용하여, 렌즈 광축 방향의 방위각을 특정한다.
구체적으로 방향 특정부(124)는 화상 처리 장치(10)가 수평 자세로 있는지 또는 경사 자세로 있는지에 따라, 기준 방향(북쪽)에 대한 방위각을 정하기 위한 방향을 설정한다. 화상 처리 장치(10)가 경사 자세로 있는 경우, 가속도 센서로 검출되는 Z축 성분은 수평 방향 성분을 포함하고 있기 때문에, Z축 방향을 사용해서 렌즈 광축의 방위각을 특정한다.
한편, 화상 처리 장치(10)가 수평 자세로 있을 경우, 방향 특정부(124)는 Z축 방향을 사용하지 않고, 자세 특정부(122)에 의해 메인 메모리(44)에 유지되어 있는 직전의 경사 자세 정보를 사용하여, 렌즈 광축의 방위각을 특정한다. 이하, 도 4의 (a)에 도시하는 가로 방향 자세에 있어서, 디스플레이의 4변을 정의하면, 디스플레이는 상측 긴 변, 우측 짧은 변, 하측 긴 변, 좌측 짧은 변으로 둘러싸여 있다.
예를 들어, 직전 경사 자세 정보가, 가로 방향 자세 또는 가로 방향 상하 반전 자세인 것을 나타내는 경우, 방향 특정부(124)는 도 5에 도시하는 Y축 방향을, 렌즈 광축에 대용하여, Y축과 북쪽과의 이루는 각도를 도출한다. 화상 처리 장치(10)가 가로 방향 자세로 있을 경우(도 4의 (a) 참조), 디스플레이의 상측 긴 변이 상변이 된다. 그로 인해, 화상 처리 장치(10)가 수평 자세가 되기 전에, 가로 방향 자세를 취하고 있었을 경우에는, 디스플레이의 상측 긴 변으로부터 수직으로 연장되는 방향(Y축 정방향)을 방위각의 기준으로 설정한다. 또한 화상 처리 장치(10)가 가로 방향 상하 반전 자세로 있을 경우(도 4의 (b) 참조), 디스플레이의 하측 긴 변이 상변이 된다. 그로 인해, 화상 처리 장치(10)가 수평 자세가 되기 전에, 가로 방향 상하 반전 자세를 취하고 있었을 경우에는, 디스플레이의 하측 긴 변에 수직으로부터 연장되는 방향(Y축 부방향)을 방위각의 기준으로 설정한다. 이상과 같이, 수평 자세가 되기 전에, 가로 방향 자세 또는 가로 방향 상하 반전 자세를 취하고 있었을 경우에는, 디스플레이의 긴 변에 수직인 방향(Y축 방향)을 방위각 도출의 기준으로 설정함으로써, 방향 특정부(124)는 안정되게 렌즈 광축의 방위각을 특정할 수 있다.
또한, 직전 경사 자세 정보가, 세로 방향 좌측 하향 자세 또는 세로 방향 우측 하향 자세인 것을 나타내는 경우, 방향 특정부(124)는 도 5에 도시하는 X축을, 렌즈 광축에 대용하여, X축과 북쪽과의 이루는 각도를 도출한다. 화상 처리 장치(10)가 세로 방향 좌측 하향 자세로 있을 경우(도 4의 (c) 참조), 디스플레이의 우측 짧은 변이 상변이 된다. 그로 인해, 화상 처리 장치(10)가 수평 자세가 되기 전에, 세로 방향 좌측 하향 자세를 취하고 있었을 경우에는, 디스플레이의 우측 짧은 변으로부터 수직으로 연장되는 방향(X축 정방향)을 방위각의 기준으로 설정한다. 또한 화상 처리 장치(10)가 세로 방향 우측 하향 자세로 있을 경우(도 4의 (d) 참조), 디스플레이의 좌측 짧은 변이 상변이 된다. 그로 인해, 화상 처리 장치(10)가 수평 자세가 되기 전에, 세로 방향 우측 하향 자세를 취하고 있었을 경우에는, 디스플레이의 좌측 짧은 변으로부터 수직으로 연장되는 방향(X축 부방향)을 방위각의 기준으로 설정한다. 이상과 같이, 수평 자세가 되기 전에, 세로 방향 좌측 하향 자세 또는 세로 방향 우측 하향 자세를 취하고 있었을 경우에는, 디스플레이의 짧은 변에 수직인 방향(X축 방향)을 방위각 도출의 기준으로 설정함으로써, 방향 특정부(124)는 안정되게 렌즈 광축의 방위각을 특정할 수 있다.
이상과 같이, 화상 처리 장치(10)가 수평 자세로 있을 경우, 방향 특정부(124)가, 메인 메모리(44)에 유지된 직전 경사 자세 정보를 사용하여, 화상 처리 장치(10)의 방향을 특정한다. 구체적으로 방향 특정부(124)는 직전 경사 자세 정보에 의해 특정되는 디스플레이의 상변에 수직인 방향에 기초하여, 화상 처리 장치(10)의 방향을 특정한다. 직전 경사 자세 정보는 메인 메모리(44)에 유지되면, 화상 처리 장치(10)의 자세가 수평 자세로부터 경사 자세로 변화할 때까지, 변경되지 않는다. 그로 인해, 수평 자세로 있는 동안에는 방위각 도출의 기준이 변경되지 않기 때문에, 렌즈 광축의 방위각을 안정되게 특정할 수 있게 된다. 따라서, 화상 처리 장치(10)의 자세에 다소의 변화가 있었다고 하더라도, 수평 자세를 유지하고 있는 동안에는 방위각 도출의 기준 방향에 변경이 없기 때문에, 신뢰성이 높고, 또한 사진 열람시에 유저가 납득할 수 있는 방위각을 도출할 수 있다.
촬영 모드에서, 접수부(102)가 입력 장치(20) 및 터치 패널(69)로부터 입력되는 유저에 의한 화상 데이터의 취득 지시를 접수하면, 화상 데이터 취득부(104) 및 센서 정보 처리부(120)에 동작 지시를 발행한다. 동작 지시를 받고, 화상 데이터 취득부(104)는 메인 메모리(44) 상에 전개되어 있는 화상 데이터를 취득하여, JPEG 형식으로 압축한다.
촬영 모드에서, 자세 특정부(122)는 3축 가속도 센서의 검출값을 사용하여, 자세 특정 처리를 주기적으로 실행한다. 자세 특정부(122)는 화상 처리 장치(10)의 소정의 주기로 자세를 특정하고, 동작 지시를 받은 시점의 자세 정보를 부속 정보 생성부(108)에 공급한다. 또한, 특정한 자세가 수평 자세를 보일 경우에는, 메인 메모리(44)에 유지하고 있는 직전 경사 자세 정보를 부속 정보 생성부(108)에 공급한다.
또한, 방향 특정부(124)는 지자기 센서(26)의 검출값과, 자세 특정부(122)에 의해 특정된 자세 정보를 사용하여, 화상 처리 장치(10)의 방향을 특정하고, 특정한 방향 정보를 부속 정보 생성부(108)에 공급한다.
부속 정보 생성부(108)는 센서 정보 처리부(120)로부터 공급되는 자세 정보, 방향 정보나, GPS 제어부(60)에서 측정된 GPS 측정 정보 등을 사용하여, Exif 파일을 생성한다. Exif 파일 포맷에는 화상 데이터의 구성에 관한 태그의 하나로서, 화상 방향(Orientation)이 규정되어 있다. 화상 방향은, 화상 데이터가 어디를 기점으로 하고, 어느 방향으로 기록되어 있는지를 나타내는 정보이다. 부속 정보 생성부(108)는 자세 정보 또는 직전 경사 자세 정보를 바탕으로, 화상 방향의 태그 값을 설정한다. 또한 부속 정보 생성부(108)는 방향 정보를 바탕으로, 촬영 방향(GPSImgDirection)의 태그 값을 설정한다.
화상 파일 생성부(106)는 화상 데이터 취득부(104)에서 압축된 화상 데이터와, 부속 정보 생성부(108)에서 생성된 Exif 파일과 통합하여, 하나의 화상 파일을 생성한다. 이에 의해, 자세 특정부(122)에서 특정된 자세 정보 및 방향 특정부(124)에서 특정된 방향 정보가 화상 데이터에 관련지어진 화상 파일이 생성된다. 화상 파일 생성부(106)는 생성한 화상 파일을 기록 미디어(80)에 기록한다.
이상의 내용은 촬영 모드에서의 화상 파일의 생성 처리인데, 이하, 어플리케이션 모드에서의 화상 파일의 생성 처리를 설명한다.
어플리케이션 모드에서, 어플리케이션 실행부(100)가 게임 프로그램을 실행하고, 표시 제어부(110)가 프레임 버퍼(112)에 버퍼링되는 게임 화상 데이터를 표시부(68)에 표시시킨다. 접수부(102)가, 유저로부터 스크린 샷의 생성 지시를 접수하면, 화상 데이터 취득부(104) 및 센서 정보 처리부(120)에, 동작 지시를 발행한다. 동작 지시를 받고, 화상 데이터 취득부(104)는 프레임 버퍼(112) 상에 전개되어 있는 화상 데이터를 취득하여, JPEG 형식으로 압축한다.
센서 정보 처리부(120)에 있어서, 자세 특정부(122)는 3축 가속도 센서의 검출값을 사용하여 자세 특정 처리를 실행한다. 자세 특정부(122)는 화상 처리 장치(10)의 자세를 특정하고, 특정한 자세 정보를 부속 정보 생성부(108)에 공급한다. 또한, 특정한 자세가 수평 자세를 보일 경우에는, 메인 메모리(44)에 유지하고 있는 직전 경사 자세 정보를 부속 정보 생성부(108)에 공급한다.
또한, 방향 특정부(124)는, 지자기 센서(26)의 검출값과, 자세 특정부(122)에 의해 특정된 자세 정보를 사용하여, 화상 처리 장치(10)의 방향을 특정하고, 특정한 방향 정보를 부속 정보 생성부(108)에 공급한다.
부속 정보 생성부(108)는, 센서 정보 처리부(120)로부터 공급되는 자세 정보, 방향 정보나, GPS 제어부(60)에서 측정된 GPS 측정 정보 등을 사용하여, Exif 파일을 생성한다. 화상 파일 생성부(106)는, 화상 데이터 취득부(104)에서 압축된 화상 데이터와, 부속 정보 생성부(108)에서 생성된 Exif 파일과 통합하여, 하나의 화상 파일을 생성한다. 이에 의해, 자세 특정부(122)에서 특정된 자세 정보 및 방향 특정부(124)에서 특정된 방향 정보가 화상 데이터에 관련지어진 화상 파일이 생성된다. 화상 파일 생성부(106)는 생성된 화상 파일을, 기록 미디어(80)에 기록한다.
종래, 스크린 샷의 화상 데이터에는, 스크린 샷 촬영시의 부속 정보가 관련지어지지 않았었다. 특히 게임기와 같은 전자 기기는, 유저에 의해 파지되는 자세가 거의 고정되어 있기 때문에, 스크린 샷에 Exif 파일의 화상 방향(Orientation)을 포함시킬 필요성도 부족하였다. 그러나, 본 실시예의 화상 처리 장치(10)는, 스크린 샷의 Exif 파일에 자세 특정부(122)에서 특정되는 자세 정보를 포함시킴으로써, 유저가 화상 처리 장치(10)를 세로로 들고 플레이하는 게임이 등장한 경우에도, 뷰어는 스크린 샷 촬영시의 화상 방향으로, 스크린 샷의 화상 데이터를 적절하게 재생하는 것이 가능하게 된다.
이상, 본 발명을 실시예를 바탕으로 설명하였다. 이 실시예는 예시이며, 그것들의 각 구성 요소나 각 처리 프로세스의 조합에 여러 변형예가 가능한 것, 또한 그러한 변형예도 본 발명의 범위에 있는 것은 당업자에게 이해되는 바이다.
실시예에 있어서 자세 특정부(122)는, 도 6에 나타내는 수순으로 화상 처리 장치(10)가 수평 자세로 있는지 또는 경사 자세로 있는지 특정하였다. 변형예에서는, 자세 특정부(122)는 단순하게 스텝 S10의 판정 스텝의 결과만을 기초로 하여, 수평 자세인지 여부를 판정해도 좋다.
본 발명은 화상 파일을 생성하는 기술 분야에 적용할 수 있다.
10: 화상 처리 장치
25: 모션 센서
26: 지자기 센서
44: 메인 메모리
65: 촬상 제어부
68: 표시부
69: 터치 패널
80: 기록 미디어
100: 어플리케이션 실행부
102: 접수부
104: 화상 데이터 취득부
106: 화상 파일 생성부
108: 부속 정보 생성부
110: 표시 제어부
112: 프레임 버퍼
120: 센서 정보 처리부
122: 자세 특정부
124: 방향 특정부
130: 메모리부

Claims (5)

  1. 화상 파일을 생성하는 화상 처리 장치로서,
    화상 데이터의 취득 지시를 접수하는 접수부와,
    상기 접수부가 취득 지시를 접수한 경우에, 화상 데이터를 취득하는 취득부와,
    가속도 센서의 검출값을 사용하여, 당해 화상 처리 장치의 자세를 특정하는 자세 특정부와,
    지자기 센서의 검출값과, 상기 자세 특정부에 의해 특정된 자세 정보를 사용하여, 당해 화상 처리 장치의 방향을 특정하는 방향 특정부와,
    상기 방향 특정부에 의해 특정된 방향 정보를 상기 화상 데이터에 관련지은 화상 파일을 생성하는 파일 생성부를 구비하고,
    상기 자세 특정부는, 당해 화상 처리 장치가 수평 자세로 있는지 또는 경사 자세로 있는지 판정하고,
    검출 각도가 제1 미리 정해진 각도 이하이면, 당해 화상 처리 장치는 수평 자세로 있고, 상기 검출 각도가 상기 제1 미리 정해진 각도보다 큰 제2 미리 정해진 각도 이상이면, 당해 화상 처리 장치는 경사 자세로 있으며, 상기 검출 각도가 상기 제1 미리 정해진 각도와 상기 제2 미리 정해진 각도 사이에 있으면, 당해 화상 처리 장치의 자세는 직전의 자세와 동일한 자세로 특정되고,
    당해 화상 처리 장치가 경사 자세로 있을 경우에, 상기 방향 특정부는 지자기 센서의 검출값과 렌즈 광축 방향에 기초하여, 당해 화상 처리 장치의 방향을 특정하고,
    상기 자세 특정부는, 당해 화상 처리 장치의 자세가 경사 자세로부터 수평 자세로 변화한 경우, 수평 자세가 되기 전의 경사 자세 정보를 메모리에 유지해 두고,
    당해 화상 처리 장치가 수평 자세로 있을 경우에, 상기 방향 특정부는 메모리에 유지된 경사 자세 정보에 의해 특정되는 디스플레이의 상변에 수직인 방향에 기초하여, 당해 화상 처리 장치의 방향을 특정하는 것을 특징으로 하는, 화상 처리 장치.
  2. 제1항에 있어서, 상기 방향 특정부는 당해 화상 처리 장치의 방향으로서, 렌즈 광축 방향의 방위각을 특정하는 것을 특징으로 하는, 화상 처리 장치.
  3. 제1항에 있어서, 상기 자세 특정부는, 당해 화상 처리 장치의 자세가 수평 자세로부터 경사 자세로 변화할 때까지, 경사 자세 정보를 변경하지 않는 것을 특징으로 하는, 화상 처리 장치.
  4. 제1항에 있어서, 상기 방향 특정부는, 당해 화상 처리 장치의 자세에 변화가 있어도 수평 자세를 유지하고 있는 동안에는, 메모리에 유지된 경사 자세 정보를 사용하여, 당해 화상 처리 장치의 방향을 특정하는 것을 특징으로 하는, 화상 처리 장치.
  5. 하우징에 탑재된 컴퓨터에,
    화상 데이터의 취득 지시를 접수하는 기능과,
    취득 지시를 접수한 경우에, 화상 데이터를 취득하는 기능과,
    가속도 센서의 검출값을 사용하여, 하우징의 자세를 특정하는 기능과,
    지자기 센서의 검출값과, 특정된 자세 정보를 사용하여, 하우징의 방향을 특정하는 기능과,
    특정된 방향 정보를 화상 데이터에 관련지은 화상 파일을 생성하는 기능을 실현시키는 프로그램을 기록한 컴퓨터 판독가능한 기록 매체로서,
    상기 자세를 특정하는 기능은, 당해 하우징이 수평 자세로 있는지 또는 경사 자세로 있는지 판정하고,
    검출 각도가 제1 미리 정해진 각도 이하이면, 당해 하우징은 수평 자세로 있고, 상기 검출 각도가 상기 제1 미리 정해진 각도보다 큰 제2 미리 정해진 각도 이상이면, 당해 하우징은 경사 자세로 있으며, 상기 검출 각도가 상기 제1 미리 정해진 각도와 상기 제2 미리 정해진 각도 사이에 있으면, 당해 하우징의 자세는 직전의 자세와 동일한 자세로 특정되고,
    당해 하우징이 경사 자세로 있을 경우에, 상기 방향을 특정하는 기능은, 지자기 센서의 검출값과 렌즈 광축 방향에 기초하여, 당해 하우징의 방향을 특정하고,
    상기 자세를 특정하는 기능은, 당해 하우징의 자세가 경사 자세로부터 수평 자세로 변화한 경우, 수평 자세가 되기 전의 경사 자세 정보를 메모리에 유지해 두고,
    당해 하우징이 수평 자세로 있을 경우에, 상기 방향을 특정하는 기능은, 메모리에 유지된 경사 자세 정보에 의해 특정되는 디스플레이의 상변에 수직인 방향에 기초하여, 당해 하우징의 방향을 특정하는 것을 특징으로 하는, 프로그램을 기록한 컴퓨터 판독가능한 기록 매체.
KR1020157017804A 2011-06-03 2012-04-05 화상 처리 장치 및 기록 매체 KR101589889B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011125654A JP5920863B2 (ja) 2011-06-03 2011-06-03 画像処理装置
JPJP-P-2011-125654 2011-06-03

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020137030757A Division KR20140004224A (ko) 2011-06-03 2012-04-05 화상 처리 장치 및 기록 매체

Publications (2)

Publication Number Publication Date
KR20150085121A KR20150085121A (ko) 2015-07-22
KR101589889B1 true KR101589889B1 (ko) 2016-02-01

Family

ID=47258685

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020137030757A KR20140004224A (ko) 2011-06-03 2012-04-05 화상 처리 장치 및 기록 매체
KR1020157017804A KR101589889B1 (ko) 2011-06-03 2012-04-05 화상 처리 장치 및 기록 매체

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020137030757A KR20140004224A (ko) 2011-06-03 2012-04-05 화상 처리 장치 및 기록 매체

Country Status (6)

Country Link
US (1) US9363466B2 (ko)
EP (1) EP2717563B1 (ko)
JP (1) JP5920863B2 (ko)
KR (2) KR20140004224A (ko)
CN (1) CN103548337B (ko)
WO (1) WO2012164807A1 (ko)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104104870B (zh) 2014-06-27 2018-05-18 北京智谷睿拓技术服务有限公司 拍摄控制方法、拍摄控制装置及拍摄设备
US9769942B2 (en) * 2015-06-25 2017-09-19 Frederick Longo Retractable display assembly
CN107040752B (zh) * 2015-07-29 2019-09-17 杭州海康威视数字技术股份有限公司 智能球型摄像机、监控系统及控制方法
JP6702100B2 (ja) * 2015-11-18 2020-05-27 カシオ計算機株式会社 情報処理装置、情報処理方法、及び、プログラム
KR101867345B1 (ko) * 2017-02-20 2018-06-18 (주)픽셀플러스 픽셀의 구동방법 및 이를 이용하는 cmos 이미지센서
EP3637756B1 (en) * 2017-05-18 2022-02-16 Sony Group Corporation Image capture device and image capture method

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005110031A (ja) * 2003-09-30 2005-04-21 Kyocera Corp 撮像装置
JP2007074077A (ja) * 2005-09-05 2007-03-22 Sharp Corp 画像撮像装置、プログラムおよび記録媒体

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08129216A (ja) * 1994-11-01 1996-05-21 Konica Corp 撮影情報を記録可能なカメラ
JPH09247512A (ja) * 1996-01-04 1997-09-19 Yasumasa Yamaguchi 測位装置付きの電子カメラ
US7554578B2 (en) 2000-07-11 2009-06-30 Phase One A/S Digital camera with integrated accelerometers
JP2003051997A (ja) * 2001-08-03 2003-02-21 Matsushita Electric Ind Co Ltd 映像記録装置
EP1345422A1 (en) 2002-03-14 2003-09-17 Creo IL. Ltd. A device and a method for determining the orientation of an image capture apparatus
KR100683850B1 (ko) * 2004-08-20 2007-02-16 삼성전자주식회사 파노라마 촬영 기능을 지원하는 촬영기기 및 촬영방법
US7159326B2 (en) * 2005-01-14 2007-01-09 Nokia Corporation Electronic device, computer program product and method of operating built-in compass
DE602006021219D1 (de) * 2005-11-11 2011-05-19 Sony Corp Bildverarbeitungseinrichtung, bildverarbeitungsverfahren, programm dafür, das programm enthaltendes aufzeichnungsmedium und abbildungseinrichtung
JP4851412B2 (ja) * 2007-09-27 2012-01-11 富士フイルム株式会社 画像表示装置、画像表示方法、及び画像表示プログラム
JP5223502B2 (ja) * 2008-07-03 2013-06-26 ヤマハ株式会社 方位追従表示装置、方位追従表示方法および方位追従表示プログラム
JP5347144B2 (ja) * 2009-02-03 2013-11-20 リコーイメージング株式会社 定点撮影が可能なカメラ
JP2011009846A (ja) 2009-06-23 2011-01-13 Sony Corp 画像処理装置、画像処理方法及びプログラム
US8243097B2 (en) * 2009-10-21 2012-08-14 Apple Inc. Electronic sighting compass
US8928696B1 (en) * 2010-05-25 2015-01-06 MCube Inc. Methods and apparatus for operating hysteresis on a hand held device

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005110031A (ja) * 2003-09-30 2005-04-21 Kyocera Corp 撮像装置
JP2007074077A (ja) * 2005-09-05 2007-03-22 Sharp Corp 画像撮像装置、プログラムおよび記録媒体

Also Published As

Publication number Publication date
JP2012253620A (ja) 2012-12-20
EP2717563A4 (en) 2014-11-12
JP5920863B2 (ja) 2016-05-18
EP2717563A1 (en) 2014-04-09
CN103548337A (zh) 2014-01-29
US20140092278A1 (en) 2014-04-03
KR20140004224A (ko) 2014-01-10
US9363466B2 (en) 2016-06-07
WO2012164807A1 (ja) 2012-12-06
EP2717563B1 (en) 2018-01-24
KR20150085121A (ko) 2015-07-22
CN103548337B (zh) 2017-03-08

Similar Documents

Publication Publication Date Title
CN102668541B (zh) 具有倾斜或透视校正的图像捕捉设备
KR101589889B1 (ko) 화상 처리 장치 및 기록 매체
CN110099198A (zh) 相机模块
US9332208B2 (en) Imaging apparatus having a projector with automatic photography activation based on superimposition
US20190068886A1 (en) Method for reducing parallax of multiple cameras and electronic device supporting the same
KR102439257B1 (ko) 모바일 장치
JP4236986B2 (ja) 撮影装置および方法並びにプログラム
US9277201B2 (en) Image processing device and method, and imaging device
WO2013190946A1 (ja) 撮像装置およびその動作制御方法
CN110049246A (zh) 电子设备的视频防抖方法、装置和电子设备
KR102477993B1 (ko) 표시 제어장치, 촬상 장치, 제어 방법 및 컴퓨터 판독 가능한 매체
JPWO2013145820A1 (ja) 撮影装置、方法、記憶媒体及びプログラム
KR20190014959A (ko) 움직임 정보에 기반하여 동영상을 재생하기 위한 장치 및 그의 동작 방법
JP2020119335A (ja) プログラム、カメラワークデータ生成方法および電子機器
WO2023275920A1 (ja) トリガー信号発生装置及び携帯端末
JP2007208596A (ja) データ再生機器、データ再生方法およびプログラム
CN110024368B (zh) 存储卡及动态图像播放装置
JP2012182576A (ja) 撮像装置及びプログラム
JP2015001568A (ja) 撮像装置、撮像装置の制御方法、プログラム

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20200107

Year of fee payment: 5