KR20180132063A - 개인의 생활 스토리 시뮬레이션 시스템 - Google Patents

개인의 생활 스토리 시뮬레이션 시스템 Download PDF

Info

Publication number
KR20180132063A
KR20180132063A KR1020187027477A KR20187027477A KR20180132063A KR 20180132063 A KR20180132063 A KR 20180132063A KR 1020187027477 A KR1020187027477 A KR 1020187027477A KR 20187027477 A KR20187027477 A KR 20187027477A KR 20180132063 A KR20180132063 A KR 20180132063A
Authority
KR
South Korea
Prior art keywords
user
animated
scene
images
implemented method
Prior art date
Application number
KR1020187027477A
Other languages
English (en)
Inventor
팅 추
지안쳉 수
Original Assignee
비브하이스트 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 비브하이스트 인코포레이티드 filed Critical 비브하이스트 인코포레이티드
Publication of KR20180132063A publication Critical patent/KR20180132063A/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • G06T13/203D [Three Dimensional] animation
    • G06T13/403D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/60Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
    • A63F13/65Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition
    • A63F13/655Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition by importing photos, e.g. of the player
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/80Special adaptations for executing a specific game genre or game mode
    • A63F13/825Fostering virtual characters
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/30Polynomial surface description
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/24Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Processing Or Creating Images (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

개인의 애니메이팅된 생활 스토리를 생성하기 위한 시스템이 도시된다. 시스템은 개인의 얼굴의 이미지를 캡처하고 개인의 얼굴의 컴퓨터-애니메이팅된 시뮬레이션을 생성할 수 있다. 개인의 얼굴의 컴퓨터-애니메이팅된 시뮬레이션은, 더 이전 시간 기간으로부터 현재까지 개인의 컴퓨터-생성 생활 스토리가 무비 또는 슬라이드쇼로서 생성될 수 있도록 개인의 개인 이력 데이터에 기반하여 컴퓨터-생성된 것에 겹쳐질 수 있다.

Description

개인의 생활 스토리 시뮬레이션 시스템
본 출원은 2016년 2월 24일에 출원된 미국 가특허 출원 일련번호 제 62/299,391호에 대해 우선권을 주장하고, 이 출원의 전체 내용들은 인용에 의해 명시적으로 본원에 포함된다.
본원에서 설명된 다양한 실시예들 및 양상들은 개인의 생활 스토리 시뮬레이션 시스템에 관한 것이다.
오늘날 전자 세계에서, 사람들은 자신의 생활의 슬라이드쇼(slideshow)들을 생성한다. 그렇게 하기 위해, 사람들은 자신들의 스토리를 스틸(still) 사진들 및/또는 비디오들을 통해 생성하기 위해 자신들, 친구들 및 가족, 및 그들이 있었던 장소들의 사진들을 어그리게이팅(aggregate)할 것이다. 개인이 자신들의 비디오를 가지면, 그들은, 적절할 때 이들 비디오들을 슬라이드쇼에 끼워넣거나 또는 함께 붙여진 일련의 비디오들을 생성하여 자신들의 스토리를 생성할 수 있다. 그러나, 모든 사람이 스토리를 생성하기 위해 자신들 또는 그들의 친구들 및 가족들 또는 그들이 있었던 장소들의 사진들 및 비디오들을 갖지는 못한다. 노인들은 자신의 어린 시절의 사진들 및 비디오들을 갖지 못할 수 있다. 이런 이유 때문에, 모든 사람이, 자신들 가까이에 있는 비디오들 및 사진들로 자신들의 스토리를 생성할 수 없을 것이다.
따라서, 개인의 스토리를 생성하기 위한 시스템 및 방법들이 당업계에 필요하다.
사용자가 자신의 얼굴 특징들로 시뮬레이팅된 생활 스토리를 맞춤화하게 하는 전자 플랫폼이 본원에서 개시된다. 전자 플랫폼은 사용자의 얼굴 사진을 찍고, 이어서 사진을 애니메이팅하고 애니메이팅된 얼굴 특징을, 사용자의 개인 이력 데이터에 기반하여 선택된 영화 또는 슬라이드쇼의 장면들로 애니메이팅된 개인 상에 겹쳐 놓는다. 이렇게 함으로써, 사용자가 특정 장소 또는 시간 기간(예컨대, 어린 시절)의 자신의 사진 또는 비디오를 가지지 않더라도, 사용자의 생활 스토리의 시뮬레이션은 사용자에 의해 제공된 개인 이력 데이터, 및 컴퓨터 생성 캐릭터가 사용자와 유사하도록 컴퓨터 생성 캐릭터 또는 몸체 상에 겹쳐진 사용자의 얼굴 사진에 의해 생성된다.
더 구체적으로, 사용자에 관한 시뮬레이팅된 스토리를 생성하기 위해 사용자의 하나 또는 그 초과의 얼굴 이미지들, 사용자의 현재 및 과거 생활 상황에 관한 이력 데이터를 어그리게이팅하고 그리고 이미지들과 이력 데이터를 병합하기 위한 컴퓨터 구현 방법에 있어서, 방법은 소프트웨어 애플리케이션으로 사용자 이력 데이터를 수집하는 단계; 사용자의 하나 또는 그 초과의 얼굴 이미지들을 수집하는 단계; 하나 또는 그 초과의 얼굴 이미지들을 애니메이팅하는 단계; 사용자의 애니메이팅된 얼굴 이미지를 사용자 이력 데이터에 기반하여 애니메이팅된 장면의 애니메이팅된 캐릭터 상에 병합하고; 그리고 병합된 애니메이팅된 얼굴 이미지 및 애니메이팅된 장면으로부터 슬라이드쇼 또는 무비 클립(movie clip)을 생성하는 단계를 포함한다. 슬라이드쇼 또는 무비 클립의 길이는 사용자로부터 획득된 정보의 양에 의존한다.
방법에서, 애니메이팅된 장면은 장소들, 직업들, 스포츠 및 생활 또는 근무 환경들의 비축 이미지들에 기반할 수 있다.
방법은 사용자의 나이를 고려하기 위해 사용자의 애니메이팅된 얼굴 이미지를 변경하는 단계들을 더 포함할 수 있다. 변경하는 단계는 사용자의 얼굴 특징들을 디지털적으로 평활화하거나 또는 사용자가 더 젊거나 더 늙게 보이게 하도록 사용자의 애니메이팅된 얼굴 이미지에 주름들을 부가하는 단계를 포함할 수 있다.
방법에서, 애니메이팅된 장면은 미리 만들어진 애니메이팅된 장면을 포함할 수 있다.
방법은 슬라이드쇼 또는 무비 클립으로부터 미리선택된 장면을 제시하는 단계; 및 빌딩들, 사람들 및/또는 물체들에 대한 장면의 선택 영역들에 맞춤화된 정보를 포함시키기 위한 옵션을 제공하는 단계를 더 포함할 수 있다.
옵션은 상표들, 단어들, 이미지들 또는 이의 조합들의 드롭 다운 리스트(drop down list)일 수 있다. 방법에서, 미리선택된 장면에 부가된 맞춤화된 정보는 슬라이드쇼 또는 무비 클립의 다른 장면들로 전달될 수 있다.
본원에서 개시된 다양한 실시예들의 이들 및 다른 특징들 및 장점들은 다음 상세한 설명 및 도면들에 관련하여 더 잘 이해될 것이고, 유사한 번호들은 전체에 걸쳐 유사한 부분들을 지칭한다.
도 1은 개인 생활 스토리 시뮬레이션 시스템의 개략도를 예시한다.
도 2는 사용자의 얼굴 사진 이미지를 획득하는 데 사용된 스마트 폰의 스크린을 예시한다.
도 3은, 사용자의 얼굴 사진 이미지가 획득된 이후 스마트 폰의 스크린을 예시하고 그리고 얼굴 사진 이미지가 수용가능한지 또는 거절되는지를 사용자가 확인하게 한다.
도 4는, 사용자가 남자인지 여자인지를 사용자가 표시하게 하는 스마트 폰의 스크린을 예시한다.
도 5는 컴퓨터 생성 캐릭터가 사용자의 몸체 타입을 반영하도록 사용자에 의해 변경될 수 있는 컴퓨터 생성 캐릭터의 몸체를 도시하는 스마트 폰의 스크린을 예시한다.
도 6은 나이 프로파일 스크린을 도시하는 스마트 폰의 스크린을 예시한다.
도 7은 어린 시절 기억 프로파일 스크린을 도시하는 스마트 폰의 스크린을 예시한다.
도 8은 십대 시절 기억 프로파일 스크린을 도시하는 스마트 폰의 스크린을 예시한다.
도 9는 성인 시절 기억 프로파일 스크린을 도시하는 스마트 폰의 스크린을 예시한다.
도 10은 시니어(senior) 시절 기억 프로파일 스크린을 도시하는 스마트 폰의 스크린을 예시한다.
도 11은 도시 프로파일 스크린을 도시하는 스마트 폰의 스크린을 예시한다.
도 12는 교육 프로파일 스크린을 도시하는 스마트 폰의 스크린을 예시한다.
도 13은 직업 프로파일 스크린을 도시하는 스마트 폰의 스크린을 예시한다.
도 14는 형상 프로파일 스크린을 도시하는 스마트 폰의 스크린을 예시한다.
도 15는 개인 또는 비지니스 광고 미리보기 스크린을 도시하는 스마트 폰의 스크린을 예시한다.
도 16은 플레이 스토리 스크린을 도시하는 스마트 폰의 스크린을 예시한다.
도 17은 스토리 비디오 클립을 도시하는 스마트 폰의 스크린을 예시한다.
이제 도면들을 참조하면, 사용자에 관한 시뮬레이팅된 스토리를 생성하기 위해 사용자의 하나 또는 그 초과의 얼굴 이미지들, 사용자의 현재 및 과거 생활 상황에 관한 이력 데이터를 어그리게이팅하고 그리고 이미지들 및 이력 데이터를 병합하기 위한 컴퓨터 구현 방법이 개시된다. 모바일 디바이스(예컨대, 스마트 폰)(10) 또는 데스크톱 컴퓨터 상의 애플리케이션은 사용자로부터 이미지들 및 이력 데이터를 수집하는 데 있어서 사용자를 안내할 수 있다. 애플리케이션은 사용자에 관한 이미지들 및 이력 데이터를 클라우드-기반 서버(12)에 송신할 수 있다. 사용자에 관한 이미지들 및 이력 데이터는 클라우드 기반 서버(12) 상의 사용자 데이터 저장소(14)에 저장될 수 있다. 사용자에 의해 입력에 이력 데이터에 기반하여, 서버(12)는 사용자의 생활에 대응하는 적합한 이미지(들) 및 비디오들을 선택한다. 서버(12)는 사용자의 얼굴 이미지들을 이미지들 및 비디오들 상에 겹쳐 놓고 사용자의 생활의 무비 또는 슬라이드쇼(18)를 생성한다.
이미지들 및 비디오들은 가상으로 생성되거나 제3자 비축 이미지들 및 비디오 콘텐츠 서비스들(16)(예컨대, bigstockphoto.com 또는 istockphoto.com)로부터 생성될 수 있다. 서버는 이미지들, 비축 이미지, 하우스(house)에서 생성된 이미지들, 비디오들, 비축 비디오들 및 하우스에서 생성된 비디오들의 저장소를 가질 수 있다.
이제 도 1을 참조하면, 스마트 폰 또는 태블릿 형태의 모바일 디바이스들(10)이 도시된다. 부가적으로, 데스크톱 컴퓨터(20)가 또한 도시된다. 컴퓨터 구현 방법은 스마트 폰 또는 태블릿 컴퓨터(10) 상의 앱을 시작하거나 데스크톱 컴퓨터(20) 상의 프로그램을 시작함으로써 개시될 수 있다. 애플리케이션의 시작 시, 시작 버튼(22)이 도시될 수 있고 시작 버튼(22)은, 사용자의 생활의 무비 또는 슬라이드쇼(18)가 시뮬레이팅되어 사용자 또는 다른 개인에게 도시될 수 있도록 사용자의 하나 또는 그 초과의 이미지들 및 사용자에 관한 이력 데이터를 어그리게이팅하기 위한 단계들을 통해 사용자를 안내한다.
시작 버튼(22)을 클릭할 때, 제1 단계는 사용자의 얼굴 사진 이미지를 획득한다. 도 2를 참조하면, 애플리케이션은 모바일 디바이스(10)의 전방 또는 후방 카메라로부터 이미지들을 획득하는 카메라 이미지 섹션(24) 및 스크린을 디스플레이한다. 애플리케이션은 전방 카메라를 디폴트 카메라로서 세팅한다. 사용자가 후방 카메라를 사용하면, 사용자는 전방 카메라와 후방 카메라 사이를 스위칭하기 위해 전방 및 후방 카메라 스위치 버튼(26)을 누를 수 있다. 카메라 이미지 섹션(24)은 수평 십자선(28a)을 따라 사용자의 눈들을 그리고 수직 십자선(28b)을 따라 사용자의 코를 정렬하도록 사용자에게 명령하는 십자선(28a, 28b)을 가질 수 있다. 사용자의 얼굴이 십자선들(28a, 28b)에 적절하게 정렬될 때, 사용자는 카메라 이미지 섹션(24)에 도시된 이미지를 캡처하기 위해 스크린(30)을 탭핑(tap)할 수 있다. 이미지를 캡처하기 전에, 사용자는 개인의 조명을 조정하기 위해 보조광(fill light) 버튼(30)을 누를 수 있다. 보조광 옵션(30)은, 카메라의 광이 사용자의 얼굴을 조명할 수 있도록 후방 카메라를 사용할 때만 턴 온될 수 있다. 이것은, 사용자의 친구가 사용자의 얼굴 이미지를 캡처하기 위해 모바일 디바이스(10)를 활용할 때 유용하다. 사용자가 셀피(selfie)에 의해 자신의 얼굴 이미지를 캡처하면, 사용자는 전방 카메라에 액세스하기 위해 전방 및 후방 카메라 스위치 버튼(26)을 누를 수 있다. 캡처된 이미지가 만족스럽지 않으면, 사용자는 취소 버튼(32)을 누를 수 있다. 대안적으로, 사용자는 모바일 디바이스(10) 상의 사진 갤러리에 의해 사용자의 얼굴 이미지를 업로드할 수 있다.
얼굴 이미지가 데스크톱 컴퓨터(20)로부터 사용자의 얼굴 이미지를 업로딩함으로써 캡처될 수 있다는 것이 또한 고려된다. 데스크톱 컴퓨터(20)는 또한 사용자의 얼굴 이미지를 캡처하는 데 사용될 수 있다. 특히, 데스크톱 컴퓨터(20)는 사용자의 얼굴 이미지를 캡처할 수 있는 카메라를 가질 수 있다.
사용자에 의해 입력된 얼굴 이미지들 및 이력 데이터는 서버(12) 상의 사용자 데이터 보관소에 저장된 고유 식별자와 연관될 수 있다. 따라서, 이것은, 사용자가 이미지들을 업로드하고 이력 데이터를 입력하여 사용자의 프로파일 및 사용자에 관한 요구되고 원해진 얼굴 이미지들 및 이력 데이터 모두를 완료할 때 사용자가 모바일 디바이스들(10)과 컴퓨터들(20) 사이에서 스위칭할 수 있도록 사용자에게 다양성 및 사용 용이성을 제공한다. 얼굴 이미지는 모바일 디바이스(10)에 의해 캡처될 수 있다. 사용자는 로그 아웃하고 업로드하여 사용자에 관한 이력 데이터를 데스크톱 컴퓨터(20) 상의 고유 식별자에 연관시킬 수 있고, 그 반대도 가능하다. 이에 관련하여, 사용자는 서버(12) 상의 사용자의 얼굴 이미지들 및 이력 데이터를 포함하는(그러나 이에 제한되지 않음) 정보 모두를 저장할 고유 식별자를 생성하기 위해 시스템에 로그인하여야 한다.
모바일 디바이스들(10) 사진 갤러리로부터 사진들을 캡처 또는 업로드하기 위해, 사용자는 모바일 디바이스들(10) 사진 갤러리에 액세스하고 사용자가 모바일 디바이스(10)의 앱을 통해 서버(12) 상의 사용자 데이터 저장소(14)에 업로드될 사진을 선택하게 하는 사진 갤러리 버튼(34)을 누를 수 있다.
이미지를 캡처하기 위해 스크린(30)을 탭핑한 이후, 사용자는 도 3에 도시된 바와 같이 취소 버튼(36) 또는 확인 버튼(38)을 누름으로써 카메라 이미지 섹션(24)에 도시된 얼굴 이미지를 취소하거나 확인하도록 요청받는다. 사용자는 또한, 사용자가 데이터를 입력하고 이미지들을 업로딩하거나 애플리케이션을 활용하는 데 어려움을 가지면 지원 및 도움 버튼(40)을 누를 수 있다.
확인 버튼(38)을 누를 때, 사용자는 도 4에 도시된 스크린으로 인도된다. 사용자는 남성 버튼(42) 또는 여성 버튼(44)을 누름으로써 자신의 남성 또는 여성 성별을 선택한다. 사용자는 또한, 사용자가 도 2에 도시된 이미지 캡처 스크린으로 다시 인도하는 이전 버튼(46)을 누름으로써 사진을 다시 취할 수 있다. 남성 또는 여성 버튼들(42, 44)을 누를 때, 사용자의 얼굴 이미지(48)는 몸체(50) 상에 겹쳐진다. 사용자는 애플리케이션은 애플리케이션에 관해 더 많은 것을 발견하기 위해 어바웃(about) 및 정보 버튼(52)을 누르고, 스토리 캐릭터 버튼(54)을 부가할 수 있다. 사용자는 또한 완전한 사용자 프로파일 버튼(56) 및 자원(volunteering) 기능 버튼(58)을 누를 수 있다. 사용자는 또한, 사용자가 위에서 논의된 사용자에 관한 충분한 양의 이력 데이터를 입력하고 얼굴 이미지를 찍었을 때 플레이 사용자의 생활 스토리 무비 버튼(60)을 누를 수 있다.
완전한 사용자 프로파일 버튼(56)을 누를 때, 하나 또는 그 초과의 데이터 카테고리들(62a-n)은 도 6에 도시된 바와 같이 스크린 상에 디스플레이된다. 데이터 카테고리들(62a-e)이 도시된다. 데이터 카테고리(62a)는 나이에 대한 것이다. 데이터 카테고리(62b)는 도시에 대한 것이다. 데이터 카테고리(62c)는 교육에 대한 것이다. 데이터 카테고리(62d)는 직업에 대한 것이다. 데이터 카테고리(62e)는 물리적 형상에 대한 것이다. 부가적인 데이터 카테고리들은 모바일 디바이스(10)의 스크린의 데이터 카테고리들 섹션(64)에서 우측으로부터 좌측으로 스크린을 스와이핑(swiping)함으로써 도시될 있다. 데이터 카테고리들(62f) 및 그 다음이 스크린 상에 도시될 것이다. 데이터 카테고리(62f)는 안경류에 대한 것이다. 데이터 카테고리(62g)는 머리카락에 대한 것이다. 데이터 카테고리(62h)는 드레스 또는 옷에 대한 것이다. 부가적인 데이터 카테고리들은 컴퓨터 구현 방법에 통합되고 데이터 카테고리(62i)를 누름으로써 도시될 수 있다.
나이에 대한 데이터 카테고리(62a)를 누를 때, 개인의 생활의 다양한 나이 스테이지들의 시각적 표현은 카테고리 옵션들 섹션(66)에서 데이터 카테고리들 섹션(64) 바로 위에 도시된다. 카테고리 옵션들 섹션(66)에서, 유아(68a), 초등 학교(68b), 십대(68c), 성인(68d) 및 시니어(68e) 이미지들이 도시된다. 사용자는 사용자의 나이에 관한 이력 데이터를 입력하기 위해 이미지들 중 하나를 누를 수 있다.
제한이 아닌 예로서, 사용자는 어린 시절 이미지(68b)를 누를 수 있고, 이때 사용자는 도 7에 도시된 스크린으로 지향될 것이다. 카테고리 옵션들 섹션(66)에서, 사용자는 그 나이에 관련된 다양한 정보(즉, 이력 데이터)를 입력할 수 있다. 제한이 아닌 예로서, 사용자는, 자신이 3 내지 12 세 였을 때 자신의 선호 게임을 입력할 수 있다. 카테고리 옵션들 섹션(66)에서 좌측 또는 우측으로 스와이핑함으로써, 다른 데이터, 이를테면 심오한 기억, 선호하는 장난감, 잊을 수 없는 활동 또는 익숙한 장면이 입력될 수 있다.
다시 도 6을 참조하면, 사용자는 십대 이미지(68c)를 누를 수 있고 도 8에 도시된 스크린으로 지향될 수 있다. 카테고리 옵션들 섹션(66)에서, 사용자는 그 나이에 관련된 다양한 정보를 입력할 수 있다. 제한이 아닌 예로서, 사용자는 사용자의 선호 게임, 선호 장난감, 심오한 기억, 잊을 수 없는 활동 및 익숙한 장면을 입력할 수 있다. 이들 다른 아이템들은 카테고리 옵션 섹션(66)의 스크린 상에서 좌측 및 우측으로 스와이핑함으로써 입력될 수 있다. 다시 도 6을 참조하면, 사용자는 이제 성인 이미지(68d)를 누를 수 있고 도 9에 도시된 스크린으로 지향될 수 있다. 카테고리 옵션들 섹션(66)에서, 사용자는 자신의 나이에 관련된 다양한 정보를 입력할 수 있다. 제한이 아닌 예로서, 사용자는 사용자의 선호 게임, 선호 장난감, 심오한 기억, 잊을 수 없는 활동 및 익숙한 장면을 입력할 수 있다.
사용자는 사용자를 도 10에 도시된 옵션들로 인도하는 유아 이미지(68a)를 누름으로써 또는 유아 나이에 대해 또는 시니어 이미지(68e)를 누름으로써 시니어 나이에 대해 사용자에 관련된 정보를 입력할 수 있다.
각각의 나이 범위에 대해, 사용자는 도시, 교육, 직업, 논의된 메모리, 안경류, 머리카락, 드레스, 형상에 관한 이력 데이터를 입력할 수 있다.
사용자는 또한 도시 데이터 카테고리(62b)를 누를 수 있다. 카테고리 옵션(66)에서, 사용자는, 사용자가 사는 도시 이름을 입력할 수 있다. 사용자는 "당신의 도시를 입력하세요" 링크를 클릭하고 사용자가 사는 도시를 입력할 수 있다. 컴퓨터 구현 방법은 사용자의 나이에 기반하여 하나 또는 그 초과의 도시들을 입력하도록 사용자에게 요청할 수 있다.
이제 도 12를 참조하면, 사용자는 데이터 카테고리(62c)를 누를 수 있고 사용자의 고등학교 이름 및 전문대 이름 또는 대학교 이름을 입력하기 위한 옵션들이 제공될 수 있다. 비록 도시되지 않았지만, 사용자에게는 사용자의 중학교 이름, 초등학교 이름 및 고등 교육 이름들을 입력하기 위한 옵션이 제시될 수 있다. 이것은 사용자가 카테고리 옵션들 섹션(66)에서 좌측 및 우측으로 슬라이딩하는 것을 허용함으로써 행해질 수 있다.
이제 도 13을 참조하면, 사용자는 자신의 직업을 특정하기 위해 데이터 카테고리(62d)를 누를 수 있다. 직업은 카테고리 옵션 섹션(66)에서 도 13에 도시된 바와 같이 시각적 표현에 의해 선택될 수 있거나 온 스크린 키보드에 의해 텍스추얼(textual) 입력될 수 있다.
이제 도 14를 참조하면, 사용자는, 카테고리 옵션 섹션(66)이 사용자의 성별에 대한 다양한 몸체 타입들을 예시하는 데이터 카테고리(62e)를 누를 수 있다. 사용자는 사용자의 가장 대표적인 몸체 타입을 선택할 수 있다. 사용자는 서버(12) 상의 사용자 데이터 저장소(14)에 사용자의 이력 데이터를 저장하는 완료(done) 버튼(68)을 탭핑할 수 있다.
위에서 논의된 바와 같이, 사용자는 섹션(64)의 데이터 카테고리들(62f-n)에서 우측에서 좌측으로 스와이핑함으로써 더 많은 데이터 카테고리들에 액세스할 수 있다. 이들 부가적인 데이터 카테고리 버튼들(62f-n)을 누를 때, 사용자에게는 이들 다른 타입들의 카테고리들에 관련된 사용자에 관한 많은 이력 데이터를 삽입하기 위한 옵션이 제시된다.
이제 도 15를 참조하면, 시뮬레이팅된 사용자 생활 스토리 무비 및/또는 슬라이드쇼로부터의 장면이 도시된다. 이에 관련하여, 사용자는 장면 내에 하나 또는 그 초과의 로고들(logos)을 포함할 수 있다. 장면은 버튼(62j)을 누름으로써 디스플레이될 수 있다. 선택적으로, 이런 특징은, 사용자가 자신의 연락처(예컨대, 이름, 주소, 전화 번호, 이메일 주소, 다른 개인 정보 및/또는 이들의 조합들)를 제공하면 멤버에게 멤버쉽을 제공하는 멤버 전용 옵션일 수 있다. 추가 옵션으로서, 멤버는 로고들, 상표들, 단어들, 맞춤 단어들 및/또는 그래픽들을 장면에 배치하는 능력에 대해 또한 비용을 지불하도록 요구받을 수 있다. 부가적으로, 회사들, 도시들, 장소들, 사람들은 자신의 상표, 로고, 정보가 노출되고 사용자에게 제시된 옵션 리스트에 있어서 회사 특정 정보가 장면에 배치가능한 옵션에 대해 비용을 지불할 수 있다. 광고 아이콘(62j)을 누를 때, 애니메이팅된 슬라이드쇼 또는 영화로부터의 하나 또는 그 초과의 장면들은 사용자에게 제시될 수 있고 사용자는 슬라이드쇼 또는 무비에서 위에서 식별된 로고(들) 또는 다른 정보를 포함시키는 옵션을 제공받을 수 있다. 사용자는 회사 특정 정보를 입력하기 위해 스크린 상의 영역들(82a, b, c, d-n)을 터치할 수 있다. 사용자는 상표를 입력할 수 있다. 대안적으로, 사용자에게는 영역들(82a-n)에 삽입될 수 있는 회사 특정 정보의 데이터베이스로부터 정보를 리트리빙하는 옵션들이 제시될 수 있다. 회사 특정 정보에 대한 옵션들은 사용자가 영역들(82a-n)에 삽입될 수 있는 다양한 가능한 회사 특정 정보 중 임의의 하나를 선택하는 옵션들의 리스트로서 팝업(pop up)될 수 있다. 사용자가 장면을 맞춤화한 이후, 사용자는 완료 버튼(80)을 누를 수 있다. 사용자에게는 부가적인 회사 특정 정보를 장면에 입력하기 위한 부가적인 스크린들이 제시될 수 있다. 대안적으로, 사용자는 장면에 삽입될 수 있는 옵션들의 리스트를 띄울 영역(82a)을 누를 수 있다. 사용자는 이들 옵션들 중 하나를 선택할 수 있다. 사용자는 또한 영역(82a)에 정보를 입력할 수 있다. 사용자가 키보드, 사진 갤러리 또는 옵션 리스트를 통해 영역(82a) 내의 정보의 옵션들 또는 타입들 중 하나를 선택할 때, 선택된 정보는 영역들(82b, c, d-n)의 장면으로 전파된다. 사용자가 상표들 및 로고들을 무비 또는 슬라이드쇼 중 하나 또는 그 초과의 장면들에 입력하는 것을 종료할 때, 사용자는 완료 버튼(80)을 누를 수 있고, 이때 사용자는 도 16에 도시된 스크린으로 지향될 것이다.
사용자는 위에서 논의된 사용자 데이터를 입력하는 프로세스 동안 언제라도 완료 버튼(68)을 누름으로써 시뮬레이팅된 사용자 생활 스토리를 볼 수 있다. 불충분한 양의 데이터가 입력되었다면, 완료 버튼(80)은 사용자에게 동일한 것을 표시하기 위해 비활성화되고 음영화될 수 있다. 충분한 사용자 이력 데이터가 애플리케이션에 입력되고 사용자 데이터 저장소(14)에 저장되었다면, 완료 버튼(80)은 활성화될 수 있다. 확인 버튼(68)을 누를 때, 사용자는 도 16에 도시된 스크린으로 인도된다.
시뮬레이팅된 사용자 생활 스토리 무비 및/또는 슬라이드쇼가 스크린 상에 도시된다. 사용자는 플레이 버튼(70)을 누름으로써 무비 또는 슬라이드쇼를 선택할 수 있고, 무비 또는 슬라이드쇼는 시뮬레이팅되고 사용자의 얼굴의 실제 사진은 비축 이미지들에 통합되고 비디오는 제3자 비축 이미지들 및 비디오 서비스들(16)로부터 리트리빙되고 사용자의 연대순 생활을 묘사하는 슬라이드쇼로 컴파일링된다. 사용자에 의해 제공된 정보에 기반하여, 부가적인 무비들 또는 슬라이드쇼들은 생성되고 무비 옵션들 섹션(72)에서 사용자에게 제시될 수 있다. 도 16에서, 3개의 상이한 무비 옵션들(72a-c)이 도시되지만, 부가적인 무비 옵션들은 또한 사용자가 좌측 및 우측으로 스와이핑하는 것을 허용함으로써 무비 옵션들 섹션에서 사용자에게 제시될 수 있다. 무비 클립들은 다운로드 버튼(74) 또는 공유 버튼(76)을 누름으로써 다운로드 및 공유될 수 있다.
사용자의 무비 클립 또는 슬라이드쇼를 생성할 때, 사용자의 얼굴 이미지들은 사용자의 나이에 매칭하도록 변경될 수 있다. 제한이 아닌 예로서, 사용자는, 자신이 중년일 때 사용자의 현재 얼굴 이미지들을 캡처할 수 있다. 자신의 현재 나이에서 사용자의 얼굴 이미지는 슬라이드쇼 또는 무비에 없다. 그러나, 사용자의 얼굴 이미지들은 컴퓨터 애니메이팅된 얼굴로 변환되고 이는 슬라이드쇼 또는 무비에 사용된 컴퓨터 애니메이팅된 얼굴이다. 게다가, 사용자의 컴퓨터 애니메이팅된 얼굴은 특정 장면에 묘사된 사용자의 특정 나이에 맞도록 사용자를 더 젊게 보이게 하기 위해 변경되거나 컴퓨터-생성될 수 있다. 예컨대, 사용자가 성인이면, 컴퓨터 애니메이팅된 이미지는 어린이처럼 사용자와 유사하도록 변경될 수 있고 어린이 같은 컴퓨터 애니메이팅된 이미지는 슬라이드쇼 또는 무비에서 어린 시절 기억들에 사용될 것이다. 오히려, 얼굴 이미지는 더 젊어 보이는 외관으로 변경되어, 사용자의 젊어 보이는 얼굴 이미지는 그 특정 시간대에 대한 배경 이미지들에 병합된다. 사용자의 얼굴 이미지는 사용자의 적합한 나이로 변경된다.
도 17은 시뮬레이션에 의해 사용자의 생활 스토리로 연대순으로 어그리게이팅되고 어셈블리되는 일련의 스틸 이미지들을 도시한다.
비디오 또는 무비는 또한 사용자가 장면을 좌측 및 우측으로 스캔하는 것을 허용하는 가상 현실 안경류(78) 상에 디스플레이될 수 있다.
위의 설명은 제한이 아닌 예로서 주어진다. 위의 개시가 주어지는 경우, 당업자는 본원에서 개시된 본 발명의 범위 및 사상 내에 있는 변형들을 고안할 수 있다. 게다가, 본원에서 개시된 실시예들의 다양한 특징들은 단독으로, 또는 서로 가변 조합들로 사용될 수 있고 본원에서 설명된 특정 조합으로 제한되도록 의도되지 않는다. 따라서, 청구항들의 범위는 예시된 실시예들에 의해 제한되지 않는다.

Claims (8)

  1. 사용자에 관한 시뮬레이팅된 스토리를 생성하기 위해 상기 사용자의 하나 또는 그 초과의 얼굴 이미지들, 상기 사용자의 현재 및 과거 생활 상황에 관한 이력 데이터를 어그리게이팅(aggregating)하고 그리고 이미지들 및 상기 이력 데이터를 병합하기 위한 컴퓨터 구현 방법으로서,
    소프트웨어 애플리케이션으로 사용자 이력 데이터를 수집하는 단계;
    상기 사용자의 하나 또는 그 초과의 얼굴 이미지들을 수집하는 단계;
    상기 하나 또는 그 초과의 얼굴 이미지들을 애니메이팅(animating)하는 단계;
    상기 사용자 이력 데이터에 기반하여 애니메이팅된 장면의 애니메이팅된 캐릭터 상에 상기 사용자의 애니메이팅된 얼굴 이미지를 병합하는 단계;
    병합된 애니메이팅된 얼굴 이미지 및 애니메이팅된 장면으로부터 슬라이드쇼(slideshow) 또는 무비 클립(movie clip)을 생성하는 단계
    를 포함하는,
    컴퓨터 구현 방법.
  2. 제2 항에 있어서,
    상기 애니메이팅된 장면은 장소들, 직업들 및 스포츠들의 비축 이미지들에 기반하는,
    컴퓨터 구현 방법.
  3. 제1 항에 있어서,
    상기 사용자의 나이를 고려하기 위해 상기 사용자의 상기 애니메이팅된 얼굴 이미지를 변경하는 단계들을 더 포함하는,
    컴퓨터 구현 방법.
  4. 제3 항에 있어서,
    상기 변경하는 단계는 상기 사용자의 얼굴 특징들을 디지털적으로 평활화하거나 또는 상기 사용자가 더 젊거나 더 늙게 보이게 하도록 상기 사용자의 애니메이팅된 얼굴 이미지에 주름들을 부가하는 단계를 포함하는,
    컴퓨터 구현 방법.
  5. 제1 항에 있어서,
    상기 애니메이팅된 장면은 미리 만들어진 애니메이팅된 장면을 포함하는,
    컴퓨터 구현 방법.
  6. 제1 항에 있어서,
    상기 슬라이드쇼 또는 무비 클립으로부터 미리선택된 장면을 제시하는 단계;
    빌딩들, 사람들 및/또는 물체들에 대한 장면의 선택 영역들에 맞춤화된 정보를 포함시키기 위한 옵션을 제공하는 단계
    를 더 포함하는,
    컴퓨터 구현 방법.
  7. 제6 항에 있어서,
    상기 옵션은 상표들, 단어들, 이미지들 또는 이의 조합들의 드롭 다운 리스트(drop down list)인,
    컴퓨터 구현 방법.
  8. 제6 항에 있어서,
    상기 미리선택된 장면에 부가된 상기 맞춤화된 정보는 상기 슬라이드쇼 또는 무비 클립의 다른 장면들로 전달되는,
    컴퓨터 구현 방법.
KR1020187027477A 2016-02-24 2017-02-24 개인의 생활 스토리 시뮬레이션 시스템 KR20180132063A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201662299391P 2016-02-24 2016-02-24
US62/299,391 2016-02-24
PCT/US2017/019444 WO2017147484A1 (en) 2016-02-24 2017-02-24 Personal life story simulation system

Publications (1)

Publication Number Publication Date
KR20180132063A true KR20180132063A (ko) 2018-12-11

Family

ID=59685686

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020187027477A KR20180132063A (ko) 2016-02-24 2017-02-24 개인의 생활 스토리 시뮬레이션 시스템

Country Status (6)

Country Link
US (1) US20190051032A1 (ko)
EP (1) EP3420534A4 (ko)
JP (1) JP2019514095A (ko)
KR (1) KR20180132063A (ko)
CN (1) CN109416840A (ko)
WO (1) WO2017147484A1 (ko)

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9912860B2 (en) 2016-06-12 2018-03-06 Apple Inc. User interface for camera effects
DK180859B1 (en) 2017-06-04 2022-05-23 Apple Inc USER INTERFACE CAMERA EFFECTS
US11112964B2 (en) 2018-02-09 2021-09-07 Apple Inc. Media capture lock affordance for graphical user interface
US10375313B1 (en) 2018-05-07 2019-08-06 Apple Inc. Creative camera
US11722764B2 (en) 2018-05-07 2023-08-08 Apple Inc. Creative camera
DK201870623A1 (en) 2018-09-11 2020-04-15 Apple Inc. USER INTERFACES FOR SIMULATED DEPTH EFFECTS
US10645294B1 (en) 2019-05-06 2020-05-05 Apple Inc. User interfaces for capturing and managing visual media
US11770601B2 (en) 2019-05-06 2023-09-26 Apple Inc. User interfaces for capturing and managing visual media
US11128792B2 (en) 2018-09-28 2021-09-21 Apple Inc. Capturing and displaying images with multiple focal planes
US11321857B2 (en) 2018-09-28 2022-05-03 Apple Inc. Displaying and editing images with depth information
US11062387B2 (en) 2018-11-16 2021-07-13 Money Experience, Inc. Systems and methods for an intelligent interrogative learning platform
US11706521B2 (en) 2019-05-06 2023-07-18 Apple Inc. User interfaces for capturing and managing visual media
US11054973B1 (en) 2020-06-01 2021-07-06 Apple Inc. User interfaces for managing media
US11212449B1 (en) * 2020-09-25 2021-12-28 Apple Inc. User interfaces for media capture and management
US11769198B1 (en) * 2020-10-09 2023-09-26 Wells Fargo Bank, N.A. Profile based video creation
US11463657B1 (en) 2020-11-10 2022-10-04 Know Systems Corp. System and method for an interactive digitally rendered avatar of a subject person
US11140360B1 (en) 2020-11-10 2021-10-05 Know Systems Corp. System and method for an interactive digitally rendered avatar of a subject person
US11582424B1 (en) 2020-11-10 2023-02-14 Know Systems Corp. System and method for an interactive digitally rendered avatar of a subject person
US11778339B2 (en) 2021-04-30 2023-10-03 Apple Inc. User interfaces for altering visual media
US11539876B2 (en) 2021-04-30 2022-12-27 Apple Inc. User interfaces for altering visual media

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7859551B2 (en) * 1993-10-15 2010-12-28 Bulman Richard L Object customization and presentation system
EP0729271A3 (en) * 1995-02-24 1998-08-19 Eastman Kodak Company Animated image presentations with personalized digitized images
US8103947B2 (en) * 2006-04-20 2012-01-24 Timecove Corporation Collaborative system and method for generating biographical accounts
CN101568969B (zh) * 2006-12-20 2013-05-08 高智83基金会有限责任公司 故事共享自动化
US20080158230A1 (en) * 2006-12-29 2008-07-03 Pictureal Corp. Automatic facial animation using an image of a user
US8391639B2 (en) * 2007-07-23 2013-03-05 The Procter & Gamble Company Method and apparatus for realistic simulation of wrinkle aging and de-aging
SG152952A1 (en) * 2007-12-05 2009-06-29 Gemini Info Pte Ltd Method for automatically producing video cartoon with superimposed faces from cartoon template
US8907984B2 (en) * 2009-07-08 2014-12-09 Apple Inc. Generating slideshows using facial detection information
US9466142B2 (en) * 2012-12-17 2016-10-11 Intel Corporation Facial movement based avatar animation

Also Published As

Publication number Publication date
CN109416840A (zh) 2019-03-01
EP3420534A1 (en) 2019-01-02
JP2019514095A (ja) 2019-05-30
US20190051032A1 (en) 2019-02-14
EP3420534A4 (en) 2019-10-09
WO2017147484A1 (en) 2017-08-31

Similar Documents

Publication Publication Date Title
KR20180132063A (ko) 개인의 생활 스토리 시뮬레이션 시스템
CN101836210A (zh) 虚拟世界中的数字多媒体共享
CN114930399A (zh) 使用基于表面的神经合成的图像生成
US11302038B2 (en) System and method for generating an augmented reality experience
CN115803723A (zh) 在消息收发系统中更新化身状态
US20230379287A1 (en) Event overlay invite messaging system
US11517826B2 (en) Game result overlay system
US20220076492A1 (en) Augmented reality messenger system
CN110959166B (zh) 信息处理设备、信息处理方法、信息处理系统、显示设备和预订系统
US11832015B2 (en) User interface for pose driven virtual effects
CN115867882A (zh) 用于图像的基于出行的增强现实内容
JP7343660B2 (ja) 画像処理装置、画像処理方法、プログラムおよび記録媒体
US20160035016A1 (en) Method for experiencing multi-dimensional content in a virtual reality environment
US20230269345A1 (en) Recorded sound thumbnail
CN109074680A (zh) 基于通信的增强现实中实时图像和信号处理方法和系统
CN115812217A (zh) 用于评论的基于出行的增强现实内容
KR20200028830A (ko) 실시간 cg 영상 방송 서비스 시스템
JP7313847B2 (ja) 撮影システム、撮影装置、管理装置及び撮影方法
KR101268640B1 (ko) 대형 스크린을 위한 디스플레이 시스템 및 그 시스템의 동작 방법
CN114846808A (zh) 内容发布系统、内容发布方法以及内容发布程序
KR102655959B1 (ko) 전시 공간 연출 시스템 및 방법
JP6849851B2 (ja) 撮影システム、撮影装置及びユーザ撮影方法
JP7102937B2 (ja) 遊戯画像撮影システム
JP7445272B1 (ja) 動画処理方法、動画処理システム、及び動画処理プログラム
US20240071004A1 (en) Social memory re-experiencing system