TWI621097B - 行動裝置、操作方法及非揮發性電腦可讀取記錄媒體 - Google Patents

行動裝置、操作方法及非揮發性電腦可讀取記錄媒體 Download PDF

Info

Publication number
TWI621097B
TWI621097B TW103140286A TW103140286A TWI621097B TW I621097 B TWI621097 B TW I621097B TW 103140286 A TW103140286 A TW 103140286A TW 103140286 A TW103140286 A TW 103140286A TW I621097 B TWI621097 B TW I621097B
Authority
TW
Taiwan
Prior art keywords
augmented reality
reality object
mobile device
parameter data
angle
Prior art date
Application number
TW103140286A
Other languages
English (en)
Other versions
TW201619915A (zh
Inventor
林容暄
魏士堯
王榮陞
周世俊
Original Assignee
財團法人資訊工業策進會
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 財團法人資訊工業策進會 filed Critical 財團法人資訊工業策進會
Priority to TW103140286A priority Critical patent/TWI621097B/zh
Priority to CN201410716993.2A priority patent/CN105719350A/zh
Priority to JP2015051625A priority patent/JP6006820B2/ja
Priority to US14/715,558 priority patent/US20160148430A1/en
Publication of TW201619915A publication Critical patent/TW201619915A/zh
Application granted granted Critical
Publication of TWI621097B publication Critical patent/TWI621097B/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/20—Indexing scheme for editing of 3D models
    • G06T2219/2016—Rotation, translation, scaling

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • Architecture (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)
  • Geometry (AREA)

Abstract

一種於行動裝置上修改3D擴增實境物件的操作方法包括：執行一行動裝置應用程式，該行動裝置應用程式提供一使用者介面，以呈現一3D環境影像和一3D擴增實境物件，提供一操作功能以供於該3D環境影像中調整該3D擴增實境物件的尺寸、角度和位置其中之任一，以及提供一確認功能以記錄對應調整完成的3D擴增實境物件的尺寸、角度和位置之參數資料；以及將該參數資料傳送到一伺服器，作為一更新的參數資料，以令該伺服器得以依據該更新的參數資料，更新該行動裝置中的參數資料。

Description

行動裝置、操作方法及非揮發性電腦可讀取記錄媒體
本案涉及一種行動裝置、操作方法、以及非揮發性電腦可讀取記錄媒體。具體而言，本案涉及一種可修改3D擴增實境物件的行動裝置、於行動裝置上修改3D擴增實境物件的操作方法、以及非揮發性電腦可讀取記錄媒體。
隨著科技的發展，擴增實境技術(augmented reality technology)已廣泛地應用在人們的生活當中。
擴增實境為一種即時性結合虛擬物件至真實環境影像，並顯示結合影像予使用者的技術。藉由運用擴增實境技術，可豐富人們的生活。
前案WO2013023705 A1揭示一種建立擴增實境物件的方法。此外，前案US20140043359 A1揭示一種改善擴增實境物件的特徵點的方法。
然而，即便應用此些前案，設計者仍不易精細地結合虛擬物件至真實環境影像，尤其是設計者無法透過欲執行擴增實境軟體的電子裝置(如行動裝置)，來直接修改擴增實境物件。如此一來，將造成擴增實境於製作與修改上的不便。
本案一實施態樣的目的涉及提供一種於行動裝置上修改3D擴增實境物件的操作方法。
本案另一實施態樣的目的涉及提供一種可修改3D擴增實境物件的行動裝置。
本案另一實施態樣的目的涉及提供一種非揮發性電腦可讀取記錄媒體。此一非揮發性電腦可讀取記錄媒體儲存一電腦程式。此一電腦程式用以執行於行動裝置上以修改3D擴增實境物件的操作方法。
根據本案一實施例，於行動裝置上修改3D擴增實境物件的該操作方法包括：經由一行動裝置執行一行動裝置應用程式，該行動裝置應用程式提供一使用者介面，以呈現一3D環境影像和一3D擴增實境物件，提供一操作功能以 供於該3D環境影像中調整該3D擴增實境物件的尺寸、角度和位置其中之任一，以及提供一確認功能以記錄對應調整完成的3D擴增實境物件的尺寸、角度和位置之參數資料；以及經由該行動裝置將該參數資料傳送到一伺服器，作為一更新的參數資料，以令該伺服器得以依據該更新的參數資料，更新該行動裝置中的參數資料。
根據本案一實施例，該操作方法更包括：利用該使用者介面，以更提供一錄影功能，以供於調整該3D擴增實境物件的尺寸、角度和位置其中之任一時，以錄影方式紀錄調整過程，以產生一錄影資料；以及經由該行動裝置將該錄影資料傳送至該伺服器。
根據本案一實施例，其中該些參數資料係用以決定該3D擴增實境物件於該3D環境影像中的相對尺寸、旋轉角度、相對位置、以及一動畫之資訊中的至少一者。
根據本案一實施例，該操作方法更包括：利用一攝像元件，對一真實環境進行影像擷取，以取得該3D環境影像；根據該3D環境影像，取得該攝像元件與該真實環境的一位置關係；以及當透過該使用者介面接收到對應於該3D擴增實境物件的一事件編輯指令時，根據該位置關係，決定相應於該3D擴增實境物件的一事件。
根據本案一實施例，該操作方法更包括：利用該使用者介面，以更提供一建立動畫功能，且該建立動畫功能包括：在接收對應於該3D擴增實境物件的一拖曳手勢時，根據該拖曳手勢的一路徑，移動該3D擴增實境物件；以及 記錄移動該3D擴增實境物件的過程，以作為該3D擴增實境物件的一使用者自訂動畫。
根據本案一實施例，可修改3D擴增實境物件的行動裝置包括：一網路元件以及一處理元件。該處理元件用以：執行一行動裝置應用程式，該行動裝置應用程式提供一使用者介面，以呈現一3D環境影像和一3D擴增實境物件，提供一操作功能以供於該3D環境影像中調整該3D擴增實境物件的尺寸、角度和位置其中之任一，以及提供一確認功能以記錄對應調整完成的3D擴增實境物件的尺寸、角度和位置之參數資料；以及經由該網路元件將該參數資料傳送到一伺服器，作為一更新的參數資料，以令該伺服器得以依據該更新的參數資料，更新該行動裝置中的參數資料。
根據本案一實施例，其中該使用者介面更提供一錄影功能，以供於調整該3D擴增實境物件的尺寸、角度和位置其中之任一時，以錄影方式紀錄調整過程，以產生一錄影資料；且該處理元件更用以經由該網路元件將該錄影資料傳送至該伺服器。
根據本案一實施例，其中該些參數資料係用以決定該3D擴增實境物件於該3D環境影像中的相對尺寸、旋轉角度、相對位置、以及一動畫之資訊中的至少一者。
根據本案一實施例，該行動裝置更包括一攝像元件。該處理元件更用以：利用該攝像元件，對一真實環境進行影像擷取，以取得該3D環境影像和該3D擴增實境物件影像；根據該3D環境影像，取得該攝像元件與該真實環境的 一位置關係；以及當透過該使用者介面接收到對應於該3D擴增實境物件的一事件編輯指令時，根據該位置關係，決定相應於該3D擴增實境物件的一事件。
根據本案一實施例，其中該使用者介面更提供一建立動畫功能，且該建立動畫功能包括：在接收對應於該3D擴增實境物件的一拖曳手勢時，根據該拖曳手勢的一路徑，移動該3D擴增實境物件；且該處理元件更用以記錄移動該3D擴增實境物件的過程，以作為該3D擴增實境物件的一使用者自訂動畫。
根據本案一實施例，該非揮發性電腦可讀取記錄媒體所儲存的該電腦程式所用以執行的操作方法包括以下步驟：經由一行動裝置執行一行動裝置應用程式，該行動裝置應用程式提供一使用者介面，以呈現一3D環境影像和一3D擴增實境物件，提供一操作功能以供於該3D環境影像中調整該3D擴增實境物件的尺寸、角度和位置其中之任一，以及提供一確認功能以記錄對應調整完成的3D擴增實境物件的尺寸、角度和位置之參數資料；以及經由該行動裝置將該參數資料傳送到一伺服器，作為一更新的參數資料，以令該伺服器得以依據該更新的參數資料，更新該行動裝置中的參數資料。
透過應用上述一實施例，設計者便可伴隨3D環境影像，即時地編緝3D擴增實境物件。
100‧‧‧行動裝置
110‧‧‧顯示元件
120‧‧‧輸入元件
130‧‧‧攝像元件
140‧‧‧網路元件
150‧‧‧儲存元件
160‧‧‧處理元件
10‧‧‧伺服器
DST‧‧‧距離
ORT‧‧‧方位
ANG‧‧‧角度
DBS‧‧‧資料庫
RWD‧‧‧真實環境
RWT‧‧‧真實物件
CNT‧‧‧中心點
TRM‧‧‧位置轉換矩陣
UI‧‧‧使用者介面
IMG1‧‧‧3D環境影像
IMG2‧‧‧真實物件影像
B1‧‧‧按鈕
B2‧‧‧按鈕
B3‧‧‧按鈕
B4‧‧‧按鈕
ART‧‧‧3D擴增實境物件
MTG‧‧‧標記
TRC‧‧‧路徑
PLC1‧‧‧位置
PLC2‧‧‧位置
INV1‧‧‧區間
IMG2‧‧‧區間
IMG3‧‧‧區間
700‧‧‧操作方法
S1‧‧‧步驟
S2‧‧‧步驟
第1圖為根據本案一實施例所繪示的行動裝置的示意圖；第2圖為根據本案一應用例所繪示的行動裝置與真實環境的示意圖；第3A圖為根據本案一操作例所繪示的行動裝置之使用者介面的示意圖；第3B圖為根據本案一操作例所繪示的行動裝置之使用者介面的示意圖；第4圖為根據本案一操作例所繪示的行動裝置之使用者介面的示意圖；第5圖為根據本案一操作例所繪示的行動裝置之使用者介面的示意圖；第6圖為根據本案一操作例所繪示的行動裝置與真實環境物件的示意圖；第7圖為根據本發明一實施例的行動裝置之操作方法的流程圖。
以下將以圖式及詳細敘述清楚說明本揭示內容之精神，任何所屬技術領域中具有通常知識者在瞭解本揭示內容之實施例後，當可由本揭示內容所教示之技術，加以改變及修飾，其並不脫離本揭示內容之精神與範圍。
關於本文中所使用之『第一』、『第二』、...等，並非特別指稱次序或順位的意思，亦非用以限定本發明，其僅為了區別以相同技術用語描述的元件或操作。
關於本文中所使用之『電性連接』，可指二或多個元件相互直接作實體或電性接觸，或是相互間接作實體或電性接觸，而『電性連接』還可指二或多個元件元件相互操作或動作。
關於本文中所使用之『包含』、『包括』、『具有』、『含有』等等，均為開放性的用語，即意指包含但不限於。
關於本文中所使用之『及/或』，係包括所述事物的任一或全部組合。
關於本文中所使用之用詞(terms)，除有特別註明外，通常具有每個用詞使用在此領域中、在此揭露之內容中與特殊內容中的平常意義。某些用以描述本揭露之用詞將於下或在此說明書的別處討論，以提供本領域技術人員在有關本揭露之描述上額外的引導。
本發明的一實施態樣為一種行動裝置。此一行動裝置可顯示3D環境影像與3D擴增實境物件。為使說明清楚，在以下段落中，將以平板電腦或智慧型手機為例進行敘述，然而本案不以此為限。
參照第1圖，為根據本案一實施例所繪示的行動裝置100的示意圖。在本實施例中，行動裝置100主要包括網路元件140以及處理元件160。在本實施例中，處理元件160 可電性連接網路元件140。網路元件140主要是提供行動裝置100可經由無線通訊網路和遠端伺服器連線，例如可用無線訊號晶片實現。處理元件160可執行一行動裝置應用程式(如APP程式)，可提供一使用者介面，呈現一3D環境影像和一3D擴增實境物件，並提供一操作功能，讓使用者可以在3D環境影像中調整3D擴增實境物件的尺寸、角度或是位置。之後行動裝置應用程式還提供確認功能讓使用者選擇執行之後，記錄對應調整完成的3D擴增實境物件的尺寸、角度和位置的參數資料，然後經由網路元件160將參數資料傳送到遠端的伺服器，作為更新的參數資料。伺服器可以依據更新的參數資料，來更新該行動裝置100(或其他安裝有擴增實境軟體可呈現3D環境影像和3D擴增實境物件的行動裝置)中的參數資料。
同時參照第1圖與第2圖。第1圖為根據本案另一實施例所繪示的行動裝置100的示意圖。第2圖為根據本案一應用例所繪示的行動裝置100與真實環境RWD的示意圖。在本實施例中，行動裝置100包括顯示元件110、輸入元件120、攝像元件130、網路元件140、儲存元件150、以及處理元件160。在本實施例中，處理元件160可分別電性連接顯示元件110、輸入元件120、攝像元件130、網路元件140以及儲存元件150。
在本實施例中，顯示元件110例如可用液晶顯示器(liquid crystal display，LCD)、主動式有機發光顯示器、觸控顯示面板或其他具顯示能力之顯示元件實現。輸入元件120例如可用觸控面板或其他具輸入能力之輸入元件實現。攝像元件130例如可用攝像鏡頭、照相機、攝影機或相關元件實 現。網路元件140例如可用無線訊號晶片實現。儲存元件150例如可用記憶體、可攜式儲存媒介、或其它適當儲存裝置實現。處理元件160例如可用中央處理器、微處理器或其它適當計算裝置實現。在一實施例中，輸入元件120與顯示元件110可整合為同一元件(如觸控顯示面板)。
在本實施例中，顯示元件110可用以顯示影像於其上。輸入元件120可用以接收來自使用者的使用者指令。攝像元件130可用以對真實環境RWD進行影像擷取。網路元件140可用以透過網路(未繪示)與伺服器10進行資料傳輸。儲存元件150可用以儲存資料。處理元件160可用以執行一行動裝置應用程式，以令使用者得以透過輸入元件120即時修改顯示於顯示元件110上的擴增實境物件。
在以下的段落中，將提供一實施例中行動裝置100的具體細節，然而本案不以此一實施例為限。
特別參照第2圖，在本案一實施例中，處理元件160可利用攝像元件130對真實環境RWD進行影像擷取，以取得3D環境影像(如第3A圖中的3D環境影像IMG1)。
在本實施例中，真實環境RWD中具有真實物件RWT。3D環境影像IMG1中具有真實物件影像(如第3A圖中的真實物件影像IMG2)。處理元件160可取得真實物件影像IMG2的複數個特徵點FTR，並根據此些特徵點FTR在一資料庫DBS中搜尋對應的3D擴增實境物件(如第3B圖中的3D擴增實境物件ART)。在一實施例中，資料庫DBS可位於 儲存元件150中，然本案不以此為限。在其它實施例中，資料庫DBS亦可位於伺服器10中。
此外，在本實施例中，處理元件160並可根據前述特徵點FTR以及資料庫DBS中對應的資料，取得行動裝置100的攝像元件130與真實環境RWD之間的位置關係。具體來說，在本實施例中，處理元件160係可根據此些特徵點FTR以及資料庫DBS中對應的資料，取得攝像元件130與真實物件RWT之間的距離D ST，以及攝像元件130與真實物件RWT的方位(orientation)ORT的相對角度ANG。在一實施例中，距離DST可用攝像元件130與真實物件RWT的中心點CNT進行計算，然本案不以此為限。在一實施例中，距離DST與相對角度ANG可用一位置轉換矩陣TRM記錄，然而本案不以此為限。
特別參照第3A、3B圖。在本實施例中，處理元件160可執行一行動裝置應用程式。此一行動裝置應用程式提供一使用者介面UI，以呈現對應於真實環境RWD的3D環境影像IMG1於顯示元件110上(如第3A圖所示)。3D環境影像IMG1具有真實物件影像IMG2，對應於真實環境RWD中的真實物件RWT。處理元件160可在使用者介面UI中同時呈現3D環境影像IMG1以及對應於真實物件影像IMG2的3D擴增實境物件ART於顯示元件110上(如第3B圖所示)。
在一實施例中，儲存元件150可儲存一參數資料，此一參數資料對應於3D擴增實境物件ART相對於真實物件影像IMG2的尺寸、角度、位置以及動畫之資訊中的至少 一者。處理元件160可根據此一參數資料，呈現3D擴增實境物件ART於顯示元件110上。亦即，所述的參數資料係用以決定3D擴增實境物件ART於3D環境影像IMG1中相對於真實物件影像IMG2的相對尺寸、旋轉角度、相對位置、以及一動畫之資訊中的至少一者。
在本實施例中，使用者介面UI可提供一操作功能以供於3D環境影像IMG1中調整3D擴增實境物件ART的尺寸、角度、位置、及動畫其中之任一者。
例如，使用者可點選按鈕B1，以於3D環境影像IMG1中調整3D擴增實境物件ART相對於真實物件影像IMG2的尺寸。使用者可點選按鈕B2，以於3D環境影像IMG1中調整3D擴增實境物件ART相對於真實物件影像IMG2的角度。使用者可點選按鈕B3，以於3D環境影像IMG1中調整3D擴增實境物件ART相對於真實物件影像IMG2的位置。使用者可點選按鈕B4，以決定處理元件160要在3D環境影像IMG1中，執行對應於3D擴增實境物件ART的預設動畫中的哪一時間區段的動畫片段(例如在總長100秒預設動畫中進行第5-15秒時間區段的動畫片段)。
此外，在本實施例中，使用者介面UI亦提供一確認功能以記錄對應於調整完成的3D擴增實境物件ART的尺寸、角度、位置及動畫之參數資料。在一實施例中，此一參數資料可儲存於儲存元件150中。
在記錄對應於調整完成的3D擴增實境物件ART的尺寸、角度、位置及動畫之參數資料後，處理元件 160可經由網路元件140將此一參數資料傳送到伺服器10，作為更新的參數資料，以令並未身處於真實環境RWD的設計者可讀取此一更新的參數資料，並根據此一更新的參數資料，進行3D擴增實境物件ART進一步的修改，並進一步更新伺服器10中的參數資料。
此外，在每一次處理元件160執行行動裝置應用程式時，處理元件160可從伺服器10下載更新的參數資料(通常是最新的參數資料)，以更新行動裝置100中的參數資料。亦即，伺服器10可依據更新的參數資料，更新行動裝置100中的參數資料。
透過上述的設置，設計者便可伴隨3D環境影像IMG1，即時地編緝3D擴增實境物件ART。
特別參照第4圖。在一實施例中，使用者介面UI更提供一錄影功能，以供於調整3D擴增實境物件ART的尺寸、角度、位置、及動畫其中之任一者時，以錄影方式紀錄調整過程，以產生一錄影資料。在產生錄影資料後，處理元件160可經由網路元件140將錄影資料傳送至伺服器10。
在一實施例中，使用者介面UI更提供一標記功能，以在前述錄影資料中插入修改標記MTG。修改標記MTG可在播放前述錄影資料的同時視覺化地呈現。如此一來，並未身處於真實環境RWD的設計者即可根據錄影資料中的修改標記MTG進行3D擴增實境物件ART的修改。
在一實施例中，在處理元件160經由網路元件140將錄影資料傳送至伺服器10的同時，處理元件160亦可 將錄影過程中相應於3D擴增實境物件ART的尺寸、角度、位置、動畫的參數資料、前述攝像元件130與真實環境RWD之間的位置關係、以及3D擴增實境物件ART的素材等資訊傳送至伺服器10，以令並未身處於真實環境RWD的設計者得以得知錄影過程中的相關參數資料。
特別參照第5圖。在一實施例中，使用者介面UI更提供一建立動畫功能。建立動畫功能包括在處理元件160透過輸入元件120接收對應於3D擴增實境物件ART的一拖曳手勢時，處理元件160根據拖曳手勢的路徑TRC，在顯示元件110上移動3D擴增實境物件ART；以及處理元件160記錄移動3D擴增實境物件ART的過程，以作為3D擴增實境物件ART的一使用者自訂動畫。
例如，在一實施例中，在使用者沿路徑TRC將3D擴增實境物件ART從第一位置PLC1拖曳至第二位置PLC2的情況下，處理元件160記錄3D擴增實境物件ART沿路徑TRC移動的過程，以作為3D擴增實境物件ART的使用者自訂動畫。
特別參照第6圖。在一實施例中，使用者介面UI更提供一事件編輯功能。當處理元件160透過使用者介面UI接收到對應於3D擴增實境物件ART的一事件編輯指令時，處理元件160可根據行動裝置100的攝像元件130與真實環境RWD之間的位置關係，決定相應於3D擴增實境物件ART的事件。
舉例而言，在攝像元件130與真實環境物件RWT的方位ORT的相對角度介於第一角度區間INV1(如1-120度)之間時，處理元件160可執行相應於3D擴增實境物件ART的第一事件(例如執行3D擴增實境物件ART的預設動畫中第10秒至第20秒)。在攝像元件130與真實環境物件RWT的方位ORT的相對角度介於第二角度區間INV12(如121-240度)之間時，處理元件160可執行相應於3D擴增實境物件ART的第二事件(例如執行3D擴增實境物件ART的預設動畫中第20秒至第30秒)。在攝像元件130與真實環境物件RWT的方位ORT的相對角度介於第三角度區間INV3(如121-240度)之間時，處理元件160可執行相應於3D擴增實境物件ART的第三事件(例如使3D擴增實境物件ART的尺寸放大1.2倍)。其中，第一角度區間、第二角度區間與第三角度區間彼此不同，且第一事件、第二事件、第三事件亦彼此不同。
藉由如此的設置，可使3D擴增實境物件ART的呈現更加多元。
第7圖為根據本發明一實施例所繪示的一種行動裝置的操作方法700之流程圖。操作方法700可應用於相同或相似於第1圖中所示結構之行動裝置。而為使敘述簡單，以下將根據本發明一實施例，以第1圖中的行動裝置100為例進行對操作方法敘述，然本發明不以此應用為限。
應注意到，操作方法700可經由前述實施例中的行動裝置100來實現，亦可實作為一電腦程式，並儲存於一非 揮發性電腦可讀取記錄媒體中，而使電腦或電子裝置讀取此記錄媒體後執行操作方法700。非揮發性電腦可讀取記錄媒體可為唯讀記憶體、快閃記憶體、軟碟、硬碟、光碟、隨身碟、磁帶、可由網路存取之資料庫或熟悉此技藝者可輕易思及具有相同功能之非揮發性電腦可讀取記錄媒體。
另外，應瞭解到，在本實施方式中所提及的操作方法的步驟，除特別敘明其順序者外，均可依實際需要調整其前後順序，甚至可同時或部分同時執行。
再者，在不同實施例中，此些步驟亦可適應性地增加、置換、及/或省略。
在本實施例中，操作方法700包括以下步驟。
在步驟S1中，執行一行動裝置應用程式，以透過行動裝置應用程式提供使用者介面UI，以呈現3D環境影像IMG1和3D擴增實境物件ART，並提供一操作功能以供於3D環境影像IMG1中調整3D擴增實境物件ART的尺寸、角度和位置其中之任一者，以及提供一確認功能以記錄對應調整完成的3D擴增實境物件ART的尺寸、角度和位置之參數資料。
在步驟S2中，利用行動裝置100的網路元件140，將參數資料傳送到伺服器10，作為一更新的參數資料，以令伺服器10得以依據更新的參數資料，更新行動裝置100中的參數資料。
應注意到，操作方法700中的相關細節可參照第1圖至第6圖中的實施態樣，重覆的部份在此不贅述。
雖然本發明已以實施例揭露如上，然其並非用以限定本發明，任何熟習此技藝者，在不脫離本發明之精神和範圍內，當可作各種之更動與潤飾，因此本發明之保護範圍當視後附之申請專利範圍所界定者為準。

Claims (11)

  1. 一種於行動裝置上修改3D擴增實境物件的操作方法，包括以下步驟：經由一行動裝置執行一行動裝置應用程式，該行動裝置應用程式提供一使用者介面，以呈現一3D環境影像和一3D擴增實境物件，其中該3D環境影像具有一真實物件影像，對應於一真實物件；取得一攝像元件與該真實物件之間的一距離和一相對角度；根據該距離與該相對角度，決定該3D擴增實境物件的角度；提供一操作功能以供於該3D環境影像中調整該3D擴增實境物件的尺寸、角度和位置其中之任一，以及提供一確認功能以記錄對應調整完成的3D擴增實境物件的尺寸、角度和位置之參數資料；利用該使用者介面，以更提供一錄影功能，以供於調整該3D擴增實境物件的尺寸、角度和位置其中之任一時，以錄影方式紀錄調整過程，以產生一錄影資料；透過該使用者介面提供一標記功能，以在該錄影資料中插入一修改標記，該修改標記係用以在播放該錄影資料時視覺化地呈現，以供一設計者根據該修改標記進行3D擴增實境物件的修改；以及 經由該行動裝置將該參數資料傳送到一伺服器，作為一更新的參數資料，以令該伺服器得以依據該更新的參數資料，更新該行動裝置中的參數資料。
  2. 如請求項1中所述之操作方法，更包括以下步驟：經由該行動裝置將該錄影資料傳送至該伺服器。
  3. 如請求項1中所述之操作方法，其中該些參數資料係用以決定該3D擴增實境物件於該3D環境影像中的相對尺寸、旋轉角度、相對位置、以及一動畫之資訊中的至少一者。
  4. 如請求項1中所述之操作方法，更包括以下步驟：利用該攝像元件，對一真實環境進行影像擷取，以取得該3D環境影像；根據該3D環境影像，取得該攝像元件與該真實環境的一位置關係；以及當透過該使用者介面接收到對應於該3D擴增實境物件的一事件編輯指令時，根據該位置關係，決定相應於該3D擴增實境物件的一事件。
  5. 如請求項1中所述之操作方法，更包括以下步驟：利用該使用者介面，以更提供一建立動畫功能，且該建立動畫功能包括：在接收對應於該3D擴增實境物件的一拖曳手勢時，根據該拖曳手勢的一路徑，移動該3D擴增實境物件；以及記錄移動該3D擴增實境物件的過程，以作為該3D擴增實境物件的一使用者自訂動畫。
  6. 一種可修改3D擴增實境物件的行動裝置，包括：一網路元件；一攝影元件；以及一處理元件，用以：執行一行動裝置應用程式，該行動裝置應用程式提供一使用者介面，以呈現一3D環境影像和一3D擴增實境物件，其中該3D環境影像具有一真實物件影像，對應於一真實物件；取得該攝像元件與該真實物件之間的一距離和一相對角度；根據該距離與該相對角度，決定該3D擴增實境物件的角度； 提供一操作功能以供於該3D環境影像中調整該3D擴增實境物件的尺寸、角度和位置其中之任一，以及提供一確認功能以記錄對應調整完成的3D擴增實境物件的尺寸、角度和位置之參數資料；利用該使用者介面，以更提供一錄影功能，以供於調整該3D擴增實境物件的尺寸、角度和位置其中之任一時，以錄影方式紀錄調整過程，以產生一錄影資料；透過該使用者介面提供一標記功能，以在該錄影資料中插入一修改標記，該修改標記係用以在播放該錄影資料時視覺化地呈現，以供一設計者根據該修改標記進行3D擴增實境物件的修改；以及經由該網路元件將該參數資料傳送到一伺服器，作為一更新的參數資料，以令該伺服器得以依據該更新的參數資料，更新該行動裝置中的參數資料。
  7. 如請求項6中所述之行動裝置，其中該處理元件更用以經由該網路元件將該錄影資料傳送至該伺服器。
  8. 如請求項6中所述之行動裝置，其中該些參數資料係用以決定該3D擴增實境物件於該3D環境影像中的相對尺寸、旋轉角度、相對位置、以及一動畫之資訊中的至少一者。
  9. 如請求項6中所述之行動裝置，該處理元件更用以：利用該攝像元件，對一真實環境進行影像擷取，以取得該3D環境影像和該3D擴增實境物件影像；根據該3D環境影像，取得該攝像元件與該真實環境的一位置關係；以及當透過該使用者介面接收到對應於該3D擴增實境物件的一事件編輯指令時，根據該位置關係，決定相應於該3D擴增實境物件的一事件。
  10. 如請求項6中所述之行動裝置，其中該使用者介面更提供一建立動畫功能，且該建立動畫功能包括：在接收對應於該3D擴增實境物件的一拖曳手勢時，根據該拖曳手勢的一路徑，移動該3D擴增實境物件；且該處理元件更用以記錄移動該3D擴增實境物件的過程，以作為該3D擴增實境物件的一使用者自訂動畫。
  11. 一種非揮發性電腦可讀取記錄媒體，儲存一電腦程式，用以執行於行動裝置上以修改3D擴增實境物件的操作方法，其中該操作方法包括以下步驟：經由一行動裝置執行一行動裝置應用程式，該行動裝置應用程式提供一使用者介面，以呈現一3D環境影像和一 3D擴增實境物件，其中該3D環境影像具有一真實物件影像，對應於一真實物件；取得一攝像元件與該真實物件之間的一距離和一相對角度；根據該距離與該相對角度，決定該3D擴增實境物件的角度；提供一操作功能以供於該3D環境影像中調整該3D擴增實境物件的尺寸、角度和位置其中之任一，以及提供一確認功能以記錄對應調整完成的3D擴增實境物件的尺寸、角度和位置之參數資料；利用該使用者介面以更提供一錄影功能，以供於調整該3D擴增實境物件的尺寸、角度和位置其中之任一時，以錄影方式紀錄調整過程，以產生一錄影資料；透過該使用者介面提供一標記功能，以在該錄影資料中插入一修改標記，該修改標記係用以在播放該錄影資料時視覺化地呈現，以供一設計者根據該修改標記進行3D擴增實境物件的修改；以及經由該行動裝置將該參數資料傳送到一伺服器，作為一更新的參數資料，以令該伺服器得以依據該更新的參數資料，更新該行動裝置中的參數資料。
TW103140286A 2014-11-20 2014-11-20 行動裝置、操作方法及非揮發性電腦可讀取記錄媒體 TWI621097B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
TW103140286A TWI621097B (zh) 2014-11-20 2014-11-20 行動裝置、操作方法及非揮發性電腦可讀取記錄媒體
CN201410716993.2A CN105719350A (zh) 2014-11-20 2014-12-01 移动装置及操作方法
JP2015051625A JP6006820B2 (ja) 2014-11-20 2015-03-16 モバイルデバイス、操作方法及び非一時的なコンピュータ読取可能な記憶媒体
US14/715,558 US20160148430A1 (en) 2014-11-20 2015-05-18 Mobile device, operating method for modifying 3d model in ar, and non-transitory computer readable storage medium for storing operating method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW103140286A TWI621097B (zh) 2014-11-20 2014-11-20 行動裝置、操作方法及非揮發性電腦可讀取記錄媒體

Publications (2)

Publication Number Publication Date
TW201619915A TW201619915A (zh) 2016-06-01
TWI621097B true TWI621097B (zh) 2018-04-11

Family

ID=56010740

Family Applications (1)

Application Number Title Priority Date Filing Date
TW103140286A TWI621097B (zh) 2014-11-20 2014-11-20 行動裝置、操作方法及非揮發性電腦可讀取記錄媒體

Country Status (4)

Country Link
US (1) US20160148430A1 (zh)
JP (1) JP6006820B2 (zh)
CN (1) CN105719350A (zh)
TW (1) TWI621097B (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170169613A1 (en) * 2015-12-15 2017-06-15 Lenovo (Singapore) Pte. Ltd. Displaying an object with modified render parameters
WO2017145155A1 (en) * 2016-02-22 2017-08-31 Real View Imaging Ltd. A method and system for displaying holographic images within a real object
TWI567691B (zh) * 2016-03-07 2017-01-21 粉迷科技股份有限公司 立體空間的場景編輯方法與系統
CN108242082A (zh) * 2016-12-26 2018-07-03 粉迷科技股份有限公司 立体空间的场景编辑方法与系统
CN108268434A (zh) * 2016-12-30 2018-07-10 粉迷科技股份有限公司 立体场景中超链接编辑方法与系统
US11113887B2 (en) * 2018-01-08 2021-09-07 Verizon Patent And Licensing Inc Generating three-dimensional content from two-dimensional images
US10679393B2 (en) 2018-07-24 2020-06-09 Snap Inc. Conditional modification of augmented reality object
US20200106727A1 (en) * 2018-09-27 2020-04-02 Sonny Industrial Co., Ltd. Information service system and method thereof
US11972529B2 (en) * 2019-02-01 2024-04-30 Snap Inc. Augmented reality system
US11438551B2 (en) * 2020-09-15 2022-09-06 At&T Intellectual Property I, L.P. Virtual audience using low bitrate avatars and laughter detection
KR102548299B1 (ko) * 2022-01-06 2023-06-28 주식회사 에스씨컴퍼니 메타버스 기반 ３ｄ 인테리어 꾸미기 영상 기록 서비스 제공 시스템

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120242865A1 (en) * 2011-03-21 2012-09-27 Harry Vartanian Apparatus and method for providing augmented reality based on other user or third party profile information
WO2013023706A1 (en) * 2011-08-18 2013-02-21 Layar B.V. Computer-vision based augmented reality system
TW201350912A (zh) * 2012-03-29 2013-12-16 Sony Corp 資訊處理裝置，資訊處理系統及資訊處理方法
TW201407419A (zh) * 2012-04-26 2014-02-16 Intel Corp 擴增實境計算裝置、設備及系統
CN103631768A (zh) * 2012-08-20 2014-03-12 三星电子株式会社 协作数据编辑和处理系统
CN104011788A (zh) * 2011-10-28 2014-08-27 奇跃公司 用于增强和虚拟现实的系统和方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080071559A1 (en) * 2006-09-19 2008-03-20 Juha Arrasvuori Augmented reality assisted shopping
US8243076B2 (en) * 2008-11-05 2012-08-14 Clive Goodinson System and method for comic creation and editing
EP2780892B1 (en) * 2011-11-15 2016-10-05 Trimble Navigation Limited Controlling rights to a drawing in a three-dimensional modeling environment
JP5942456B2 (ja) * 2012-02-10 2016-06-29 ソニー株式会社 画像処理装置、画像処理方法及びプログラム
CN103164518A (zh) * 2013-03-06 2013-06-19 杭州九树网络科技有限公司 移动终端增强现实应用系统及方法
JP2014191718A (ja) * 2013-03-28 2014-10-06 Sony Corp 表示制御装置、表示制御方法および記録媒体

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120242865A1 (en) * 2011-03-21 2012-09-27 Harry Vartanian Apparatus and method for providing augmented reality based on other user or third party profile information
WO2013023706A1 (en) * 2011-08-18 2013-02-21 Layar B.V. Computer-vision based augmented reality system
CN104011788A (zh) * 2011-10-28 2014-08-27 奇跃公司 用于增强和虚拟现实的系统和方法
TW201350912A (zh) * 2012-03-29 2013-12-16 Sony Corp 資訊處理裝置，資訊處理系統及資訊處理方法
TW201407419A (zh) * 2012-04-26 2014-02-16 Intel Corp 擴增實境計算裝置、設備及系統
CN103631768A (zh) * 2012-08-20 2014-03-12 三星电子株式会社 协作数据编辑和处理系统

Also Published As

Publication number Publication date
CN105719350A (zh) 2016-06-29
TW201619915A (zh) 2016-06-01
JP6006820B2 (ja) 2016-10-12
JP2016099996A (ja) 2016-05-30
US20160148430A1 (en) 2016-05-26

Similar Documents

Publication Publication Date Title
TWI621097B (zh) 行動裝置、操作方法及非揮發性電腦可讀取記錄媒體
US10397643B2 (en) Electronic device for identifying peripheral apparatus and method thereof
US9942484B2 (en) Electronic device and method for displaying image therein
US9741149B2 (en) User terminal device for providing animation effect and display method thereof
US10187520B2 (en) Terminal device and content displaying method thereof, server and controlling method thereof
CN105981368B (zh) 在成像装置中的照片构图和位置引导
US10628121B2 (en) Electronic device and method for controlling the same
CN107925725B (zh) 显示装置以及该显示装置的控制方法
EP2811731B1 (en) Electronic device for editing dual image and method thereof
US10033943B1 (en) Activity surface detection, display and enhancement
CN103729120A (zh) 用于产生缩略图的方法及其电子设备
WO2015130270A1 (en) Photo and document integration
KR101782045B1 (ko) 가상현실 플랫폼을 통해 가상 현실 콘텐츠를 생성하는 방법 및 장치
US20200329211A1 (en) Electronic device for linking music to photography. and control method therefor
US20210406304A1 (en) Electronic device for generating video comprising character and method thereof
US20140229823A1 (en) Display apparatus and control method thereof
US10976895B2 (en) Electronic apparatus and controlling method thereof
US10915778B2 (en) User interface framework for multi-selection and operation of non-consecutive segmented information
EP3652704B1 (en) Systems and methods for creating and displaying interactive 3d representations of real objects
US20160004415A1 (en) User terminal device for generating playable object, and interaction method therefor
US10732817B2 (en) Electronic apparatus and text input method for the same
US20180067632A1 (en) User terminal apparatus and control method thereof
KR20240054080A (ko) 전자 장치 및 이의 제어 방법
KR20230112481A (ko) 전자 장치 및 그 제어 방법