TWI611718B - 操作行動運算裝置以控制智慧裝置的方法 - Google Patents

Abstract

操作行動運算裝置以控制智慧裝置的方法包含利用行動運算裝置之相機擷取包含物件之圖像，辨識圖像中的物件所對應之智慧裝置，當辨識出智慧裝置時，建立行動運算裝置與智慧裝置之連線，及在建立行動運算裝置與智慧裝置之連線後，利用行動運算裝置控制智慧裝置。

Description

操作行動運算裝置以控制智慧裝置的方法

本發明係有關於一種操作行動運算裝置的方法，特別是一種操作行動運算裝置以迅速辨識並控制智慧裝置的方法。

隨著智慧裝置在家庭和公司等場域的流行，現今也發展出了許多控制智慧裝置的方法。其中一種常見用來控制智慧裝置的方法是透過應用於行動電話或平板電腦的應用程式。這些應用程式只能夠用來控制這些應用程式的開發公司所製造的智慧裝置。倘若使用者使用了不同公司製造的智慧裝置，那麼使用者就必須安裝不同的應用程式來控制這些不同的智慧裝置。換言之，先前技術之控制智慧裝置的方法，會額外增加在不同的應用程式間切換的步驟，而造成使用者的不便。

此外，在使用者執行了特定的應用程式後，由於使用者仍可能需要透過瀏覽應用程式中許多的目錄或瀏覽其所安裝之智慧裝置的條目，最終才能夠選定出使用者所欲控制的智慧裝置，因此使用者常需要花費大量的時間在選定其所欲控制的智慧裝置。且只有在挑選出正確的智慧裝置後，使用者才能夠開始控制所選取的智慧裝置。因此有必要提出一種更加直覺的控制方法，讓使用者能夠快速且便利控制各個智慧裝置。

本發明之一實施例提供一種操作行動運算裝置以控制智慧裝置的方法。控制智慧裝置的方法包含利用行動運算裝置之相機擷取包含物件之圖像，辨識圖像中的物件，當辨識出物件時，建立行動運算裝置與物件所對應之智慧裝置的連線，及在建立行動運算裝置與智慧裝置之連線後，利用行動運算裝置控制智慧裝置。

本發明之另一實施例提供一種操作行動運算裝置以控制智慧裝置的方法。控制智慧裝置的方法包含利用行動運算裝置之相機擷取包含至少一物件之圖像，辨識圖像中的至少一物件，於行動運算裝置顯示自圖像中辨識出的至少一物件的重製圖像，由至少一物件中選取一物件，當物件被選取後，建立行動運算裝置與物件所對應之智慧裝置的連線，及在建立行動運算裝置與智慧裝置之連線後，利用行動運算裝置控制智慧裝置。

第1圖為用以執行應用程式22以選取並控制智慧裝置之行動運算裝置10的功能方塊圖。為方便描述此執行應用程式22，以後將以直覺控制應用程式稱之。

行動運算裝置10包含顯示器12、相機14、處理器16、無線訊號收發器18及儲存裝置20，其中顯示器12可為觸控顯示器，無線訊號收發器18則可為無線保真(Wireless Fidelity，Wi-Fi)收發器。儲存裝置20可儲存直覺控制應用程式22以及直覺控制應用程式22所需的應用程式資料24。儲存裝置20可為非揮發性記憶體，例如快閃記憶體。行動運算裝置10可為任何具有顯示器及相機的行動裝置，例如為平板電腦或智慧型手機，然而亦可為其他裝置例如筆記型電腦。

以下說明直覺控制應用程式22的使用方式。第2圖為利用行動運算裝置10之相機10來擷取對應於房間30的圖像32之示意圖。圖像32可由數種不同的方式產生。例如當使用者利用行動運算裝置10的相機14拍攝照片時，便可將其所產生的靜態圖片檔案作為圖像32。或例如當使用者利用行動裝置10之相機14擷取影像時，便可將擷取之影片檔案的截圖作為圖像32。又或是例如當使用者利用行動運算裝置10之相機14產生預覽圖像時，可利用預覽圖像做為圖像32。預覽圖像指的是使用者在利用相機14拍攝照片或擷取影像時提供給使用者閱覽以便於取景的圖像。

圖像32顯示於行動運算裝置10的顯示器12，而圖像32中則顯示了對應於一智慧裝置的開關40。在此實施例中，智慧裝置可為房間30裡的電燈，而開關40則可用來控制電燈。當圖像32中出現開關40時，直覺控制應用程式22能夠辨識出開關40，並且建立直覺控制應用程式與開關40所對應之智慧裝置之間的連線。一旦直覺控制應用程式與開關40所對應之智慧裝置之間的連線建立完成後，直覺控制應用程式22就能夠控制其智慧裝置。

除了透過直覺控制應用程式22辨識開關40或其他開關以得知所對應的智慧裝置，在本發明的其他實施例中，也可以透過其他的方式來辨識智慧裝置。第3圖為位於開關40附近且與開關40相關之一維條碼42。第4圖為位於開關40附近且與開關40相關之二維條碼44。一維條碼42及二維條碼44的使用方式相同。當行動運算裝置10的相機14產生了包含一維條碼42或二維條碼44的圖像時，直覺控制應用程式22能夠讀取圖像中的一維條碼42或二維條碼44，並解析一維條碼42或二維條碼44所對應的資料，並根據解析的資料辨識出對應的智慧裝置，並建立直覺控制應用程式22與開關40所對應之智慧裝置之間的連線。如此一來，直覺控制應用程式22就能夠控制一維條碼42或二維條碼44所對應的智慧裝置。

除了使用一維條碼42或二維條碼44，本發明也可能透過其他的方法來辨識智慧裝置以建立直覺控制應用程式22與開關40所對應之智慧裝置之間的連線。舉例來說，亦可利用近場通訊(near field communication，NFC)的技術。智慧裝置可具有近場通訊標籤或是具有當被行動運算裝置10掃描時，能夠允許直覺控制應用程式22辨識其智慧裝置並建立連線至智慧裝置的近場通訊裝置。無線射頻識別(radio frequency identification，RFID)技術也可根據相同的方式應用在辨識智慧裝置並連線至智慧裝置。此外，本發明亦可利用其他能夠允許使用者建立連線以連線至智慧裝置的科技。

第5圖為行動運算裝置10經由網路90連線至智慧裝置94的功能方塊圖。行動運算裝置10可以無線通訊方式連接至網路90，並且能夠使用無線訊號收發器18來建立無線通訊的連線。網路90與智慧裝置94之間的連線則可透過無線或有線的方式連接。雲端資料庫92可儲存用來協助辨識對應於智慧裝置94之物件的相關資料。舉例來說，在第3圖及第4圖中，雲端資料庫92可以儲存對應於一維條碼42及二維條碼44的資料，並且可以儲存對應於其一維條碼42及二維條碼44之智慧裝置94的連線資訊。也就是說，當解析掃描一維條碼42及二維條碼44時，雲端資料庫92能夠將解析條碼所得出與條碼對應的資料與雲端資料庫92中所儲存的複數個預定資料相比較，當一維條碼42或二維條碼44所對應的資料與儲存在雲端資料庫92中所儲存的一預定資料相符時，就能夠根據相符的預定資料辨識出其物件。

當並未使用一維條碼42或二維條碼44時，例如在第2圖所述的實施例中，也可以透過開關40附近的環境特徵來辨識開關40。在此情況下，可以對圖像32中開關40附近的環境特徵進行分析並產生環境碼。將所產生的環境碼與儲存在雲端資料庫92中的複數個預定環境碼相比較，則當所產生之環境碼與儲存在雲端資料庫92中的一預定環境碼相符時，就能夠根據其預定環境碼辨識出開關40。

雲端資料庫92除了可以儲存與辨識開關40有關的資訊以及與一維條碼42或二維條碼44的相關資訊之外，還可以儲存與每個智慧裝置相關的描述性資訊。在雲端資料庫92中，每個智慧裝置的描述性資訊可包含每種類型之智慧裝置所被指定的辨識碼(identification code，ID code)。在辨識碼中的每個欄位都能夠被獨立搜尋以便使用者搜尋智慧裝置。表1為辨識碼所包含之欄位的內容對照表。

表1

在表1中，辨識碼包含了物件類型代碼、廠牌代碼及產品代碼，物件類型代碼可以用以辨識智慧裝置的種類，例如為「A0001」，廠牌代碼則會對應到智慧裝置的廠牌例如「ABCDEFG」，而產品代碼則可以指出智慧裝置的型號例如「HIJKLMNO」。相同型號的智慧裝置可具有相同的辨識碼。舉例來說，在床具兩側相同的智慧裝置可具有相同的辨識碼。

除了指定辨識碼之外，在直覺控制應用程式22中，每個智慧裝置還可被指定具有自己的獨特識別(unique identification，UID)碼，而獨特識別碼也可儲存在雲端資料庫92中。表2為獨特識別碼的內容對照表。

表2

每一個獨特識別碼可包含有關智慧裝置的位置及種類的編碼。舉例來說，可具有如表1所述之辨識碼的智慧裝置可以進一步被指定有如表2所示的獨特識別碼。獨特識別碼可包含國家代碼、使用者代碼、房間代碼、儲存代碼、物件代碼、廠牌代碼、產品代碼、物件序號及檢查碼，國家代碼可對應至智慧裝置所在的國家，例如台灣的電話國際碼「886」，使用者代碼可對應至將至智慧裝置分類的使用者，例如「ABCDEFGHIJ」，房間代碼可以對應至智慧裝置所在的房間，例如為「001」，儲存代碼可對應至智慧裝置所在的儲存單元，例如為「00A」，物件代碼可對應至智慧裝置的分類種類，例如為「A0001」，廠牌代碼可對應到智慧裝置的廠牌例如「ABCDEFG」，產品代碼則可以指出智慧裝置的型號例如「HIJKLMNO」，而物件序號則可標誌出智慧裝置的獨特序號，例如為「0001」，而檢查碼則可為獨特識別碼中剩餘編碼的校驗和(checksum)，例如為「9」。在直覺控制應用程式22中，每個獨特的智慧裝置都會被賦予一個獨特辨識碼。由於每個智慧裝置的物件序號都不相同，因此即便是位於相同房間的兩個相同的智慧裝置也會具有相異的獨特識別碼。

一旦辨識出智慧裝置94，直覺控制應用程式22就能夠獲得智慧裝置94的控制資訊。智慧裝置94的控制資訊可以透過網路90自雲端資料庫92下載，也可以由行動運算裝置10之儲存裝置20中預先儲存的應用程式資料24取得。直覺控制應用程式22可以根據智慧裝置94的控制資訊呈現對應的控制鈕。第6圖及第7圖為對應於智慧裝置40之控制鈕的示意圖。在利用直覺控制應用程式22辨識出開關40後，直覺控制應用程式22還可以給予使用者進一步確認開關40是否為使用者所欲選擇之正確物件的機會。在行動運算裝置10之顯示器12所顯示的圖像32中呈現了開關40。辨識出開關40後，具有外框50的控制清單就會彈出並顯示在圖像32上方，控制清單包含開關40的重製圖像52。若是在圖像32中還辨識出了其他物件，則包含其他被辨識物件的外框也會一併顯示。當使用者欲自被辨識出的物件中選取一物件時，使用者只需要點擊在外框50內的重製圖像52即可。外框50可以對應地改變外觀以給予使用者回應進而告知該物件已被選取。在重製圖像52及外框50被選取後，直覺控制應用程式22就可建立其與對應於開關40之智慧裝置的連線，並且顯示對應的控制按鈕54。直覺控制應用程式22的使用者即可透過將控制按鈕54上移或下移來控制與開關40所對應的智慧裝置。將控制按鈕54上移如第6圖所示時，智慧裝置就會被開啟。將控制按鈕54下移如第9圖所示時，智慧裝置則會被關閉。若智慧裝置為電燈，透過上述的簡單控制按鈕54就足以操作電燈的全部功能。若智慧裝置為具有其他較複雜控制功能的裝置，例如為智慧電視或智慧調溫器，則可以透過其他形式的控制按鈕或控制清單以供使用者能夠操作其智慧裝置的所有功能。此外，除了直接透過直覺控制應用程式22來控制智慧裝置，直覺控制應用程式22也可以提供連結以開啟其他專用的應用程式來控制特定的智慧裝置。

除了透過讓使用者從被辨識出的物件中選取特定物件以建立與對應之智慧裝置的連線外，倘若只有一個物件被辨識出來，那麼直覺控制應用程式22也可以直接建立與被辨識之物件所對應之智慧裝置的連線。然而當辨識出兩個或兩個以上的物件時，使用者則可自行選取物件來建立連線。另方面，當只辨識出單一物件時，則無需讓使用者進行選擇而可直接建立連線。

在第6圖及第7圖中的房間30中還包含了另一個智慧裝置，亦即智慧檯燈64。然而，智慧檯燈64並未顯示在圖像32中，因此也無法供使用者選取。第8圖為本發明另一實施例之使用者控制智慧檯燈64的示意圖。行動運算裝置10的相機14擷取了對應於房間30的圖像62。圖像62中顯示了智慧檯燈64，而一旦經由智慧檯燈64的圖像外觀辨識出智慧檯燈64後，直覺應用程式22就可建立與智慧檯燈64的連線，且在圖像62中，於智慧檯燈64的圖像旁邊還可以進一步顯示用來控制智慧檯燈64的控制按鈕66。如此一來，使用者就夠利用控制按鈕66來控制智慧檯燈64。與之前實施例的差別在於，智慧檯燈64本身就已經出現在行動運算裝置10之顯示器12所顯示的圖像62中。圖像62並未辨識智慧檯燈64所對應的開關，而是直接辨識出智慧檯燈64。

第9圖為本發明一實施例之利用直覺控制應用程式控制智慧裝置的方法流程圖，其方法包含步驟100至110。

步驟100： 開始；

步驟102： 擷取包含物件的圖像，舉例來說，擷取包含開關40的圖像32，如第2圖所示；

步驟104： 辨識物件，舉例來說，可自圖像32中辨識出開關40；

步驟106： 建立行動運算裝置與智慧裝置的連線；舉例來說，建立行動運算裝置與與開關40對應之智慧裝置的連線；

步驟108： 利用行動運算裝置控制智慧裝置；

步驟110： 結束。

第10圖為本發明一實施例之利用無線射頻識別來辨識智慧裝置的示意圖。在第10圖中，由於智慧檯燈64上裝設了無線射頻識別標籤70，因此可以藉以辨識智慧檯燈64。無線射頻識別掃描器80可以用來掃描無線射頻識別標籤70以辨識智慧檯燈64，並且可允許使用者利用直覺控制應用程式22迅速地控制智慧檯燈64。無線射頻識別掃描器80可為手持式的無線射頻識別掃描器，例如但不限於第10圖中所示具有球拍形狀的無線射頻識別掃描器。

綜上所述，本發明提供了能夠根據使用者的需求，直覺地選取智慧裝置並連線至智慧裝置的方法。使用者可以使用行動運算裝置10對準使用者所欲控制的智慧裝置，或是對應於智慧裝置的物件，並在進行辨識之後，建立與智慧裝置的連線，因此能夠免去先前技術中，使用者需要額外查找選單或條目以選取智慧裝置的瑣碎步驟。 以上所述僅為本發明之較佳實施例，凡依本發明申請專利範圍所做之均等變化與修飾，皆應屬本發明之涵蓋範圍。

10‧‧‧行動運算裝置
12‧‧‧顯示器
14‧‧‧相機
16‧‧‧處理器
18‧‧‧無線訊號收發器
20‧‧‧儲存裝置
22‧‧‧直覺控制應用程式
24‧‧‧應用程式資料
30‧‧‧房間
32‧‧‧圖像
40‧‧‧開關
42‧‧‧一維條碼
44‧‧‧二維條碼
90‧‧‧網路
92‧‧‧雲端資料庫
94‧‧‧智慧裝置
50‧‧‧外框
52‧‧‧重製圖像
54‧‧‧控制按鈕
64‧‧‧智慧檯燈
62‧‧‧圖像
66‧‧‧控制按鈕
100、102、104、106、108、110‧‧‧步驟
70‧‧‧無線射頻識別標籤
80‧‧‧無線射頻識別掃描器

第1圖為用以執行應用程式以選取並控制智慧裝置之行動運算裝置的功能方塊圖。 第2圖為利用行動運算裝置之相機來擷取對應於房間的圖像之示意圖。 第3圖為位於開關附近且與開關相關之一維條碼示意圖。 第4圖為位於開關附近且與開關相關之二維條碼示意圖。 第5圖為行動運算裝置經由網路連線至智慧裝置的功能方塊圖。 第6圖及第7圖為對應於智慧裝置之控制鈕的示意圖。 第8圖為本發明另一實施例之使用者控制智慧檯燈的示意圖。 第9圖為本發明一實施例之利用直覺控制應用程式控制智慧裝置的方法流程圖。 第10圖為本發明一實施例之利用無線射頻識別來辨識智慧裝置的示意圖。

100、102、104、106、108、110‧‧‧步驟

Claims (7)

1. 一種操作行動運算裝置以控制智慧裝置的方法，包含：利用一行動運算裝置之一相機擷取包含一物件之一圖像，該物件對應於一智慧裝置；分析在該圖像中於該物件附近的環境特徵以產生一環境碼；將該環境碼與儲存在一資料庫中的複數個預定環境碼相比較；當所產生之該環境碼與儲存在該資料庫之該些預定環境碼中之一預定環境碼相符時，根據該預定環境碼辨識該物件；當辨識出該物件時，建立該行動運算裝置與該智慧裝置之一連線；及在建立該行動運算裝置與該智慧裝置之該連線後，利用該行動運算裝置控制該智慧裝置。
2. 如請求項1所述之方法，其中利用該行動運算裝置之該相機擷取包含該物件之該圖像包含拍攝該物件以產生一靜態圖片檔案，及利用該靜態圖片檔案作為該圖像。
3. 如請求項1所述之方法，其中利用該行動運算裝置之該相機擷取包含該物件之該圖像包含擷取該物件之影像的一影片檔案，及利用該影像檔案中的一截圖做為該圖像。
4. 如請求項1所述之方法，其中利用該行動運算裝置之該相機擷取包含該物件之該圖像包含利用該行動運算裝置之該相機產生一預覽圖像，及利用該預覽圖像做為該圖像。
5. 如請求項1所述之方法，其中當辨識出該智慧裝置時，建立該行動運算裝置與該智慧裝置之該連線包含當辨識出該物件時，直接將該行動運算裝置連線至該智慧裝置。
6. 一種操作行動運算裝置以控制智慧裝置的方法，包含：利用一行動運算裝置之一相機擷取包含至少一物件之一圖像；分析在該圖像中於該至少一物件附近的環境特徵以產生至少一環境碼；將該至少一環境碼與儲存在一資料庫中的複數個預定環境碼相比較；當所產生之該至少一環境碼與儲存在該資料庫之該些預定環境碼中之至少一預定環境碼相符時，根據該至少一預定環境碼辨識該至少一物件；於該行動運算裝置顯示自該圖像中辨識出的該至少一物件的重製圖像；由該至少一物件選取一物件，該物件對應於一智慧裝置；當該物件被選取後，建立該行動運算裝置與該智慧裝置之一連線；及在建立該行動運算裝置與該智慧裝置之該連線後，利用該行動運算裝置控制該智慧裝置。
7. 如請求項1或6所述之方法，其中利用該行動運算裝置控制該智慧裝置包含利用該行動運算裝置啟動或關閉該智慧裝置。