• 专利附录
  • 专利说明
  • 权利要求
  • 类似技术
  • 同族专利
  • 引用文献
  • 法律状态
  • 优先权
    • 专利摘要:
    一種電子裝置，包括攝像模組、用戶介面模組、顯示模組及偵測模組。攝像模組在電子裝置進入選單模式時，持續拍攝使用者的臉部影像。用戶介面模組建立使用者的臉部影像與複數選單的對應關係。顯示模組顯示使用者的臉部影像與對應的選單。偵測模組偵測攝像模組拍攝的使用者的臉部影像是否至少一部分被遮蔽，以判斷使用者是否開始選擇選單，並進一步判斷該至少一部分臉部影像被遮蔽的持續時間是否大於預設時間，若大於預設時間，則將被遮蔽的臉部部分通知用戶介面模組。用戶介面模組根據被遮蔽的臉部部分及該對應關係，確定使用者選擇的選單。
    公开号:TW201313002A
    申请号:TW100131997
    申请日:2011-09-06
    公开日:2013-03-16
    发明作者:Jin-Jye Chou；Hsi-Hsun Huang
    申请人:Hon Hai Prec Ind Co Ltd；
    IPC主号:G06F3-00
    专利说明:
    電子裝置及其選單選擇方法
    本發明涉及電子裝置，特別涉及一種帶有攝像模組的電子裝置。
    聯網電視（connected TV）因提供比傳統電視更豐富的網路資料及影音內容，而受到越來越多使用者的青睞。然而，聯網電視提供的豐富的網路資料及影音內容，需透過複雜的選單來呈現。因此，無可避免的需使用複雜的遙控器等進行控制，而這對使用者來說極為不便。
    有鑑於此，需提供一種電子裝置，可方便進行選單操作。
    此外，還需提供一種選單選擇方法。
    一種電子裝置，包括攝像模組、用戶介面模組、顯示模組及偵測模組。攝像模組用於在該電子裝置進入選單模式時，持續拍攝使用者的臉部影像。用戶介面模組用於建立該使用者的臉部影像與複數選單的對應關係。顯示模組用於顯示該使用者的臉部影像與該等對應的選單，以供該使用者選擇。偵測模組用於偵測該攝像模組拍攝的使用者的臉部影像是否至少一部分被遮蔽，以判斷使用者是否開始選擇選單，並進一步判斷該至少一部分臉部影像被遮蔽的持續時間是否大於預設時間，若該至少一部分臉部影像被遮蔽的持續時間大於預設時間，則將該被遮蔽的臉部部分通知該用戶介面模組。該用戶介面模組根據該被遮蔽的臉部部分及該對應關係，確定使用者所選擇的選單。
    優選地，該用戶介面模組將該使用者的臉部初始影像劃分為預定數目的區塊，並建立該等預定數目的區塊與該等選單的對應關係。
    優選地，該顯示模組還用於顯示該使用者的臉部初始影像、該等預定數目的區塊的分界線及在該等預定數目的區塊中顯示對應的選單。
    優選地，該顯示模組還用於顯示該選擇的選單對應的內容。
    優選地，該用戶介面模組確定該使用者選擇的選單後，控制該顯示模組以醒目的方式顯示該使用者選擇的選單。
    優選地，該偵測模組用於根據該攝像模組拍攝的被遮蔽的臉部部分的最高點確定該選擇選單動作所遮蔽的臉部部分。
    一種選單選擇方法，用於電子裝置中，該選單選擇方法包括該電子裝置進入選單模式；啟動攝像模組，持續拍攝使用者的臉部影像；建立該使用者的臉部影像與複數選單的對應關係；顯示該使用者的臉部影像與該等對應的選單；偵測該攝像模組拍攝的使用者的臉部影像是否至少一部分被遮蔽，以判斷使用者是否開始選擇選單；若該使用者開始選擇選單，判斷該至少一部分臉部影像被遮蔽的持續時間是否大於預設時間；及若該至少一部分臉部影像被遮蔽的持續時間大於該預設時間，根據該被遮蔽的臉部部分及該對應關係確定該使用者選擇的選單。
    優選地，建立該使用者的臉部影像與複數選單的對應關係的步驟包括將使用者的臉部初始影像劃分為預定數目的區塊；及建立該等預定數目的區塊與該等選單的對應關係。
    優選地，顯示該使用者的臉部影像與該等對應的選單的步驟包括顯示該使用者的臉部初始影像及該等預定數目的區塊的分界線；及在該等預定數目的區塊中顯示對應的選單。
    優選地，根據該被遮蔽的臉部部分及該對應關係確定該使用者選擇的選單的步驟後還包括以醒目的方式顯示該使用者選擇的選單。
    優選地，該選單選擇方法還包括顯示該選擇的選單對應的內容。
    優選地，該選單選擇方法還包括根據該攝像模組拍攝的該被遮蔽的臉部部分的最高點確定該選擇選單動作所遮蔽的臉部部分。
    上述電子裝置及其選單選擇方法利用攝像模組進行使用者臉部影像追蹤，以建立並顯示使用者的臉部影像與選單的對應關係，從而使用者可經由碰觸自己的臉部來進行選單的選擇，避免複雜的遙控器或鍵盤操作，操作簡單，便於使用。
    圖1為本發明一實施方式中電子裝置10的示意圖。在本實施方式中，電子裝置10包括用戶介面模組100、攝像模組110、顯示模組120、偵測模組130、處理器140及存儲器150。在本實施方式中，電子裝置10為包括攝像模組110並可進行選單選擇操作的電子裝置，例如，聯網電視或視訊設備。電子裝置10開機後或根據使用者的選擇進入選單模式，供使用者選擇對應的選單，以觀看對應的內容或進行相應的操作。攝像模組110用於在電子裝置10進入選單模式時啟動，並持續拍攝使用者的臉部影像。在本實施方式中，攝像模組110可進行影像臉部追蹤，其對準使用者的臉部區域，該臉部區域包括頭、頸、胸、耳旁及頭上方等區域。
    用戶介面模組100用於接收攝像模組110拍攝的使用者的臉部影像，建立使用者的臉部影像與複數選單的對應關係。在本實施方式中，用戶介面模組100接收攝像模組110拍攝的使用者的臉部初始影像，將使用者的臉部初始影像劃分為預定數目的區塊，例如9格或12格，並建立該等預定數目的區塊與該等選單的一一對應關係。
    顯示模組120用於顯示使用者的臉部影像與該等對應的選單，供使用者選擇選單。在本實施方式中，顯示模組120的選單顯示如圖2所示，其顯示使用者的臉部初始影像1200、將該臉部初始影像1200劃分為12個區塊1220的分割線1210及與12個區塊1220一一對應的選單1230，其中，臉部初始影像1200與分割線1210在背景中顯示。在本發明的另一實施方式中，區塊1220的分割模式亦可為環形或其他易於辨識的形狀，或根據五官進行分割。從而，使用者可根據顯示模組120的顯示，碰觸想要選擇的選單1230對應的臉部區塊，來進行選單1230的選擇。例如，使用者想要選擇browser選單1230，因顯示模組120顯示browser選單1230與頭部正上方區塊1220對應，使用者可透過遮蔽其頭部正上方選擇browser選單1230。
    偵測模組130持續接收攝像模組110拍攝的使用者的臉部影像，來偵測攝像模組110拍攝的使用者的臉部影像是否至少一部分被遮蔽，以判斷使用者是否開始選擇選單，並進一步判斷該至少一部分臉部影像被遮蔽的持續時間是否大於預設時間。若選擇選單開始且該至少一部分臉部影像被遮蔽的持續時間大於預設時間，例如，10秒，偵測模組130則將被遮蔽的臉部部分通知用戶介面模組100。在本實施方式中，被遮蔽的臉部部分可能有多個，為避免誤判，偵測模組130根據攝像模組110拍攝的被遮蔽的臉部部分的最高點確定選擇選單動作所遮蔽的臉部部分。例如，攝像模組110拍攝的使用者的臉部影像被遮蔽部分包括額頭、鼻子及下巴區域，則偵測模組130以額頭為選擇選單動作所遮蔽的臉部部分。在本實施方式中，偵測模組130還比對後一時刻拍攝的使用者的臉部影像與前一時刻拍攝的使用者的臉部影像，來確定新的選擇選單動作是否開始。
    用戶介面模組100還用於根據被遮蔽的臉部部分及使用者的臉部影像與選單的對應關係，確定使用者選擇的選單，並進行相應處理。在本實施方式中，用戶介面模組100確定使用者選擇的選單後，控制顯示模組120以醒目的方式顯示使用者選擇的選單，例如，顯示模組120會以不同顏色顯示使用者選擇的選單。顯示模組120還用於顯示使用者選擇的選單對應的內容。
    處理器140用於執行用戶介面模組100、攝像模組110、顯示模組120及偵測模組130。存儲器150用於儲存使用者的臉部影像與選單的對應關係及攝像模組110拍攝的臉部影像。
    圖3所示為本發明一實施方式中選單選擇方法的流程圖。在本實施方式中，在步驟S300，電子裝置10開機後或根據使用者的選擇進入選單模式。在選單模式下，使用者可選擇對應的選單，使電子裝置10進行相應的處理及/或顯示。在步驟S310，攝像模組110啟動並持續拍攝使用者的臉部影像。在本實施方式中，攝像模組110發送拍攝的使用者的臉部初始影像至用戶介面模組100，並發送持續拍攝的使用者的臉部影像至偵測模組130。
    在步驟S320，用戶介面模組100建立使用者的臉部影像與複數選單的對應關係。在步驟S330，顯示模組120顯示使用者的臉部影像與對應的選單，以供使用者選擇選單。使用者根據顯示模組120顯示的使用者的臉部影像與對應的選單，可清楚直觀的得知要選擇的選單對應的臉部部分，從而可用手遮蔽該臉部部分，來選擇該選單。
    在步驟S340，偵測模組130偵測攝像模組110拍攝的使用者的臉部影像是否至少一部分被遮蔽，以判斷使用者是否開始選擇選單。若攝像模組110拍攝的使用者的臉部影像至少一部分被遮蔽，則偵測模組130判斷選擇選單動作開始。若選擇選單動作未開始，則偵測模組130繼續判斷使用者是否開始選擇選單。在本實施方式中，若用戶用手遮蔽臉部某一部分來選擇選單，則攝像模組110拍攝的使用者的臉部影像被遮蔽部分同前一時刻相比，必然發生變化。因而偵測模組130比對後一時刻拍攝的使用者的臉部影像與前一時刻拍攝的使用者的臉部影像是否不同，來偵測攝像模組110拍攝的使用者的臉部影像被遮蔽部分是否改變，來判斷新的選單選擇動作是否開始。
    若偵測模組130判斷使用者開始選擇選單，在步驟S350，偵測模組130判斷該至少一部分臉部影像被遮蔽的持續時間是否大於預設時間，例如，10秒。若該至少一部分臉部影像被遮蔽的持續時間小於預設時間，偵測模組130認為該動作為使用者無意之舉動，會回到步驟S340，繼續判斷使用者是否開始選擇選單。
    若該至少一部分臉部影像被遮蔽的持續時間大於預設時間，在步驟S360，用戶介面模組100根據該被遮蔽的臉部部分及該對應關係確定使用者選擇的選單。在本實施方式中，偵測模組130根據該攝像模組110拍攝的被遮蔽的臉部部分的最高點確定選擇選單動作所遮蔽的臉部部分，並告知用戶介面模組100，使用戶介面模組100確定使用者選擇的選單。如此，使用者可經由碰觸自己的臉部來進行選單的選擇，避免複雜的遙控器或鍵盤操作，操作簡單，便於使用。此外，本發明的電子裝置10及其選單選擇方法僅利用攝像模組110進行使用者臉部影像追蹤，無需其他額外裝置，執行容易且成本較低。
    圖4所示為本發明另一實施方式中選單選擇方法的流程圖。在步驟S400，電子裝置10開機後或根據使用者的選擇進入選單模式。在選單模式下，使用者可選擇對應的選單，使電子裝置10進行相應的處理及/或顯示。在步驟S410，攝像模組110啟動並持續拍攝使用者的臉部影像。在本實施方式中，攝像模組110發送拍攝的使用者的臉部初始影像至用戶介面模組100，並發送持續拍攝的使用者的臉部影像至偵測模組130。
    在步驟S420，用戶介面模組100將使用者的臉部初始影像劃分為預定數目的區塊，並建立該等預定數目的區塊與該等選單的對應關係。在步驟S430，顯示模組120顯示使用者的臉部初始影像及該等預定數目的區塊的分界線，並在該等預定數目的區塊中顯示對應的選單，以供使用者選擇選單。使用者根據顯示模組120顯示的使用者的臉部影像區塊與對應的選單，可清楚直觀的得知要選擇的選單對應的臉部部分，從而可用手遮蔽該臉部部分，來選擇選單。
    在步驟S440，偵測模組130偵測攝像模組110拍攝的使用者的臉部影像是否至少一部分被遮蔽，以判斷使用者是否開始選擇選單。
    若偵測模組130判斷使用者開始選擇選單，在步驟S450，偵測模組130判斷該至少一部分臉部影像被遮蔽的持續時間是否大於預設時間，例如，10秒。若該至少一部分臉部影像被遮蔽的持續時間小於預設時間，偵測模組130認為該動作為使用者無意之舉動，會回到步驟S440，繼續判斷使用者是否開始選擇選單。
    若該至少一部分臉部影像被遮蔽的持續時間大於預設時間，在步驟S460，用戶介面模組100根據該被遮蔽的臉部部分及該對應關係確定使用者選擇的選單。在本實施方式中，偵測模組130根據該攝像模組110拍攝的被遮蔽的臉部部分的最高點確定選擇選單動作所遮蔽的臉部部分，並告知用戶介面模組100，使用戶介面模組100確定使用者選擇的選單。
    在步驟S470，用戶介面模組100控制顯示模組120以醒目的方式顯示使用者選擇的選單，例如，以不同顏色顯示。在步驟S480，顯示模組120顯示選擇的選單對應的內容。
    上述電子裝置及其選單選擇方法利用攝像模組110進行使用者臉部影像追蹤，以建立並顯示使用者的臉部影像與選單的對應關係，從而使用者可經由碰觸自己的臉部來進行選單的選擇，避免複雜的遙控器或鍵盤操作，操作簡單，便於使用。此外，本發明的電子裝置10及其選單選擇方法僅利用攝像模組110進行使用者臉部影像追蹤，無需其他額外裝置，執行容易且成本較低。
    綜上所述，本發明符合發明專利要件，爰依法提出專利申請。惟，以上所述者僅為本發明之較佳實施例，舉凡熟悉本案技藝之人士，在爰依本案發明精神所作之等效修飾或變化，皆應包含於以下之申請專利範圍內。
    10．．．電子裝置
    100．．．用戶介面模組
    110．．．攝像模組
    120．．．顯示模組
    130．．．偵測模組
    140．．．處理器
    150．．．存儲器
    1200．．．臉部初始影像
    1210．．．分割線
    1220．．．區塊
    1230．．．選單
    圖1為本發明一實施方式中電子裝置的示意圖；
    圖2為本發明一實施方式中電子裝置的顯示模組的選單顯示的示意圖；
    圖3為本發明一實施方式中選單選擇方法的流程圖；及
    圖4為本發明另一實施方式中選單選擇方法的流程圖。
    10．．．電子裝置
    100．．．用戶介面模組
    110．．．攝像模組
    120．．．顯示模組
    130．．．偵測模組
    140．．．處理器
    150．．．存儲器
    权利要求:
    Claims (12)
    [1] 一種電子裝置，包括：攝像模組，用於在該電子裝置進入選單模式時，持續拍攝使用者的臉部影像；用戶介面模組，用於建立該使用者的臉部影像與複數選單的對應關係；顯示模組，用於顯示該使用者的臉部影像與該等對應的選單，以供該使用者選擇；偵測模組，用於偵測該攝像模組拍攝的使用者的臉部影像是否至少一部分被遮蔽，以判斷使用者是否開始選擇選單，並進一步判斷該至少一部分臉部影像被遮蔽的持續時間是否大於預設時間，若該至少一部分臉部影像被遮蔽的持續時間大於預設時間，則將該被遮蔽的臉部部分通知該用戶介面模組；該用戶介面模組根據該被遮蔽的臉部部分及該對應關係，確定使用者所選擇的選單。
    [2] 如申請專利範圍第1項所述的電子裝置，其改良在於，該用戶介面模組將該使用者的臉部初始影像劃分為預定數目的區塊，並建立該等預定數目的區塊與該等選單的對應關係。
    [3] 如申請專利範圍第2項所述的電子裝置，其改良在於，該顯示模組還用於顯示該使用者的臉部初始影像、該等預定數目的區塊的分界線及在該等預定數目的區塊中顯示對應的選單。
    [4] 如申請專利範圍第1項所述的電子裝置，其改良在於，該顯示模組還用於顯示該選擇的選單對應的內容。
    [5] 如申請專利範圍第1項所述的電子裝置，其改良在於，該用戶介面模組確定該使用者選擇的選單後，控制該顯示模組以醒目的方式顯示該使用者選擇的選單。
    [6] 如申請專利範圍第1項所述的電子裝置，其改良在於，該偵測模組用於根據該攝像模組拍攝的被遮蔽的臉部部分的最高點確定該選擇選單動作所遮蔽的臉部部分。
    [7] 一種選單選擇方法，用於電子裝置中，該選單選擇方法包括：該電子裝置進入選單模式；啟動攝像模組，持續拍攝使用者的臉部影像；建立該使用者的臉部影像與複數選單的對應關係；顯示該使用者的臉部影像與該等對應的選單；偵測該攝像模組拍攝的使用者的臉部影像是否至少一部分被遮蔽，以判斷使用者是否開始選擇選單；若該使用者開始選擇選單，判斷該至少一部分臉部影像被遮蔽的持續時間是否大於預設時間；及若該至少一部分臉部影像被遮蔽的持續時間大於該預設時間，根據該被遮蔽的臉部部分及該對應關係確定該使用者選擇的選單。
    [8] 如申請專利範圍第7項所述的選單選擇方法，其改良在於，建立該使用者的臉部影像與複數選單的對應關係的步驟包括：將使用者的臉部初始影像劃分為預定數目的區塊；及建立該等預定數目的區塊與該等選單的對應關係。
    [9] 如申請專利範圍第8項所述的選單選擇方法，其改良在於，顯示該使用者的臉部影像與該等對應的選單的步驟包括：顯示該使用者的臉部初始影像及該等預定數目的區塊的分界線；及在該等預定數目的區塊中顯示對應的選單。
    [10] 如申請專利範圍第7項所述的選單選擇方法，其改良在於，根據該被遮蔽的臉部部分及該對應關係確定該使用者選擇的選單的步驟後還包括：以醒目的方式顯示該使用者選擇的選單。
    [11] 如申請專利範圍第7項所述的選單選擇方法，其改良在於，還包括：顯示該選擇的選單對應的內容。
    [12] 如申請專利範圍第7項所述的選單選擇方法，其改良在於，還包括：根據該攝像模組拍攝的該被遮蔽的臉部部分的最高點確定該選擇選單動作所遮蔽的臉部部分。
    类似技术:
    公开号 | 公开日 | 专利标题
    US10805522B2|2020-10-13|Method of controlling camera of device and device thereof
    TWI528225B|2016-04-01|電子設備及其根據手勢控制拍照的方法
    JP5854280B2|2016-02-09|情報処理装置、情報処理方法、およびプログラム
    JP5906779B2|2016-04-20|画像表示装置
    JP5365885B2|2013-12-11|手持ち式電子装置、それに適用される二重像取得方法及びそれにロードされるプログラム
    JP5664442B2|2015-02-04|テレビ会議装置、表示制御方法及び表示制御プログラム
    US9641884B2|2017-05-02|Method and device for establishing a content mirroring session
    US8947560B2|2015-02-03|Image processing apparatus, image processing method, image processing program, and imaging apparatus
    KR20150119621A|2015-10-26|디스플레이 장치 및 그의 이미지 합성 방법
    TW201403379A|2014-01-16|分析人的手勢命令的技術
    JP2020530631A|2020-10-22|インタラクション位置決定方法、システム、記憶媒体、およびスマートデバイス
    US20180131867A1|2018-05-10|Display control apparatus, program, and display control method
    WO2018040510A1|2018-03-08|一种图像生成方法、装置及终端设备
    TW201403454A|2014-01-16|顯示畫面旋轉的方法及系統
    TWI448147B|2014-08-01|電子裝置及其選單選擇方法
    US10791258B2|2020-09-29|Monitoring apparatus and system
    TWI646526B|2019-01-01|子畫面佈局控制方法和裝置
    US20150103150A1|2015-04-16|Information processing method and electronic device
    US20210119884A1|2021-04-22|Augmented reality neighbor awareness networking
    KR20160114126A|2016-10-04|유니버설 캡처
    TWI652599B|2019-03-01|子畫面顯示方法和裝置
    JP2009076983A|2009-04-09|情報処理システム及び情報処理装置
    JP2015154345A|2015-08-24|プロジェクタ
    TW202133627A|2021-09-01|線上直播的即時互動方法及應用於線上直播之即時互動的用戶端手持式裝置
    CN102981600B|2015-10-14|电子装置及其选单选择方法
    同族专利:
    公开号 | 公开日
    US20130057717A1|2013-03-07|
    TWI448147B|2014-08-01|
    US8736705B2|2014-05-27|
    引用文献:
    公开号 | 申请日 | 公开日 | 申请人 | 专利标题
    KR19990011180A|1997-07-22|1999-02-18|구자홍|화상인식을 이용한 메뉴 선택 방법|
    US9892606B2|2001-11-15|2018-02-13|Avigilon Fortress Corporation|Video surveillance system employing video primitives|
    US20090041297A1|2005-05-31|2009-02-12|Objectvideo, Inc.|Human detection and tracking for security applications|
    US7889233B2|2005-08-26|2011-02-15|Nvidia Corporation|Video image processing with remote diagnosis and programmable scripting|
    US8144121B2|2006-10-11|2012-03-27|Victor Company Of Japan, Limited|Method and apparatus for controlling electronic appliance|TWI622298B|2016-08-23|2018-04-21|和碩聯合科技股份有限公司|廣告影像生成系統及其廣告影像生成之方法|
    法律状态:
    2019-05-01| MM4A| Annulment or lapse of patent due to non-payment of fees|
    优先权:
    申请号 | 申请日 | 专利标题
    TW100131997A|TWI448147B|2011-09-06|2011-09-06|電子裝置及其選單選擇方法|TW100131997A| TWI448147B|2011-09-06|2011-09-06|電子裝置及其選單選擇方法|
    US13/304,321| US8736705B2|2011-09-06|2011-11-24|Electronic device and method for selecting menus|
    [返回顶部]