TWI809604B - 視訊會議裝置與其操作方法 - Google Patents

Abstract

一種視訊會議裝置包含影像擷取元件、通訊元件和處理器。通訊元件通訊耦接於伺服器以及與該視訊會議裝置位於相同空間中的一第一電子裝置。處理器用以執行線上會議程式並處理透過通訊元件自伺服器接收的影音訊號。處理器執行線上會議程式於伺服器加入線上視訊會議，並傳送第一電子裝置的認證資訊以獲得游標操作權限。處理器自伺服器接收線上視訊會議的一即時影像訊號，即時影像訊號包含符合游標操作權限的操作指令訊息作用在認證資訊的代表游標產生的即時狀態或代表該線上視訊會議中遠端參與者的代表游標產生的即時狀態。

Description

視訊會議裝置與其操作方法

本揭示文件有關一種智慧會議系統與其操作方法，尤指允許多使用者同時操作之智慧會議系統與其操作方法。

一般的線上視訊會議系統，通常以一位主講者來投放他的螢幕畫面或應用程式畫面，或是主講者選擇投放哪位與會者的畫面。由此所有會者可以共同觀看同一簡報畫面，以便會議討論進行。會議過程中若需針對簡報內容進行探討，只有畫面提供者可以用游標標示簡報畫面內的位置，其他與會者則需要用語言或肢體動作來表達對於畫面內容他/她所想要討論的地方。例如一位與會者對簡報畫面的某處提出問題，其他人需要藉由提問者的敘述自行在投影畫面上找尋對應的內容位於哪個位置，游標操控者也需要找尋到對應的內容在畫面中的位置才能將游標移動過去標示，這對於大型的線上會議會造成很大的困擾。參與會議者不一定每個人都可以即時的了解到當前討論的內容是 顯示在簡報畫面的哪一個部分，而造成需要等待所有人都了解後才可繼續會議，或是隨時都有與會者無法跟上會議討論的不方便情況。

本揭示文件提供一種視訊會議裝置包含影像擷取元件、通訊元件和處理器。通訊元件通訊耦接於伺服器以及與該視訊會議裝置位於相同空間中的一第一電子裝置。處理器用以執行線上會議程式並處理透過通訊元件自伺服器接收的影音訊號。其中處理器執行線上會議程式於伺服器加入線上視訊會議，處理器透過通訊元件自第一電子裝置獲得第一認證資訊，傳送第一認證資訊以進行身份認證，以控制伺服器提供第一電子裝置對應第一認證資訊的第一游標操作權限，第一游標操作權限用於設定第一認證資訊於線上視訊會議中的第一代表游標。其中處理器透過通訊元件收集來自第一電子裝置的第一操作指令訊息，處理器即時處理第一操作指令訊息，並將處理後的第一操作指令訊息傳送至伺服器。其中通訊元件自伺服器接收線上視訊會議的即時影像訊號，處理器處理即時影像訊號並輸出以顯示於顯示元件，即時影像訊號包含符合第一游標操作權限的第一操作指令訊息作用在第一代表游標產生的第一代表游標的即時狀態或作用在代表線上視訊會議中遠端參與者的第二代表游標產生的第二代表游標的即時狀態。

本揭示文件提供一種視訊會議裝置包含影像擷取 元件、通訊元件和處理器。影像擷取元件用以擷取與視訊會議裝置位於同一空間中的第一使用者的生理特徵作為認證資訊。通訊元件用以通訊連接伺服器。處理器用以執行線上會議程式並處理透過通訊元件自伺服器接收的影音訊號。其中處理器執行線上會議程式於伺服器加入線上視訊會議，處理器透過影像擷取元件接收第一使用者的生理特徵，並透過通訊元件傳送認證資訊以進行身份認證，以控制伺服器提供第一使用者對應認證資訊的游標操作權限，游標操作權限用於設定認證資訊於線上視訊會議中的第一代表游標。其中處理器透過影像擷取元件接收第一使用者的特定手勢，辨識特定手勢以得到第一操作指令訊息，其中第一操作指令訊息包含對第一代表游標的操作指令，處理器即時處理第一操作指令訊息並將處理後的第一操作指令訊息傳送至伺服器。其中通訊元件自伺服器接收線上視訊會議的即時影像訊號，處理器處理即時影像訊號並輸出以顯示於顯示元件，即時影像訊號包含符合游標操作權限的第一操作指令訊息作用在第一代表游標所產生的第一代表游標的即時狀態或作用在代表線上視訊會議中遠端參與者的第二代表游標產生的第二代表游標的即時狀態。

本揭示文件提供一種視訊會議裝置的操作方法包含以下運作：透過伺服器加入線上視訊會議；獲取與視訊會議裝置位於同一空間中的使用者或電子裝置的認證資訊，其中認證資訊為自影像擷取元件或通訊元件接收；傳送認證資訊以進行身份認證；控制伺服器提供使用者或電子裝 置認證資訊在線上視訊會議中的游標操作權限，其中游標操作權限用於設定認證資訊於線上視訊會議中的第一代表游標；收集並處理來自使用者或電子裝置的第一操作指令訊息，其中第一操作指令訊息包含對第一代表游標的操作指令，處理器即時處理第一操作指令訊息並將處理後的第一操作指令訊息傳送至伺服器；透過通訊元件自伺服器接收即時影像訊號，即時影像訊號包含符合游標操作權限的第一操作指令訊息作用在第一代表游標所產生的第一代表游標的即時狀態或作用在代表線上視訊會議中遠端參與者的第二代表游標產生的第二代表游標的即時狀態；處理即時影像訊號並輸出以顯示於顯示元件。

上述的視訊會議裝置和操作方法的優點之一，是方便主講者以外的與會者解釋與說明。

110a,110b:智慧會議系統

120a,120b:會議裝置

130a,130b:影像擷取元件

140a,140b:顯示裝置

150a,150b:使用者

150c,150d:遠端使用者

160c,160d:遠端行動裝置

160a,160b:行動裝置

170:處理器

180:通訊元件

190:音訊擷取元件

200:操作方法

S210,S220,S230,S240,S250:步驟

S310,S320,S330,S340:步驟

x,y,z:軸

500:顯示畫面

510a,520b:游標

第1A圖為說明根據本揭示文件一實施例的多個智慧會議系統運作的示意圖。

第1B圖為第1A圖的會議裝置簡化後的功能方塊圖。

第2圖為依據本揭示文件一實施例的操作方法的流程圖。

第3圖為第2圖的部分步驟的細部流程圖。

第4圖為依據本揭示文件一實施例的通訊裝置示意圖。

第5圖為依據本揭示文件一實施例的顯示裝置顯示的分享內容的示意圖。

以下將配合相關圖式來說明本揭示文件的實施例。在圖式中，相同的標號表示相同或類似的元件或方法流程。

第1A圖為說明根據本揭示文件一實施例的多個智慧會議系統110a和110b之運作的示意圖。智慧會議系統110a和110b用於透過伺服器進行線上會議，且此線上會議允許遠端使用者150c和150d分別透過遠端行動裝置160c和160d加入。在一些實施例中，智慧會議系統110a、智慧會議系統110b、遠端使用者150c和遠端使用者150d可以不在同一個空間中，並透過網路互相通訊。例如，智慧會議系統110a、智慧會議系統110b以及分別由遠端使用者150c和150d持有的遠端行動裝置160c和160d透過網路彼此通訊耦接。

智慧會議系統110a包含會議裝置120a、顯示裝置140a以及位於會議裝置120a附近(例如位於同一會議室中)的多個行動裝置160a。智慧會議系統110b包含會議裝置120b、顯示裝置140b以及位於會議裝置120b附近(例如位於同一會議室中)的多個行動裝置160b。會議裝置120a和120b用於連線至伺服器以建立或參與線上會議，並用於依據伺服器傳送的資料控制顯示裝置140a和140b的顯示畫面。為方便說明，本揭示文件將智慧會議系統110a的會議裝置120a描述為線上會議的會議主持裝 置(Host)，並將智慧會議系統110b的會議裝置120b描述為線上會議的會議參與裝置(Participant)，但本揭示文件不以此為限，智慧會議系統110a和110b的會議裝置120a和120b亦可互相交換身份。在本揭示文件中，智慧會議系統110a和110b或是其他使用者使用的裝置都具有在伺服器上創建線上會議並取得會議主持裝置權限的功能，會議主持裝置具有設定其主持的線上會議的所有參與者操作權限等功能，而會議參與裝置能夠加入已創建之線上會議，其中會議參與裝置並不只限於圖式中的數量，第1A圖僅為舉例說明所用，相關內容將於後續段落詳細說明。

請再參考第1A圖的智慧會議系統110a，行動裝置160a用於以有線或無線的方式通訊耦接至會議裝置120a。使用者150a可以透過操作行動裝置160a的線上會議程式或透過特徵辨識(例如臉部辨識、聲紋辨識、手勢辨識或語音辨識)的方式，透過會議裝置120a登入線上會議以獲取對於線上會議的操作權限，以及傳送操作指令訊息至會議裝置120a。在一些實施例中，若使用者150a攜帶著行動裝置160a移動至與智慧會議系統110a不同的空間，則此使用者150a可以視為遠端使用者150c或150d，其攜帶的行動裝置160a可以視為遠端行動裝置160c或160d。遠端行動裝置160c或160d可以直接透過線上會議程式連接伺服器，而不需透過智慧會議系統110a或110b。前述有關智慧會議系統110a的描述，也 適用於線上會議系統110b，為簡潔起見，在此不重複贅述。

在一些實施例中，若遠端行動裝置160c和160d加入由智慧會議系統110a的會議裝置120a建立的線上會議，則遠端行動裝置160c和160d直接自伺服器獲取操作權限，並可直接發送操作指令訊息至伺服器。遠端行動裝置160c和160d獲取操作權限以及傳送操作指令訊息的詳細方式將於後續段落說明，在此暫不贅述。在一些實施例中，同時參與線上會議之智慧會議系統可以有兩個以上，並由建立線上會議的會議裝置(例如智慧會議系統110a的會議裝置120a)作為會議主持裝置，其餘的會議裝置(例如智慧會議系統110b的會議裝置120b)皆為會議參與裝置。

在一些實施例中，智慧會議系統110a的使用者150a可以透過會議裝置120a於伺服器上建立線上會議，並透過會議裝置120a建立操作權限的多個種類(例如高級主管和客戶)以及設定各個種類操作權限的權限範圍。

第1B圖為第1A圖的會議裝置120a簡化後的功能方塊圖。會議裝置120a包含影像擷取元件130a、處理器170、通訊元件180和音訊擷取元件190(例如麥克風)。處理器170耦接通訊元件180，執行線上會議程式並提供使用者介面與連接裝置介面功能。通訊元件180用於通訊連接於行動裝置160a和伺服器，其中通訊元件180可以透過訊號纜線(例如HDMI傳輸線)、網路線、藍牙、Wi-Fi 直連或其他合適的有線或無線連接方式來實現與行動裝置160a的通訊連接，並透過網際網路連接伺服器。處理器170還耦接於影像擷取元件130a、音訊擷取元件190和第1A圖的顯示裝置140a。在一些實施例中，處理器170還通訊連接於影像擷取元件130b。影像擷取元件130a用於獲取會議室中的會議參與者的臉部特徵及/或手勢資訊。音訊擷取元件190用於獲取會議參與者的語音資訊。處理器170執行作業系統與線上會議程式，用於自影像擷取元件130a和音訊擷取元件190收集到的資訊獲得操作指令訊息並發送至伺服器，且用於依據伺服器傳送的音訊及/或視訊資料控制顯示裝置140a顯示對應的畫面內容(例如會議簡報)。另外，處理器170執行線上會議程式還可用於在伺服器上建立線上會議，且用於在伺服器上建立操作權限的多個種類以及設定各個種類操作權限的權限範圍。

在一些實施例中，影像擷取元件130a可以由攝影機、數位相機、行動裝置上的相機單元或其他合適可擷取影像畫面的電子裝置來實現。在一些實施例中，顯示裝置140a可以由平面顯示器、投影機或其他合適可以顯示影像之電子裝置來實現。在一些實施例中，顯示裝置140a可與會議裝置120a整合為一體。在一些實施例中，處理器170可以由單一或多晶片的通用處理器、特殊應用積體元件(ASIC)或現場可程式化邏輯閘陣列(FPGA)來實現。在一些實施例中，行動裝置可以是智慧型手機、平板電腦、筆記型電腦或其他合適行動裝置。

前述會議裝置120a中的各種元件的連接關係、實施方式以及優點，也適用於會議裝置120b中的對應元件，為簡潔起見，在此不重複贅述。

以下以第1A圖為示例說明本揭示文件的智慧會議系統的作業流程。使用者150a使用行動裝置160a、電腦或會議裝置120a上的線上會議程式登入視訊會議伺服器建立視訊會議，伺服器會賦予使用者150a會議主持人身份，使用者150a可以選擇其他使用者並發出會議邀請，由伺服器生成會議邀請通知發給被選定使用者的連絡信箱或智慧會議系統帳號。使用者150a按照與會者身份類別分別給予對應種類的會議操作權限，身份類別由高到低可包括主持人、主講者、一般與會者與旁聽訪客。身份類別亦可為其他使用者對應使用者150a所屬公司或團體組織的階級，由高到低包括高階主管、部門主管、員工和訪客。由主持人依身份類別分別設定，會議操作權限包括是否可以顯示該身份與會者所進行的游標移動、上色標示、劃線標示、文字註解、換頁、頁面縮放、旋轉角度、新增新的分享畫面視窗和顯示新的內容畫面等操作，使用者150a並可設定較高身份類別(即操作權限較高)的與會者進行發言或操作時，是否不顯示較低身份(即操作權限較低)與會者的操作。之後其他使用者150b、遠端使用者150c和150d使用行動裝置160b、遠端行動裝置160c(例如電腦)、遠端行動裝置160d或會議裝置120a和120b上的線上會議程式登入視訊會議伺服器，透過會議邀請通知報 名參加會議，伺服器會將會議參與者的資訊提供會議主持人使用者150a，會議主持人使用者150a可以同意或否決會議參與者參加會議，並設定參與者的會議身份為主持人、主講者、一般與會者或旁聽訪客。當視訊會議開始後，主持人使用者150a可選擇由任一使用者透過線上會議程式上傳的畫面、文件或檔案分享給所有連線進伺服器的裝置(如會議裝置120a和120b、行動裝置160a和160b和遠端行動裝置160c和160d)，上傳的畫面、文件或檔案由伺服器接收，經過處理後產生分享畫面再傳輸到所有使用者端例如所有連線進伺服器的裝置，如此所有使用者可透過線上會議程式會看到主持人選擇的分享畫面。視訊會議中使用者150a和150b、遠端使用者150c和150d透過行動裝置160a和160b(例如電腦)、遠端行動裝置160c和160d、會議裝置120a或120b上的線上會議程式操作控制游標或進行其他功能操作產生操作指令訊息，使用者150a、150b的操作指令訊息會分別由會議裝置120a、120b蒐集後傳至伺服器，遠端使用者150c、150d的操作指令訊息會分別由遠端行動裝置160c、160d直接傳至伺服器，這些操作指令訊息可被即時處理並由伺服器對應到每位使用者所屬的權限和游標，若某位使用者的操作指令訊息不符合其權限則會視為無效操作，所有使用者同一時間發出的有效的操作會被一起處理，伺服器會將有效的操作和收到的上傳畫面處理後產生分享畫面，分享畫面會即時顯示符合權限的游標移動等操作結果，如此會議 中使用者可在線上會議程式的分享畫面中看見其他人的有效操作。在一些實施例中，使用者150a或150b、遠端使用者150c或150d可分別使用行動裝置160a、160b、遠端行動裝置160c、160d或會議裝置120a或120b，隨時透過安裝的線上會議程式建立會議、邀請與會者參加或是加入已建立的會議、上傳分享畫面、發出操作指令以及同步在分享畫面中看到與會者發出的操作指令造成的變化，以進行視訊會議。

第2圖為依據本揭示文件一實施例的操作方法200的流程圖。操作方法200適用於第1A圖的會議裝置120a或其他安裝線上會議程式的裝置，僅以會議裝置120a為例說明。多個各自執行線上會議程式的會議裝置可以透過伺服器協同運作以舉行線上會議，以下先說明個別會議裝置(以會議裝置120a為例)執行操作方法200的過程。

在步驟S210中，處理器170會透過通訊元件180或影像擷取元件130a獲取多個指令來源的多個認證資訊。在一些實施例中，多個指令來源可以包含多個行動裝置160a。當不特定的行動裝置160a進入通訊元件180的通訊範圍，使用者150a可以透過行動裝置160a開啟特定的應用程式或連上特定網頁，以透過會議裝置120a連上伺服器，接著輸入並發送個人認證資訊以登入視訊會議。在一些實施例中，個人認證資訊可以是以下一或多者：(1)透過影像擷取元件130a獲取的使用者臉部特徵；以及(2) 透過通訊元件180獲取之使用者的身份識別資訊，其中該身份識別資訊包含以下一或多者：電子信箱地址、帳號和密碼之組合、電話號碼、生理特徵資料以及國際行動裝置辨識碼等等。處理器170會透過通訊元件180自行動裝置160a接收這些認證資訊，以在後續的步驟S220中決定多個使用者150a的多個行動裝置160a各自的操作權限。

在一些實施例中，多個指令來源可以包含多個使用者150a，當不特定的使用者150a進入影像擷取元件130a的視野，處理器170會透過影像擷取元件130a擷取使用者150a的臉部特徵作為其認證資訊，以在後續的步驟S220中決定多個使用者150a各自的操作權限。

在步驟S220，處理器170會透過通訊元件180傳送於步驟S210獲取的認證資訊傳至伺服器進行身份認證，以使多個指令來源分別獲得控制該線上會議的一分享內容的多個操作權限。在一些實施例中，分享內容可以是智慧會議系統110a或110b的某一行動裝置160a或160b分享給線上會議所有參與者的應用程式(例如文字編輯軟體或簡報軟體)畫面、遠端行動裝置160c或160d分享給線上會議所有參與者的應用程式畫面、或是儲存於伺服器的雲端應用程式之畫面，主持裝置可以隨時選擇分享給線上會議所有參與者或是設定參與者的畫面分享權限，允許參與者在會議中上傳分享畫面。

在一些實施例中，身份認證包含比對認證資訊與伺服器中儲存的某位使用者的註冊資訊，其中註冊資訊可以 包含以下一或多者：個人電子信箱地址、帳號和密碼之組合、國際行動裝置辨識碼、電話號碼以及生理特徵等等。在一些實施例中，註冊資訊還包含該位使用者的階級資訊，其中階級資訊可以公司職等區分，例如高階主管、一般員工或客戶等等。伺服器中將各公司或組織的使用者的註冊資訊設為同一群組，由認證過的群組管理者進行身份驗證和管理。在身份認證成功後(亦即認證資訊符合註冊資訊)，伺服器會依據會議建立者的設定，給予對應的指令來源與註冊資訊中的階級資訊相對應的操作權限。

在一些實施例中，會議建立者於會議開始前可建立報名程式並選擇相關使用者，由伺服器產生報名連結、頁面或通知給相關使用者，相關使用者可以通過報名連結、頁面或是線上會議程式參加會議而成為參與者，會議建立者可設定參與者於視訊會議中的操作權限，並設定無關使用者是否可與會旁聽、是否能分享畫面或出聲討論、是否顯示對應游標等權限。在一些實施例中，欲參與會議的使用者可使用行動裝置或電腦執行線上會議程式報名參加會議，由使用者提供帳號、授權讀取使用者所屬公司或組織系統的使用者身份資訊或是由使用者自己提供身份資訊，會議主持人可設定要求使用者進行身份認證，例如透過使用者150a所屬公司信箱或行動裝置160a收取認證信或認證碼，由使用者150a回覆給智慧會議系統110a進行認證。

在一些實施例中，來自不同群組的多位使用者進行 線上會議時，會議主持者可操作線上會議程式自伺服器讀取與會使用者在其群組內驗證過的身份資訊，例如公司名稱與職稱，在視訊會議畫面中可在使用者名稱、頭像、該使用者視訊畫面或對應該使用者的游標旁邊標示身份資訊。在一些實施例中，使用者的身份資訊儲存於其所屬公司或組織群組管理的資料庫或智慧會議系統內，當使用者主持或參與視訊會議時，伺服器自該使用者對應群組的資料庫或智慧會議系統讀取該使用者的身份資訊，並依據主持者的設定決定賦予哪些權限、是否在視訊會議中標示該使用者的身份資訊。

在一些實施例中，若伺服器透過身份認證後判斷指令來源的階級為高階主管，則伺服器將給予以下操作權限：切換分享內容之頁面之權限、將分享內容之頁面放大或縮小之權限、移動屬於該指令來源之游標之權限、賦予或移除其他使用者部分或全部的操作權限之權限、設定是否顯示對應某位或所有其他使用者的游標之權限、設定其他使用者除移動游標外是否能在分享內容中進行其他操作之權限等等。又例如，若處理器170認證指令來源的身份為客戶，則處理器170可能將其操作權限設定為只包含移動屬於該指令來源的游標之權限。在一些實施例中，會議參與者的操作權限可以高於會議主持者的操作權限。

在步驟S230，處理器170判斷是否自指令來源接收到操作指令訊息。在一些實施例中，操作指令訊息包含執行以下一或多種操作的指令：移動分享內容中的游標、 切換分享內容的頁面(例如切換投影片頁面或切換桌面)、放大縮小分享內容中的物件、賦予或移除使用者操作權限等操作。倘若處理器170沒有收到操作指令訊息，則處理器170可以重複執行步驟S230直到接收到操作指令訊息為止。另一方面，若處理器170判斷已接收到操作指令訊息，則處理器170可以接著執行步驟S240。

在一些實施例中，在步驟S230之前，處理器170可以由影像擷取元件130a(和130b)或音訊擷取元件190接收來自於使用者的觸發控制訊息(例如使用者擺出預定手勢如舉手並伸直手臂，或是使用者說出預定詞句)，或由通訊元件180接收來自於行動裝置160a(或160b)的觸發控制訊息(例如使用者將連入視訊會議中的行動裝置拿起來並上下搖晃，或是在視訊會議中移動游標或點選顯示的功能選單、選項或按鈕等使用者介面)。處理器170可以在接收到觸發控制訊息後，才進入步驟S230判斷是否自指令來源接收到操作指令訊息，以節省處理器170之運算資源。在一些實施例中，同一個認證資訊可以對應到一使用者150a(或150b)和其擁有的行動裝置160a(或160b)，伺服器可以在步驟S220中同時將操作權限賦予使用者150a和其行動裝置160a，但同一時間處理器170可以只接收使用者150a(或150b)和其行動裝置160a(或160b)其中一者發送的操作指令訊息。亦即，若使用者150a(或150b)同時使用手勢和行動裝置160a(或160b)發送多個操作指令訊息，則處理器170會 擇一處理。

在步驟S240，處理器170會即時收集來自所有指令來源同時發出的操作指令訊息，並將這些操作指令訊息一起傳送至伺服器。如此一來，多個使用者150a可以一起透過會議裝置120a操作線上會議的分享內容。更進一步來說，智慧會議系統110a中的多個使用者150a以及智慧會議系統110b中的多個使用者150b可以透過各自的會議裝置120a一起操作同一個線上會議的分享內容，智慧會議系統110a和智慧會議系統110b會各自即時收集同時發出的操作指令訊息，並傳送給伺服器即時處理，將操作結果同時顯示於視訊會議畫面中。

在一些實施例中，伺服器會依據步驟S220中給予每個指令來源的操作權限，篩選每個指令來源的操作指令訊息。例如，某一使用者150a於步驟S220中被認證為客戶，會議主持人設定客戶身份的畫面操作權限僅可在共享畫面中移動游標，則伺服器於後續步驟中可響應該使用者150a以手勢或語音發出的移動游標操作指令訊息，並忽略該使用者所發出切換頁面操作的指令訊息。

在一些實施例中，伺服器會依據步驟S220中給予每個指令來源的操作權限設定每個指令來源以禁止其產生一或多個類別的操作指令訊息。例如，某一使用者150a的行動裝置160a於步驟S220中被認證為客戶，會議主持人設定客戶身份的畫面操作權限僅可在共享畫面中移動游標，伺服器則會於步驟S220時，禁止該行動裝置160a 透過應用程式產生以下類別的操作訊息指令：切換頁面、放大縮小物件等多個操作訊息指令，並僅允許行動裝置160a的應用程式產生移動自身游標的操作指令訊息，遠端行動裝置160c的應用程式在收到禁止操作訊息指令的類別後，會在加入此次視訊會議期間鎖住產生這些操作訊息指令類別的權限與相關設定，離開視訊會議後解鎖，伺服器於後續步驟中不會響應被禁止類別的操作訊息指令。

在一些實施例中，會議裝置120a亦可依據步驟S220中給予附近每個指令來源的操作權限，篩選附近每個指令來源的操作指令訊息，再將篩選後的操作指令訊息傳送至伺服器。在另一些實施例中，會議裝置120a亦可依據步驟S220中給予附近每個指令來源的操作權限，設定附近每個指令來源以禁止其產生一或多個類別的操作指令訊息。

在一些實施例中，使用者150a可以透過行動裝置160a、手勢或語音產生發送至會議裝置120a的操作指令訊息。為了獲得操作指令訊息，處理器170可以(1)透過影像擷取元件接收指令來源(例如使用者150a)的特定手勢並透過影像辨識技術獲得對應的操作指令訊息、(2)透過音訊擷取元件接收指令來源(例如使用者150a)的語音訊息並透過語音辨識技術獲得對應的操作指令訊息、及/或(3)透過通訊元件接收指令來源(例如行動裝置160a)被施以特定操作(例如旋轉)時產生的通訊封包並解析其內容以獲得對應的操作指令訊息。處理器170會判斷接收到的操作 指令訊息是來自於使用者150a(例如手勢或語音)，亦或來自行動裝置160a(例如手機產生的訊息封包)，並據以取得該使用者所發出的操作指令。在一些實施例中，處理器170會對來自不同指令來源的操作指令訊息處理，轉換為同一格式訊息封包傳輸給伺服器，由伺服器進行訊息來源判斷與後續處理。

在一些實施例中，遠端行動裝置160c和160d也包含影像擷取元件和音訊擷取元件。遠端行動裝置160c和160d可分別獲取遠端使用者150c和150d的臉部特徵或聲紋，並將臉部特徵或聲紋作為認證資訊傳送至伺服器，以供伺服器決定遠端使用者150c和150d各自的操作權限或遠端行動裝置160c和160d各自的操作權限。如此一來，遠端使用者150c和150d亦可以利用語音、手勢及/或對於遠端行動裝置160c和160d的特定操作發送操作指令訊息至伺服器，例如在對行動裝置進行視訊發言時，同時透過影像擷取元件或音訊擷取元件發出操作指令訊息，操作視訊會議的簡報畫面。

在步驟S250，處理器170會自伺服器接收即時依據已接收到的操作指令處理後的分享畫面內容。舉例來說，若處理器在步驟S240傳送了分別來自兩個使用者150a的切換頁面操作指令訊息與移動游標操作指令訊息至伺服器，伺服器會於步驟S250回傳已依據這兩個操作指令訊息調整後的分享內容(亦即游標已移動且頁面已切換)至所有與會裝置，通訊元件180接收到新的分享畫面 內容後處理器170會控制顯示裝置140a和140b顯示此分享畫面內容。總而言之，透過執行操作方法200，線上會議系統與會議裝置120a允許位於相同或不同空間中的多個使用者150a和150b、多個遠端使用者150c和150d同時操作線上會議的分享畫面內容，並自不同的與會裝置觀看同步處理後的分享畫面內容，藉此每個使用者150a、150b、遠端使用者150c和150d能夠在線上會議的分享畫面中直接指出其目前想討論的部分，讓其他使用者能即時注意到討論重點，使得線上會議的討論過程變得如同現場討論般易於理解。步驟S250的詳細內容將於後續段落配合第3圖進一步說明。

第3圖為本揭示文件第2圖的步驟S250的細部流程圖。如前所述，在視訊會議中，不同指令來源產生的操作指令訊息可能包含的多種操作指令，經過依據操作權限的篩選與處理後會造成分享畫面內容的改變，為了簡化說明，第3圖的流程僅描述了移動游標和切換頁面兩種指令，對應於其他種類指令(例如上色標示、劃線標示、加入註解、放大縮小物件或切換桌面等等)的步驟可以排列在步驟S310之前、步驟S320和S330之間或步驟S340之後。

在步驟S310，伺服器或處理器170判斷指令來源的操作指令訊息是否包含移動游標的指令。倘若操作指令訊息具有移動游標之指令，則處理器170可以進入步驟S320。倘若操作指令訊息不具有移動游標之指令，則處理 器170可以跳過步驟S320，直接進入步驟S330。

在步驟S320，伺服器或處理器170已在步驟S310判斷操作指令訊息包含使用者150a欲移動游標的操作指令，處理器170會進一步依據操作指令訊息的內容移動游標，例如根據操作指令訊息內的座標、移動向量或其他參數將游標移到分享畫面的特定位置。在一些實施例中，使用者150a在移動游標以外還發出其他操作指令，例如在行動裝置上的線上會議程式選擇加入標示、註解或其他功能，操作指令訊息除了游標移動的操作指令外還會加入對應這些功能的操作指令，伺服器會據以處理，在視訊會議的分享畫面內容中顯示基於游標移動軌跡的上色標示、劃線標示或其他可能的標示結果，或是在分享畫面內容中游標所在位置顯示註解欄位，之後使用者可操作行動裝置輸入註解，分享畫面內容中顯示的註解欄位會即時顯示使用者的輸入結果，使用者亦可選擇在游標位置加入圖片、表格、檔案、連結或文字等等內容。在一實施例中，加入標示、註解或其他內容的分享畫面內容的頁面會儲存於伺服器端，在線上會議中分享畫面內容被切換到其他頁面或關閉後仍會儲存一定時間，因此當分享畫面內容重新切換回該頁面時，先前加入的標示、註解或其他內容仍會隨之顯示給所有參與者。

在一實施例中，移動游標的指令是來自於使用者150a以豎起一根手指(例如食指)的手勢於空中指著螢幕上下左右移動，影像擷取元件130a會擷取手勢移動的連 續影像，而處理器170會分析擷取影像中手勢移動的方向與向量，並產生讓游標跟隨使用者150a之手勢移動的操作指令，傳輸到伺服器產生游標移動後的分享畫面內容。在另一實施例中，移動游標的指令是來自於使用者150a說出的「向下移動」或「向右移動」等特定字詞，音訊擷取元件190會擷取使用者發出的語音音訊，處理器170會分析處理語音音訊後取得使用者說出的語音操作指令上傳伺服器，或是將語音音訊上傳伺服器由伺服器分析處理取得語音操作指令，伺服器會依據語音操作指令的指示產生游標移動後的分享畫面內容，其中游標依據使用者150a之語音指令往對應方向移動。在一實施例中，使用者150a可用語音或手勢發出標示、註解或其他功能的操作指令，再結合移動游標的操作指令，在分享畫面內容中加上標示、註解或其他內容，讓線上會議所有與會者可以看到。

在另一實施例中，請同時參考第3圖和第4圖，指令來源是行動裝置160a，當使用者旋轉行動裝置160a時，行動裝置160a和其執行的線上會議程式會依據三個方向軸(例如第4圖中的x軸、y軸和z軸)中的一或多者的旋轉角度，產生通訊封包並傳輸到附近的會議裝置120a，處理器170可解析這些通訊封包以獲得操作指令訊息，且操作指令訊息中包含對應的移動游標指令。例如，通訊封包包含行動裝置160a依據以x軸為軸心旋轉的角度，處理器170會據以獲得具有游標垂直移動資訊的操作指令訊息，其中垂直移動資訊用於控制分享畫面內容中的游標垂 直移動；通訊封包亦可包含行動裝置160a以z軸為軸心旋轉的角度，處理器170會據以獲得具有水平移動資訊的操作指令訊息，其中水平移動資訊用於控制分享畫面內容中的游標水平移動；使用者可利用行動裝置160a隨意轉動，行動裝置160a內的陀螺儀、加速度計或其他感測器會同時偵測以x軸與z軸為軸心的旋轉角度，並獲得包含對應這些旋轉角度的操作指令訊息，使游標在畫面上同步斜向移動。換言之，分享畫面包含了操作指令訊息作用於游標後游標的即時狀態，例如速度、加速度、位移量以及位移方向等等。在一些實施例中，行動裝置160a以y軸為軸心旋轉會觸發處理器或伺服器判斷行動裝置160a是否具有調整分享畫面內的內容頁面大小、旋轉內容頁面在分享畫面中的角度或在分享畫面切換內容頁面的權限，若行動裝置160a具有權限，則根據行動裝置160a以y軸為軸心旋轉的方向和角度獲得調整分享畫面內的內容頁面大小、旋轉內容頁面或在分享畫面切換內容頁面的操作訊息指令，伺服器並會據以產生分享畫面內容給與會裝置。值得注意的是，行動裝置160a在三軸上旋轉所產生的指令能夠依據使用者150a需求做設定與改變，並可互相替換，不限於上述的示例性實施例。

在一些實施例中，x軸和y軸為與重力方向垂直的水平面的坐標軸，兩者互相垂直，z軸為垂直水平面的坐標軸，並與重力方向平行。

在步驟S330，伺服器或處理器170判斷指令來 源的操作指令訊息是否包含切換頁面的指令。倘若具有切換頁面之指令，則處理器170會進入步驟S340。倘若不具有切換頁面之指令，則處理器170可以跳過步驟S340並再度執行步驟S230。在一些實施例中，步驟S330伺服器或處理器170還會判斷操作指令訊息是否包含調整頁面縮放、旋轉角度、截圖、新增新的分享畫面視窗並顯示一使用者選擇的檔案或資訊於分享畫面視窗中...等等功能指令，並根據權限設定篩選後據以執行。

在步驟S340，伺服器或處理器170已在步驟S330判斷操作指令訊息包含使用者150a欲切換頁面的操作指令，在一實施例中，切換頁面的指令是來自於使用者150a，使用者150a可以透過五指伸直的手勢於空中左右移動的方式來切換頁面，例如當手勢分別向使用者150a的左方和右方(或是上方和下方)移動時，處理器170可以透過影像辨識技術將分享內容中的投影片分別切換為前一頁和下一頁，但本揭示文件不限於此。在另一實施例中，例如當手勢分別向使用者150a的左方和右方(或是上方和下方)移動時，處理器170可以透過影像辨識技術分別將分享內容中的作業系統桌面向左方移動和右方移動，以在多個作業系統桌面之間切換。在另一實施例中，切換頁面的指令是來自於使用者150a說出的「下一頁」或「上一頁」等特定字詞，處理器170會依據使用者的語音指令透過語音辨識技術將分享內容中的投影片切換至對應頁面。

在一些實施例中，請同時參考第3圖和第4圖， 指令來源是行動裝置160a，當行動裝置160a於特定方向上旋轉時會觸發處理器170切換頁面。例如行動裝置160a在y軸上沿著第一方向(例如y軸上箭號所指的旋轉方向)旋轉時，處理器170會切換投影片頁面至下一頁；當行動裝置160a於y軸上沿著第二方向(例如相反於y軸上箭號所指的旋轉方向之方向)旋轉時處理器170會切換投影片至上一頁，但本揭示文件不限於此。

上述配合第3圖和第4圖所描述的關於使用者150a和行動裝置160a產生操作指令訊息的方法和步驟，亦對應地適用於遠端使用者150c和150d以及遠端行動裝置160c和160d，在步驟S330中，伺服器可以對遠端使用者150c和150d以及遠端行動裝置160a和160b產生的操作指令進行處理和權限判斷，為簡潔起見，在此不重複贅述。在一些實施例中，遠端使用者150c和150d可利用遠端行動裝置160c和160d的觸控螢幕、滑鼠、鍵盤、軌跡球或其他輸入裝置進行操作，遠端行動裝置160c和160d會產生對應的操作指令訊息，並經過權限設定的篩選與處理後，自伺服器接收即時更新的分享畫面內容，顯示遠端使用者150c、150d或其他線上會議參與者進行操作後產生的改變，例如游標移動、上色標示、劃線標示、文字註解、換頁、頁面縮放、旋轉角度、擷圖、新增新的分享畫面視窗和顯示新的內容畫面等等。

第5圖為依據本揭示文件一實施例的顯示裝置140a或140b顯示的分享內容500之示意圖。第5圖用 於說明多個使用者150a和150b、遠端使用者150c和150d同時操作分享內容500的情境。游標510a為使用者150a所操控的游標，而游標510b為遠端使用者150d所操控的游標，在圖示中各游標旁邊分別標示使用者的身份，主持人或使用者可自行設定是否顯示身份標示。在一些實施例中，請同時參考第1圖和第5圖，游標510a可以理解為使用者150a使用手勢、語音或行動裝置160a所操控的游標，而游標510b可以理解為遠端使用者150d使用手勢、語音或遠端行動裝置160d所操控的游標。在一些實施例中，如第5圖所示，分享內容500中可以同時顯示一或多個游標並即時顯示游標的移動，且這些游標可以用不同的標籤、顏色、游標圖案或名稱標示以互相區隔。在一些實施例中，處理器170可以同時依照使用者150a和遠端使用者150d的需求(例如操作指令訊息)分別操控游標510a和510b，例如對應操作指令分別移動游標510a和510b，並依據主持人或使用者設定對應顯示或隱藏游標510a和510b。例如，當使用者150a正在發言時，處理器170可以依據會議主持人或使用者150a的設定顯示或隱藏游標510b，並依據會議主持人設定隱藏游標510a或其他未發言者游標。在一些實施例中，當其他未發言者游標被隱藏時，未發言的使用者仍可在其所使用的行動裝置或是附近的智慧會議系統110a的顯示裝置140a上看到自己的游標，但其餘參與者不會在各自使用的行動裝置上看到其他未發言的使用者的游標，遠端的智慧會議 系統110b的顯示裝置也不會顯示未發言的使用者的游標。以上僅以游標移動為例說明，本發明所述的智慧會議系統110a亦可處理使用者的其他功能操作指令，包括上色標示、劃線標示、文字註解、換頁、頁面縮放、旋轉角度、擷圖、新增新的分享畫面視窗和顯示新的內容畫面等等。在一實施例中，會議主持人可設定參與者未發言時發出的操作指令結果不會顯示給所有參與者，僅未發言但有發出操作指令的使用者在其行動裝置或智慧會議系統的顯示裝置上能看到操作結果，當一使用者發言時，其之前的操作結果會隨之分享給其他參與者，並顯示於分享畫面中，如游標位置、上色標示、劃線標示、文字註解、換頁、頁面縮放、旋轉角度、新增新的分享畫面視窗和顯示新的內容畫面等等，如此使用者可預先在未發言時生成操作指令，無須佔用發言時的會議時間。

在一些實施例中，智慧會議系統的會議主持人還可設定：對應各使用者游標是否隨時顯示、無權切換頁面的使用者是否可提出要求切換頁面、旁聽或訪客使用者是否可以發言、是否自動產生會議記錄並提供給哪些使用者等等功能。在一些實施例中，會議主持人可取得會議參與者和參與者經認證的註冊身份資訊，若有參與者或參與者身份無法認證或是未經身份註冊，智慧會議系統會通知會議主持人，會議主持人可透過線上會議程式移除該參與者。在一些實施例中，會議主持人可設定會議參與者為主講者，主講者可在行動裝置或電腦選擇檔案或視窗畫面上傳並分 享畫面給其他使用者，並可操作切換頁面，當主講者發言或操作游標移動等功能時，伺服器會只顯示主持人和主講者的操作結果，其他使用者的游標移動或其他功能操作結果不會顯示於分享畫面。在一些實施例中，非主持人或主講者的使用者仍可在自己的裝置的視訊會議分享畫面看到自己發出的游標移動或功能操作結果，但伺服器僅會將游標移動或功能操作結果的畫面提供給該使用者的行動裝置，其他使用者的裝置並不會收到該畫面，亦即非主持人或主講者的使用者僅可操作自己裝置的游標移動或其他功能操作。

在一些實施例中，會議主持人在進行中可發起投票表決，主持人可由會議建立者設定自己或其他參與者為主持人，主持人並可以設定或選擇哪些參與者可以參與投票表決，例如身份為一定層級以上的使用者才可以參與投票表決，線上會議程式提供設定介面供主持人設定投票表決內容與選擇可投票人員，並根據主持人的設定提供參與者投票表決功能介面讓參與者決定其投票選項，伺服器會接收並統計參與者完成的投票選項，並根據主持人的設定顯示投票結果於線上會議程式的畫面中。

本揭示文件的智慧會議系統允許多個使用者同時控制其顯示的畫面，以在會議進行時，方便主講者以外的參與者說明或者提問。相較於傳統的會議系統需要使用者使用雷射筆或走到控制台上進行說明，倘若是在不同位置則無法快速進行說明提問，本揭示文件的智慧會議系統可 以方便主講者以外的參與者快速進行操作與說明，並可透過共同控制智慧會議系統以方便使用者互相討論。

在說明書及申請專利範圍中使用了某些詞彙來指稱特定的元件。然而，所屬技術領域中具有通常知識者應可理解，同樣的元件可能會用不同的名詞來稱呼。說明書及申請專利範圍並不以名稱的差異做為區分元件的方式，而是以元件在功能上的差異來做為區分的基準。在說明書及申請專利範圍所提及的「包含」為開放式的用語，故應解釋成「包含但不限定於」。另外，「耦接」在此包含任何直接及間接的連接手段。因此，若文中描述第一元件耦接於第二元件，則代表第一元件可通過電性連接或無線傳輸、光學傳輸等信號連接方式而直接地連接於第二元件，或者通過其他元件或連接手段間接地電性或信號連接至該第二元件。

在此所使用的「及/或」的描述方式，包含所列舉的其中之一或多個項目的任意組合。另外，除非說明書中特別指明，否則任何單數格的用語都同時包含複數格的涵義。

以上僅為本揭示文件的較佳實施例，凡依本揭示文件請求項所做的均等變化與修飾，皆應屬本揭示文件的涵蓋範圍。

110a,110b:智慧會議系統 120a,120b:會議裝置 130a,130b:影像擷取元件 140a,140b:顯示裝置 150a,150b:使用者 150c,150d:遠端使用者 160c,160d:遠端行動裝置 160a,160b:行動裝置

Claims (9)

1. 一種視訊會議裝置，包含：一影像擷取元件；一通訊元件，用以通訊連接一伺服器以及與該視訊會議裝置位於相同空間中的一第一電子裝置；以及一處理器，用以執行一線上會議程式並處理透過該通訊元件自該伺服器接收的影音訊號；其中該處理器執行該線上會議程式於該伺服器加入一線上視訊會議，該處理器透過該通訊元件自該第一電子裝置獲得一第一認證資訊，傳送該第一認證資訊以進行身份認證，以控制該伺服器提供該第一電子裝置對應該第一認證資訊的一第一游標操作權限，該第一游標操作權限用於設定該第一認證資訊於該線上視訊會議中的一第一代表游標；其中該處理器透過該通訊元件收集來自該第一電子裝置的一第一操作指令訊息，該處理器即時處理該第一操作指令訊息，並將處理後的該第一操作指令訊息傳送至該伺服器；其中該通訊元件自該伺服器接收該線上視訊會議的一即時影像訊號，該處理器處理該即時影像訊號並輸出以顯示於一顯示元件，該即時影像訊號包含符合該第一游標操作權限的該第一操作指令訊息作用在該第一代表游標產生的該第一代表游標的即時狀態或作用在代表該線上視訊會議中一遠端參與者的一第二代表游標產生的該第二代表游標 的即時狀態；其中該處理器執行該線上會議程式於該伺服器建立該線上視訊會議，當該視訊會議裝置接收該第一認證資訊時，若該第一電子裝置的該第一認證資訊對應於該線上視訊會議的主持人，該第一電子裝置取得一主持人權限。
2. 如請求項1所述之視訊會議裝置，其中該主持人權限包含：當該線上視訊會議的多個參與者之一在該線上視訊會議中發言時，於該即時影像訊號中隱藏多個代表游標之一部份。
3. 如請求項1所述之視訊會議裝置，其中，該即時影像訊號包含一分享內容的畫面訊號，該分享內容的畫面訊號顯示該第一代表游標的即時狀態或該第二代表游標的即時狀態，該處理器控制該伺服器提供該第一電子裝置對應該第一認證資訊的該線上視訊會議的一第一內容操作權限，該第一內容操作權限包含以下的一或多者：在該分享內容的多個頁面之間切換之權限以及將該分享內容的頁面放大或縮小之權限。
4. 如請求項1所述之視訊會議裝置，其中該處理器執行以下一或多者：透過該影像擷取元件接收一第一使用者的一生理特徵，並透過該通訊元件傳送該生理特徵以進行身份認證； 透過該通訊元件接收對應該第一使用者的一第二認證資訊以控制該伺服器提供該第一使用者對應該第二認證資訊的一第二游標操作權限；以及透過該影像擷取元件接收該第一使用者的一特定手勢，辨識該特定手勢以得到一第二操作指令訊息；其中該第二操作指令訊息包含移動一第三代表游標的操作指令，該第二游標操作權限用於設定該第三代表游標。
5. 如請求項1所述之視訊會議裝置，其中該處理器透過該通訊元件接收該第一電子裝置旋轉時產生的一通訊封包，並解析該通訊封包以得到該第一操作指令訊息；其中，該第一操作指令訊息包含一垂直移動資訊或一水平移動資訊，該處理器根據該第一電子裝置的旋轉角度產生該垂直移動資訊或該水平移動資訊。
6. 如請求項3所述之視訊會議裝置，其中，當該處理器即時處理該第一操作指令訊息並將處理後的該第一操作指令訊息傳送至該伺服器時，該處理器用於：依據與該第一認證資訊對應的該第一內容操作權限與該第一游標操作權限篩選該第一操作指令訊息；以及當該第一操作指令訊息符合該第一內容操作權限或該第一游標操作權限時，透過該通訊元件將該第一操作指令訊息傳送至該伺服器。
7. 一種視訊會議裝置，包含：一影像擷取元件，用以擷取與該視訊會議裝置位於同一空間中的一第一使用者的一生理特徵作為一認證資訊；一通訊元件，用以通訊連接一伺服器；以及一處理器，用以執行一線上會議程式並處理透過該通訊元件自該伺服器接收的一影音訊號；其中該處理器執行該線上會議程式於該伺服器加入一線上視訊會議，該處理器透過該影像擷取元件接收該第一使用者的該生理特徵，並透過該通訊元件傳送該認證資訊以進行身份認證，以控制該伺服器提供該第一使用者對應該認證資訊的一游標操作權限，該游標操作權限用於設定該認證資訊於該線上視訊會議中的一第一代表游標；其中該處理器透過該影像擷取元件接收該第一使用者的一特定手勢，辨識該特定手勢以得到一第一操作指令訊息，其中該第一操作指令訊息包含對該第一代表游標的操作指令，該處理器即時處理該第一操作指令訊息並將處理後的該第一操作指令訊息傳送至該伺服器；其中該通訊元件自該伺服器接收該線上視訊會議的一即時影像訊號，該處理器處理該即時影像訊號並輸出以顯示於一顯示元件，該即時影像訊號包含符合該游標操作權限的該第一操作指令訊息作用在該第一代表游標所產生的該第一代表游標的即時狀態或作用在代表該線上視訊會議中一遠端參與者的一第二代表游標產生的該第二代表游標的 即時狀態。
8. 如請求項7所述之視訊會議裝置，其中，該即時影像訊號包含一分享內容的畫面訊號，該處理器自該伺服器獲得對應該認證資訊的該線上視訊會議的一內容操作權限，該內容操作權限包含以下的一或多者：在該分享內容的多個頁面之間切換之權限以及將該分享內容的頁面放大或縮小之權限。
9. 一種視訊會議裝置的操作方法，包含：透過一伺服器加入一線上視訊會議；獲取與該視訊會議裝置位於同一空間中的一使用者或一電子裝置的一認證資訊，其中該認證資訊為自一影像擷取元件或一通訊元件接收；傳送該認證資訊以進行身份認證；控制該伺服器提供該使用者或該電子裝置該認證資訊在該線上視訊會議中的一游標操作權限，其中該游標操作權限用於設定該認證資訊於該線上視訊會議中的一第一代表游標；收集並處理來自該使用者或該電子裝置的一第一操作指令訊息，其中該第一操作指令訊息包含對該第一代表游標的操作指令，一處理器即時處理該第一操作指令訊息並將處理後的該第一操作指令訊息傳送至該伺服器；透過該通訊元件自該伺服器接收一即時影像訊號，該即 時影像訊號包含符合該游標操作權限的該第一操作指令訊息作用在該第一代表游標所產生的該第一代表游標的即時狀態或作用在代表該線上視訊會議中一遠端參與者的一第二代表游標產生的該第二代表游標的即時狀態；以及處理該即時影像訊號並輸出以顯示於一顯示元件；其中該視訊會議裝置的操作方法還包含：於該伺服器建立該線上視訊會議，其中當接收該認證資訊時，若該認證資訊對應於該線上視訊會議的主持人，該使用者或該電子裝置取得一主持人權限。

Images