內(nèi)容錄制、再現(xiàn)系統(tǒng)和方法
【技術領域】
[0001]本發(fā)明涉及網(wǎng)絡技術領域，具體地涉及用于對課堂教學、網(wǎng)絡會議等場景進行內(nèi)容的記錄和再現(xiàn)的系統(tǒng)和方法。
【背景技術】
[0002]在現(xiàn)有的課堂教學、網(wǎng)絡會議等錄播應用場合中，通常伴隨著視頻、演示文檔(如微軟Power Point)文件的播放，教師或演示者可以結合視頻或演示文檔的播放書寫相應的板書。傳統(tǒng)的以視頻攝制方式生成的錄播文件雖然可以實現(xiàn)在一個視頻中將視頻或演示文檔與所書寫板書、演示者語音一起回放，但是以視頻格式(如AVI)錄制的文件的大小通常非常大，極大地限制了所錄制文件的傳輸和存儲。此外，這樣的視頻文件在回放時的清晰度也會受到攝像機、顯示器的分辨率的影響。因此，現(xiàn)有的視頻錄播方式存在錄制文件巨大，以及無法對海量的教學/會議資料進行內(nèi)容檢索、定位等諸多問題。

【發(fā)明內(nèi)容】

[0003]根據(jù)本發(fā)明的一個方面，公開了一種內(nèi)容錄制系統(tǒng)，該系統(tǒng)包括內(nèi)容演示設備、語音拾取設備、筆跡獲取設備和信息處理設備。該內(nèi)容演示設備演示預定內(nèi)容，例如視頻、圖像、演示文檔等。該語音拾取設備拾取語音，例如演示者或者觀眾的講話。該筆跡獲取設備獲取書寫筆跡，例如由演示者通過筆跡獲取設備輸入的書寫內(nèi)容。該信息處理設備接收預定內(nèi)容的數(shù)據(jù)流、語音的數(shù)據(jù)流和書寫筆跡的數(shù)據(jù)流，記錄針對預定內(nèi)容的數(shù)據(jù)流、語音的數(shù)據(jù)流、書寫筆跡的數(shù)據(jù)流的一個或多個關聯(lián)標識符，并且利用這些關聯(lián)標識符將預定內(nèi)容的數(shù)據(jù)流、語音的數(shù)據(jù)流和書寫筆跡的數(shù)據(jù)流相關聯(lián)，以使得所述預定內(nèi)容數(shù)據(jù)流、所述語音的數(shù)據(jù)流和所述書寫筆跡的數(shù)據(jù)流能夠被相關聯(lián)地同步再現(xiàn)。
[0004]根據(jù)本發(fā)明的另一方面，公開了一種內(nèi)容錄制方法，該方法包括:演示預定內(nèi)容；拾取語音；獲取書寫筆跡；接收該預定內(nèi)容的數(shù)據(jù)流、該語音的數(shù)據(jù)流和該書寫筆跡的數(shù)據(jù)流；記錄針對該預定內(nèi)容的數(shù)據(jù)流、該語音的數(shù)據(jù)流、該書寫筆跡的數(shù)據(jù)流的一個或多個關聯(lián)標識符；以及利用這一個或多個關聯(lián)標識符將該預定內(nèi)容的數(shù)據(jù)流、該語音的數(shù)據(jù)流和該書寫筆跡的數(shù)據(jù)流相關聯(lián)，以使得該預定內(nèi)容的數(shù)據(jù)流、該語音的數(shù)據(jù)流和該書寫筆跡的數(shù)據(jù)流能夠被同步地再現(xiàn)。
[0005]根據(jù)本發(fā)明的又一方面，公開了一種內(nèi)容再現(xiàn)系統(tǒng)，該系統(tǒng)包括:內(nèi)容演示設備，該內(nèi)容演示設備演示預定內(nèi)容；音頻播放設備，該音頻播放設備播放語音；筆跡回放設備，該筆跡回放設備回放書寫筆跡；控制設備，該控制設備讀取針對預定內(nèi)容、語音和書寫筆跡的一個或多個關聯(lián)標識符以控制內(nèi)容演示設備、音頻播放設備和筆跡回放設備，以使得預定內(nèi)容、語音和書寫筆跡被相關聯(lián)地同步再現(xiàn)，其中上述一個或多個關聯(lián)標識符將預定內(nèi)容的數(shù)據(jù)流、語音的數(shù)據(jù)流和書寫筆跡的數(shù)據(jù)流同步地相關聯(lián)。
[0006]根據(jù)本發(fā)明的又一方面，公開了一種內(nèi)容再現(xiàn)方法，該方法包括:演示預定內(nèi)容；播放語音；回放書寫筆跡；讀取針對預定內(nèi)容、語音和書寫筆跡的一個或多個關聯(lián)標識符；以及利用一個或多個關聯(lián)標識符來控制預定內(nèi)容的演示、語音的播放和筆跡的回放，使得預定內(nèi)容、語音和書寫筆跡被相關聯(lián)地同步再現(xiàn)，其中上述一個或多個關聯(lián)標識符將預定內(nèi)容的數(shù)據(jù)流、語音的數(shù)據(jù)流和書寫筆跡的數(shù)據(jù)流同步地相關聯(lián)。
【附圖說明】
[0007]通過參考以下說明和附圖，可獲得對本發(fā)明的更完整了解，其中，相似的標號指示相似的特征。
[0008]圖1示意性地圖示出了根據(jù)本發(fā)明一個實施例的內(nèi)容錄制系統(tǒng)的框圖。
[0009]圖2示意性地圖示出了根據(jù)本發(fā)明另一實施例的內(nèi)容錄制系統(tǒng)的框圖。
[0010]圖3示意性地圖示出了根據(jù)本發(fā)明一個實施例的時間戳/時間軸關聯(lián)方式的一個示例。
[0011]圖4示意性地圖示出了根據(jù)本發(fā)明另一實施例的操縱指令關聯(lián)方式的一個示例。
[0012]圖5示意性地圖示出了根據(jù)本發(fā)明又一實施例的內(nèi)容錄制系統(tǒng)的框圖。
[0013]圖6示意性地圖示出了根據(jù)本發(fā)明一個實施例的關聯(lián)映射表的一部分的示例。
[0014]圖7示意性地圖示出了根據(jù)本發(fā)明一個實施例的嵌入關聯(lián)標識符的數(shù)據(jù)流的一部分的示例。
[0015]圖8示意性地圖示出了根據(jù)本發(fā)明又一實施例的內(nèi)容錄制系統(tǒng)的框圖。
[0016]圖9示意性地圖示出了根據(jù)本發(fā)明一個實施例的按映射表方式來進一步關聯(lián)所識別文本以及進行關鍵詞查找的一個示例。
[0017]圖10示意性地圖示出了根據(jù)本發(fā)明一個實施例的內(nèi)容錄制方法的流程圖。
[0018]圖11示意性地圖示出了根據(jù)本發(fā)明另一實施例的內(nèi)容錄制方法的流程圖。
[0019]圖12示意性地圖示出了根據(jù)本發(fā)明一個實施例的內(nèi)容再現(xiàn)系統(tǒng)的框圖。
[0020]圖13示意性地圖示出了根據(jù)本發(fā)明一個實施例的內(nèi)容再現(xiàn)方法的流程圖。
[0021]圖14示意性地圖示出了根據(jù)本發(fā)明一個實施例的查找方法的流程圖。
【具體實施方式】
[0022]圖1示意性地圖示出了根據(jù)本發(fā)明一個實施例的內(nèi)容錄制系統(tǒng)100的框圖。內(nèi)容錄制系統(tǒng)100可用于在諸如會議或課堂教學之類的場景中對各種內(nèi)容進行錄制(采集、記錄、制作)。如圖1所示，內(nèi)容錄制系統(tǒng)100可以包括內(nèi)容演示設備101、語音拾取設備102、筆跡獲取設備103和信息處理設備104。
[0023]內(nèi)容演示設備101用于播放預定演示內(nèi)容，例如，預先準備的視頻文件、音頻文件、演示文檔文件(如Power Point)、網(wǎng)頁文件以及文本文件等。在一個示例中，內(nèi)容演示設備101例如可以是計算機、電視機、音視頻播放器、演示文檔播放器。
[0024]語音拾取設備102用于拾取演示者或聽眾的語音。在一個示例中，語音拾取設備102可以是例如麥克風、微型錄音器、平面錄音板、網(wǎng)絡攝像錄音頭。
[0025]筆跡獲取設備103用來輸入書寫筆跡。該書寫筆跡可包括文字、圖形、筆劃，并且可與演示的預定內(nèi)容或所拾取的語音有關。在一個示例中，筆跡獲取設備103被配置來接收演示者的手寫輸入信號，對輸入信號進行分析，并且生成書寫坐標信息和由一系列連續(xù)坐標構成的書寫軌跡信息。在另一示例中，筆跡獲取設備103還可以識別擦除設備，生成擦除信號，并通過分析擦除信號來生成擦除坐標信息和擦除軌跡信息。與通過拍攝視頻來記錄書寫板書相比，通過生成并記錄書寫板書的坐標和軌跡信息，不僅使要存儲和傳輸?shù)墓P跡記錄文件大幅減小，同時也能夠動態(tài)地再現(xiàn)演示者輸入筆跡的過程。
[0026]在一個示例中，筆跡獲取設備103可以是電子白板輸入設備，例如，電阻膜型、電磁感應型、紅外型、表面光波型、超聲波型、CCD(電荷耦合器件)型電子白板書寫設備或者液晶式電子白板。然而，筆跡獲取設備103可以不限于是電子白板，只要通過該輸入設備可以獲取輸入的筆跡即可。在另一示例中，筆跡獲取設備103是在普通教學黑板或普通會議演示白板四周加裝觸控裝置而構成，該觸控裝置包括紅外發(fā)射裝置和紅外接收裝置，用于當在該黑板/白板上進行書寫時生成書寫觸控信號，并經(jīng)過分析獲取書寫坐標和軌跡信息。
[0027]信息處理設備104用來在演示預定內(nèi)容、拾取語音和/或書寫板書的過程中，分別從內(nèi)容演示設備101、語音拾取設備102、筆跡獲取設備103接收預定內(nèi)容數(shù)據(jù)流、語音數(shù)據(jù)流和書寫板書數(shù)據(jù)流，記錄用于將所演示的預定內(nèi)容、所拾取語音、所書寫板書的對應部分(數(shù)據(jù)包、數(shù)據(jù)塊等)一一關聯(lián)起來的一個或多個關聯(lián)標識符，以使得預定內(nèi)容數(shù)據(jù)流、語音數(shù)據(jù)流、書寫板書數(shù)據(jù)流能夠被同步地再現(xiàn)。在一個示例中，信息處理設備104可以是執(zhí)行存儲在存儲器上的一個或多個邏輯或程序的處理器。
[0028]在一個實施例中，一個或多個關聯(lián)標識符可以是時間戳信息。例如，當內(nèi)容演示設備101演示預定內(nèi)容時，語音拾取設備102拾取語音時，和/或筆跡獲取設備103獲取由演示者所書寫的板書時，信息處理設備104可以記錄所演示的預定內(nèi)容、所拾取語音和所書寫板書的時間戳信息。該時間戳能夠將預定內(nèi)容、語音和/或書寫筆跡一一對應地相關聯(lián)，以使得它們既能夠被分開存儲、分發(fā)以減少存儲大小、傳輸帶寬等的限制，又能夠被同步地呈現(xiàn)以重現(xiàn)出會議或教學時的場景。
[0029]圖2示意性地圖示出了根據(jù)本發(fā)明另一實施例的內(nèi)容錄制系統(tǒng)200的框圖。內(nèi)容錄制系統(tǒng)200包括內(nèi)容演示設備201、語音拾取設備202、筆跡獲取設備203和信息處理設備204。此外，內(nèi)容錄制系統(tǒng)200還包括操縱指令記錄設備205。在一個示例中，當演示者對演示的預定內(nèi)容進行操縱時，例如打開、關閉內(nèi)容文件，暫停、快進、倒退、滾動預定內(nèi)容時(當內(nèi)容文件為演示文檔時，還可對演示文檔進行翻頁)，則操縱指令記錄設備205記錄這些操縱指令。此時，信息處理設備204還記錄該操縱指令的關聯(lián)標識符(如，時間戳信息)，用于將操縱指令信息與此刻的預定內(nèi)容、書寫筆跡、語音相關聯(lián)，從而使得在再現(xiàn)教學或會議場景時，可以實現(xiàn)與筆跡和語音的呈現(xiàn)同步地、自動地執(zhí)行對預定內(nèi)容文件的操縱。
[0030]在可選實施例中，操縱指令記錄設備205還可以與內(nèi)容演示設備201或信息處理設備204集成在一起。
[0031]圖3示意性地圖示出了根據(jù)本發(fā)明一個實施例的時間戳/時間軸關聯(lián)方式的一個示例。例如，在時刻t。，信息處理設備204開始記錄預定內(nèi)容演示數(shù)據(jù)流、語音數(shù)據(jù)流、書寫筆跡數(shù)據(jù)流、操縱指令信息數(shù)據(jù)流的時間戳，并且以預定的適當采樣幀率來持續(xù)記錄時間戳。因此，利用一個或多個關聯(lián)標識符將預定內(nèi)容數(shù)據(jù)流、語音數(shù)據(jù)流和書寫筆跡數(shù)據(jù)流相關聯(lián)可以是根據(jù)時間戳按數(shù)據(jù)包或數(shù)據(jù)幀相對應/映射的方式將這些數(shù)據(jù)流同步起來。
[00