第三章

視頻標注項目任務一

視頻分類標注任務“猶勝相逢不相識，形容變盡語音存。”----蘇軾內容概括知識背景典型應用場景實踐標注操作1.

知識背景視頻分類是人工智能計算機視覺領域中的一個重要研究方向。根據視頻數據中的對象、對象的動作信息及場景信息、場景的演化信息等特征將視頻數據歸為不同的類，分類后就有利于對視頻數據進行監管和處理。1.

知識背景抖音作為將中國傳統文化“出口”到海外，現已成為中國產品在海外獲得成功的又一杰作。但從如此海量的視頻數據中獲得感興趣的內容，必須有新的檢索方式來滿足互聯網用戶對視頻等多媒體數據日益增長的檢索需求。2.典型應用場景基于內容的視頻檢索智能視頻監控系統智能視頻審核系統自動駕駛系統3.實踐標注操作（1）準備數據來自互聯網的三段短視頻，分別是“張騫出塞”，“丹青文脈”和“奧運賽事”，格式為mp4（2）創建工程開啟label-studio。在啟動頁選擇單擊“createproject”

按鈕創建項目3.實踐標注操作（3）導入數據選擇“DataImport”標簽頁，選擇“UploadFiles”，在彈出框中選擇準備好的三段視頻數據文件，進行導入。3.實踐標注操作（4）選擇模板切換到“LabelingSetup”選項卡，指定項目模板類型為“VideoClassification”3.實踐標注操作（5）維護標簽通過“Addlabelnames”文本框填入新增標簽并單擊“Add”按鈕保存；通過Labels列表項的刪除按鈕刪除無用標簽。3.實踐標注操作（6）開始標注在數據標注界面點擊播放按鈕，待視頻播放完成后，依據視頻內容為其選定視頻所屬分類，在視頻下發勾選對應類型。3.實踐標注操作（7）導出結果單擊“Export”按鈕，在彈出菜單中選擇導出格式并保存。小結知識目標：（1）明確視頻分類標注相關概念（2）明確視頻分類標注方法思政目標：（1）創新精神（2）智能產品對人工智能發展的積極作用第三章

視頻標注項目任務二

視頻跨幀追蹤標注任務內容概括知識背景典型應用場景實踐標注操作1.知識背景視頻跨幀追蹤任務則是研究如何在連續視頻幀中的感興趣目標的位置和運動信息，通常跟蹤結果用矩形框表示。視頻跟蹤任務中跟蹤的目標可以是視頻中的任何物體，或者選定的任何區域，并不需要事先獲取目標的類別信息，追蹤過程也可以從任意幀開始。視頻跨幀追蹤作為一個中低層的視覺分析任務，對眾多其它視覺任務具有良好的輔助作用，如協助視頻目標檢測、視頻目標分割、視頻行人重識別等。2.典型應用場景安全監控城市交通人機交互體育交互軍事領域自動駕駛醫療診斷3.實踐標注操作（1）準備數據來自于2022年北京冬奧會中國選手武大靖參賽的視頻節選，格式為mp4（2）創建工程開啟label-studio。在啟動頁選擇單擊“createproject”按鈕創建項目3.實踐標注操作（3）導入數據選擇“DataImport”標簽頁，選擇“UploadFiles”，在彈出框中選擇準備好的視頻數據文件，進行導入3.實踐標注操作（4）選擇模板切換到“LabelingSetup”選項卡，指定項目模板類型為“Customtemplate”3.實踐標注操作（5）編寫模板代碼進入模板配置頁面后，在代碼編輯區域輸入模板源碼。3.實踐標注操作（6）開始標注首先在數據標注區下方點選“wudajing”數據標簽，選中后標簽顏色發生變化。3.實踐標注操作（6）開始標注之后在視頻區域通過拖放鼠標左鍵在武大靖圖像周圍繪制邊界框，如下圖所示。如需調整邊界框大小或位置，可點擊邊界框通過鼠標進行放大、縮小或位置移動。3.實踐標注操作（6）開始標注第一幀數據標注完成后，點擊下一幀按鈕查看下一幀圖像，發現標注框依然存在，此時只需依據標注對象真實位置與標注框位置的相對關系，重新修正標注框位置與大小即可。如果基本吻合也可不做調整。重復此步操作，直至所有幀標注完成。3.實踐標注操作（6）開始標注當視頻幀中出現其他標注對象時，選中下方的對應標簽，在幀中繪制該對象的標注框，如下圖所示，此時畫面中出現了工作人員，選中“staff”標簽，對兩位工作人員進行標注，并在之后的視頻幀中及時調整標注框位置和大小。3.實踐標注操作（6）開始標注如果目標對象消失則應該在對應幀中刪除標注框，刪除方法是在視頻畫面下方區域的幀狀態欄中選中對象消失的幀，再點擊標注框刪除按鈕。3.實踐標注操作（7）查驗標注效果從頭開始瀏覽視頻，注意觀察播放過程中標注框的位置是否與標注對象位置相吻合，如果發現部分時間點誤差較大，可跳轉到對應幀重新調整標注框位置或大小。3.實踐標注操