軟?？萍?西電——校企合作雙向賦能，助力視頻摳像技術革新
2023年11月27日
隨著自媒體和短視頻的興起，越來越多的人開始使用剪輯軟件來編輯自己的視頻，然而在剪輯過程中，消除視頻雜物一直是一個頭疼的問題。例如，用戶通過一些視頻剪輯軟件對畫面中的雜物進行移除操作，軟件不僅無法自動識別視頻中的雜物，而且處理后的效果不自然，畫面細節和質感也不盡如人意。但融合了全新AI智能摳像技術的『牛學長智能摳像工具』向這個問題發起了挑戰。
在『牛學長智能摳像工具』中，AI物體移除功能全面升級，融入了與西安電子科技大學聯合研發的AI智能識別和分割、AI智能運動追蹤、AI智能畫面修復等技術，全面提升視頻處理效率，整體視頻物體移除速度有 大幅提升，畫面質感明顯改善，提升了用戶的觀看體驗。
在技術創新道路上，與高校攜手共同探索科技創新一直是軟?？萍缄P注的焦點。目前，我們已與國內多所高校共建軟件相關的聯合實驗創新中心、實踐基地等，共同推進多項科研項目，與西安電子科技大學的AI智能摳像技術便是其中之一。
西安電子科技大學人工智能學院方超偉副教授是本次關鍵技術研究項目的的主導人，他帶領團隊成員歷經將近一年的專項研究，完成視頻物體識別分割速度、運動追蹤準確性和視頻畫面修復質量的技術突破。該項關鍵技術研究主要運用AI智能跟蹤、圖像分割、圖像修復等技術，通過反復分析視頻畫面前后幀變化，實現對選定區域物體的準確追蹤，并持久記憶且不易丟失目標。
在畫質優化方面，該技術能夠實現在識別區域進行智能移除的同時，修復原有背景，保持整體畫面自然和完整。在處理速度優化方面，通過計算視頻分辨率的最優動態切片方式，該技術能夠實現最大化處理速度，使得不同分辨率的視頻都可以在PC本地處理，物體移除更加精細化。
這項技術從根本上提高了目前視頻編輯軟件在物體移除方面的效率問題。它可以實現更高效、更智能、更有針對性的處理，使得視頻中移除物體的工作更加經濟、省力，無需專業的特效團隊，一個人也能輕松完成！
業內越來越多的人開始認識到校企合作的巨大潛力與內在價值，此次軟?？萍寂c西安電子科技大學的深度融合就是校企合作初步顯現成效的例證。在這一次合作中，『牛學長智能摳像工具』已經找到了從科研到產品再到市場落地轉化的方法，這樣的合作模式也預示著未來將有更多的校企合作成果呈現，實現高校與企業間的雙向賦能。
參考文獻：
[2] Weizhi Zhong, Chaowei Fang, Yinqi Cai, Pengxu Wei, Gangming Zhao, Liang Lin, Guanbin Li. Identity-Preserving Talking Face Generation with Landmark and Appearance Priors. IEEE International Conference on Computer Vision and Pattern Recognition (CVPR), 2023. (CCF A, Acceptance Rate: 25.78%)
[3] Yuxiang Nie, Chaowei Fang, Lechao Cheng, Liang Lin, and Guanbin Li. Adapting Object Size Variance and Class Imbalance for Semi-Supervised Object Detection. AAAI Conference on Artificial Intelligence, 2023. (CCF A, Oral, Acceptance Rate: 19.6%)
[4] Kuo Wang, Jingyu Zhuang, Guanbin Li, Chaowei Fang, Lechao Cheng, Liang Lin, and Fan Zhou. De-biased Teacher: Rethinking IoU Matching for Semi-Supervised Object Detection. AAAI Conference on Artificial Intelligence, 2023. (CCF A, Acceptance Rate: 19.6%)
[5] Feida Zhu, Chaowei Fang, and Kai-Kuang Ma. PNEN: Pyramid Non-Local Enhanced Networks. IEEE Transactions onImage Processing, 2020. (CCF A, IF2022: 11.037)
[6] Chaowei Fang, Guanbin Li, Xiaoguang Han, and Yizhou Yu. Self-Enhanced Convolutional Network for Facial Video Hallucination. IEEE Transactions on Image Processing, 2019. (CCF A, IF2022: 11.037)
