VideoDoodles是一款能在視頻中輕松任意插入手繪動畫并與視頻內(nèi)容無縫融合的ai工具，它將視頻內(nèi)容與手繪動畫相結(jié)合，制作出獨特的視頻剪輯。通過VideoDoodles你可以在視頻中添加手繪涂擦動畫，比如你可以畫個搞笑的小人或者別 的手繪元素插入到視頻中，讓視頻更吸引人。這些動畫不僅能跟隨視頻中的物體移動，還能自動調(diào)整大小和角度。

VideoDoodles主要挑戰(zhàn)在于確保手繪動畫能完美集成到捕獲的場景中，當(dāng)它們相對于相機和場景中的其他對象移動時進行適當(dāng)?shù)母?、透視變形和遮擋?/p>

VideoDoodles引入了一種新穎的 UI 和跟蹤算法，以解鎖通過深度和運動數(shù)據(jù)（通過現(xiàn)有計算機視覺方法獲得）增強的視頻的新版本功能。根據(jù)通過任意數(shù)量的位置和方向關(guān)鍵幀表達的用戶意圖，VideoDoodles的算法可以通過正確的遮擋、透視變換在視頻的任何幀渲染場景感知畫布，并使畫布跟隨移動對象。使得插入的繪畫能夠自然地融入視頻場景，實現(xiàn)追蹤、透視變形和遮擋等復(fù)雜視覺效果。

VideoDoodles 的主要功能：

• 場景感知畫布：VideoDoodles讓用戶可以將平面畫布放置在從視頻重建的 3D 場景中。這些畫布以 3D 方式進行跟蹤，然后手繪動畫在相對于相機和場景中的其他對象移動時保持正確的透視和遮擋。

• 自定義跟蹤算法：VideoDoodles可將畫布錨定到視頻中的靜態(tài)或動態(tài)對象。這確保畫布移動和旋轉(zhuǎn)以跟隨這些對象的位置和方向，使動畫顯示為捕獲場景的一部分。

• 用戶界面易用：VideoDoodles提供 2D 圖像空間 UI，用戶可以通過關(guān)鍵幀控制畫布的位置和方向。系統(tǒng)通過跟蹤視頻1中移動對象的運動來插入這些關(guān)鍵幀。

• 深度和運動數(shù)據(jù)集成：VideoDoodles 利用通過現(xiàn)有計算機視覺方法獲得的深度和運動數(shù)據(jù)來增強動畫的真實感。這種集成允許通過正確的遮擋和透視變換準(zhǔn)確渲染場景感知畫布。

VideoDoodles 的應(yīng)用：

娛樂：通過添加與現(xiàn)實世界鏡頭交互的動畫元素來創(chuàng)建有視覺吸引力的視頻內(nèi)容。

教育：通過說明性動畫增強教育視頻，有助于更有效地解釋復(fù)雜的概念。

增強講故事能力：VideoDoodles 可用于在真人鏡頭中添加異想天開或說明性元素，從而增強敘事和視覺吸引力。

創(chuàng)意廣告：品牌可以使用 VideoDoodles 來創(chuàng)建獨特的廣告，通過將現(xiàn)實世界的鏡頭與動畫元素相結(jié)合來讓廣告更有吸引力。

VideoDoodles 通過實現(xiàn)手繪動畫與視頻內(nèi)容片段的無縫融合，從而輕松地生成獨特有趣的交互式視頻視覺內(nèi)容，從而增強講故事、教育、營銷、社交媒體內(nèi)容創(chuàng)作的用戶體驗。