剪映的AI革命，字節的AI狂想

　　“淘金熱時，聰明的人會去賣鏟子，而剪映就像短視頻時代的那把鏟子。”2019年，剪映作為字節跳動產品矩陣里的新爆款，在那年年底被字節跳動內部如此形容道。

　　從2021年剪映月活躍用戶超1億，成為國內最大的移動視頻編輯產品，到2020年跟隨TikTok揚帆出海，截至2023年剪映海外版Cap Cut月活躍用戶超2億，根據以上兩個可追溯的數據保守估計，剪映和CapCut全球月活躍用戶數量早已突破3億大關。

　　誕生之時，剪映被視為一個依附于抖音的工具App，在視頻剪輯、編輯等主要功能之外，通過提供剪輯模版、豐富的素材庫，降低短視頻UGC(用戶生產內容)創作門檻。

　　而恐怕讓很多人都沒想到的是，隨著產品迭代、功能越來越強大，它逐漸成長為中長視頻PGC(專業生產內容)創作者、甚至專業影視從業人員必備的生產力工具之一。

　　相比抖音、TikTok，作為生產力工具的剪映在創作者端有口皆碑，但卻鮮少進入大眾視野，引發討論。

　　然而，最近有兩件事將剪映推上了風口浪尖。一是張楠辭任抖音集團CEO，轉向剪映相關業務;二是OpenAI的文生視頻模型Sora發布，能夠根據用戶輸入的文本描述，生成1分鐘的高清視頻。

　　Sora的出現對剪映構成了威脅。相關人士透露，張楠帶隊剪映是想在AI輔助創作上有所突破，推出一個AI視頻和圖像生成產品。也就是說，剪映瞄準的視頻生成賽道正是Sora的領域。

　　Sora會“殺死”剪映嗎?或許探討這個問題之前，更值得關注的是:AI沖擊下，這款在短視頻時代大殺四方的創作工具如今怎么樣了?剪映+AIGC還有新故事可講嗎?

　　為了嘗試回答以上問題，我們梳理了剪映國內版與海外版Cap Cut最新的AI功能，希望對內容創作者有所幫助的同時，找到問題的解。

　　剪映+AI，悶聲干大事

　　視頻制作流程通常包括前期內容策劃、拍攝制作、后期剪輯合成等環節，涉及文案撰寫、視頻素材采集、配音錄制、視覺效果制作以及字幕添加等繁瑣的內容生產步驟。

　　如今打開剪映，你會發現AI功能已經融入視頻制作的各個環節。從一鍵成片到AI特效，其中一些功能已經為大家所熟知。為了避免重復造輪子，下面我們重點聊聊剪映最新上線的AI功能。

　　1.AI克隆音色

　　近期，剪映悄悄上線了AI克隆音色。去年年底，該項功能只對少數用戶開放體驗權限。現在打開剪映，點擊“開始創作”，添加圖片或視頻素材，點擊菜單欄的“音頻”，即可看到“克隆音色”功能。

　　入口極為隱蔽，但不少眼尖的創作者已經玩上了“克隆音色”。

　　例如，百萬粉絲博主“拉宏桑”近期發布的小紅書視頻《汗流浹背了!發現了一種新的詐騙方式!》，就通過繞口令、夾子音等方式體驗了AI克隆人聲的效果，一番測試下來，“拉宏桑”認為如果沒有對比，已經很難分辨真人和AI克隆的聲音。

　　盡管博主在視頻中沒有提及具體使用的軟件，但通過實測界面，可以明顯看出是剪映最近上線的AI克隆音色功能。

　　由于克隆效果十分驚艷，相比技術進步帶來的生產力提升，評論區網友更為關心的一個問題是AI聲音克隆所帶來的安全風險。畢竟在實際應用中已有大量AI電信詐騙、版權侵犯的案例。

　　針對該功能，“頭號AI玩家”也淺淺體驗了一下。實測中，點擊“開始克隆”后，會跳出用戶使用須知和錄制提示，需要確認《剪映音色生成條款》才能進入下一步。

　　確認條款后，朗讀錄制一段文本(不支持上傳音頻文件)，即可生成自己的AI克隆聲音。

　　生成的AI克隆聲音會根據錄制時的語氣和情感發生變化，那么它可以克隆方言嗎?帶著好奇心，我用家鄉話錄制了一段聲音，上傳生成的聲音依舊是普通話發音。

　　可見，該功能目前尚不支持克隆方言。并且在實際測試中，我們發現使用已有的克隆聲音朗讀長文案的效果并不如官方示例所展示的那樣理想。隨著文案長度的增加，AI朗讀時的機械感也變得更加明顯。

　　此外，需要各位玩家注意的是，目前在AI克隆音色上傳的聲音，剪映沒有提供刪除途徑。擔心安全風險的玩家，請謹慎嘗試。

　　2.圖文成片

　　圖文成片功能包含兩個核心步驟:智能寫文案和智能匹配素材。

　　用戶只需要輸入提示詞要求，AI就可以智能生成視頻文案，并根據文案自動匹配視頻素材，自動添加字幕、配音和配樂，大大簡化了視頻制作流程。

　　比如，輸入“影視解說《銀翼殺手2049》”，不到5秒就給出了視頻文案，確認后點擊右下角的生成視頻，選擇智能匹配素材，就得到了以下這條視頻:

　　從生成的視頻來看，大部分圖片素材都與文字內容相關，但視頻完全由簡單的圖片切換構成，顯得有些單調和無聊。當然你也可以選擇繼續優化編輯，替換掉不合適的圖片，增加視頻素材、特效等。

　　3.數字人口播

　　用戶可以通過這個功能生成虛擬的數字人形象，為視頻解說配音。尤其是在需要特定角色或虛擬形象進行口播時，數字人口播功能可以大大提高制作效率、降低成本。

　　剪映有35個數字人形象可供選擇，CapCut則有超過138個數字人形象，這些數字人有著不同的風格，以適應不同的視頻內容和場景需求。

　　數字人口播功能支持批量制作，這意味著用戶可以一次性制作多個獨立的數字人視頻。

　　4. 視頻生成

　　最近，剪映海外版CapCut推出了文生視頻功能，用戶可以通過文本提示生成4秒的視頻，支持1:1、16:9、9:16多種比例，每人每天有5次免費生成機會。

　　根據網友分享的演示界面，Capcut的視頻生成功能與Runway、Pika等主流AI視頻生成工具類似，均支持通過輸入文字提示詞來生成相關視頻。

　　截至發稿時，我們未能成功訪問該功能的體驗地址(鏈接已整理至文末)。不過，已經有體驗過的用戶反饋，目前Capcut文生視頻功能在視頻清晰度、對提示詞的理解以及交互設計方面存在不足，且生成視頻的等待時間可能超過100分鐘。

　　Sora會“殺死”剪映嗎?

　　Sora會不會“殺死”剪映?這是最近圈內議論甚廣的一個問題。

　　目前來看，由于Sora和剪映的一些產品功能存在重疊，可能會對剪映構成一定的競爭壓力，但兩者在功能定位、應用場景上存在差異，不太可能出現一方“殺死”另一方的情況。

　　Sora主要專注于利用AI生成視頻內容，更側重于為用戶提供基于文本描述的視頻創作能力。而剪映則提供了較為全面的視頻編輯功能，包括剪輯、特效、音頻處理等，更適合用戶對已有視頻素材進行編輯和創作。用戶可以在需要快速生成視頻時使用Sora，而在需要精細編輯和創作時選擇剪映。

　　新壹科技CEO雷濤表示:“Sora仍是生成視頻素材級別的AI工具，素材生成技術的進步對于剪映、一幀秒創這樣的工具是極大的極好，一方面可以降低對現成素材的依賴，另一方面也可以提升視頻生成效果。”(相關閱讀:爆火的Sora會改變內容行業的游戲規則嗎?9位一線從業者這么說)

　　更重要的是，剪映(CapCut)與抖音(TikTok)的深度整合，為用戶提供了更便捷的內容創作和分享體驗。

　　最近，張楠宣布辭任抖音集團CEO，重心轉向剪映。有接近剪映的人士透露，過去一年，張楠已經把絕大多數精力傾斜到剪映相關業務上，將在AI輔助視頻內容創作方面持續發力，并即將推出一個AI生圖和視頻的產品。此外，抖音的短視頻算法、月活超7億的用戶數據等，也是剪映逐夢AI賽道的優勢。

　　揭秘字節的AI版圖

　　字節的AI布局，不僅剪映這一步棋。

　　近幾個月來，字節在視頻領域的動作不斷，前后發布了包括Magic Animate、Magic-Me等在內的多個AI視頻開源項目。

　　當然，除了當家的視頻業務外，有著“App超級工廠”之稱的字節，也在積極擴張其他領域的產品版圖。

　　過去一年，字節跳動推出了多款基于AI的產品，涵蓋了AI對話/情感伴聊、AI Bot無代碼創建、AI虛擬角色互動等多個類別，展現了其在AI應用賽道上的多元化策略。據《晚點 LatePost》透露，字節內部有多個AI團隊賽馬。

　　2023年1月，字節組建了首個大模型團隊。基于“云雀大模型”，字節開始測試多個AI產品和服務，比如飛書的My AI，以及代號“Grace”的AI對話類測試項目。2023年下半年，字節成立了Flow部門。2023年8月，AI聊天應用“豆包”上線。2024年2月，對標GPTs Store的“扣子”在國內正式上線。

　　扣子是字節跳動針對國內市場推出的AI Bot創建平臺。它允許用戶無需編程背景就能創建和定制自己的AI助手。用戶可以通過扣子平臺，利用預設的模板和模塊，快速搭建出能夠完成特定任務的AI Bot，如客服機器人、個人助理等。

　　Coze則是字節跳動面向海外市場推出的AI Bot創建平臺。與扣子類似，Coze也提供了一個開放的使用和創建環境，用戶可以輕松地將各種插件集成到自己的AI Bot中，實現多樣化的功能。

　　此外，字節還面向海外市場推出了名為ChitChop的AI工具平臺，該平臺將AI Bot分為多個類別，如AI創作、AI繪圖、娛樂休閑等，用戶可以根據需求選擇合適的Bot進行互動。

　　BagelBell是字節于2023年12月推出的AI劇情互動平臺，它能通過連續劇情創造完整的故事體驗。用戶可以在平臺上與AI角色互動，解鎖不同的劇情和背景場景，享受沉浸式的故事體驗。

　　據媒體報道，字節跳動還在內部測試一款名為“PicPic”的AI產品，可能與圖片處理相關。

　　總的來說，字節在AI領域的多元布局展現了其積極的市場競爭態度，以及對市場需求變化的敏感性，這有助于其在多個細分市場中建立影響力，從而降低對單一市場的依賴。但值得注意的是，基于AI的產品創新或許能在短期內吸引用戶，但長期競爭力的構建需要持續的投入與積累。