尋光

阿里達摩院打造的一站式AI影片創作平臺,提供從劇本創作到影片編輯的全流程服務

深度報告

  • 尋光是由阿里巴巴達摩院研發的一站式AI影片創作平臺,於2024年上海世界人工智慧大會(WAIC)上首次釋出。該平臺提供從劇本創作到分鏡圖設計、角色定製、場景生成以及影片編輯的全流程服務,定位為PUGC(專業使用者生成內容)工具。與傳統的文生影片工具不同,尋光側重於對影片內容的「精準受控編輯」,支援AI口型同步、角色姿態控制、智慧目標消除和藝術風格遷移等核心功能。目前產品處於免費內測階段,每日登入贈送100個光點。

  • 阿里巴巴達摩院視覺技術實驗室是尋光AI的幕後研發團隊。達摩院成立於2017年,是阿里巴巴集團旗下專注於基礎研究和顛覆性技術創新的機構,在人工智慧、機器學習、計算機視覺等領域擁有深厚的技術積累。尋光AI於2024年7月在WAIC 2024大會上正式釋出,是達摩院在AI影片創作領域的重要佈局。依託達摩院自研的多模態大模型和3D人臉形變技術,尋光在影片精準控制方面具備獨特的技術優勢。 從產品定位來看,尋光並非簡單的文生影片工具,而是一個「精準受控的影片編輯平臺」。這一定位使其與Runway、Pika等文生影片工具形成差異化競爭,更側重於專業影片創作者和企業團隊的後期製作需求。

  • 尋光AI的核心功能可以分為四大模組,每個模組都體現了達摩院在計算機視覺領域的技術積累。 首先是智慧AI口型驅動功能。該功能基於達摩院自研的多模態模型,支援使用者上傳文字或本地配音,系統透過毫秒級面部關鍵點匹配,生成自然精準的對口型動畫。這一功能對於短影片創作者製作解說類影片特別實用,可以大幅降低配音和口型匹配的時間成本。 其次是高精度角色與姿態控制功能。透過3D人臉形變模型與骨骼繫結技術,使用者可以對影片中角色的表情和姿態進行精細控制。平臺預設多種表情與動作組合,創作者可以靈活選擇並應用到影片中。這一功能在影視預研和遊戲動畫設計領域具有較高的實用價值。 第三是智慧目標消除與修復功能。採用先進的影象修復演算法,使用者可以一鍵移除影片中不需要的雜物或行人,系統會自動補全背景,實現無痕化的畫面清理。這一功能類似於圖片領域的Inpaint技術,但針對影片場景進行了專門的最佳化。 第四是多維藝術風格遷移功能。平臺內建水墨、新海誠等多種專業級視覺風格,配合輕量化渲染引擎,使用者可以快速完成影片的藝術化重塑。這一功能為影片創作者提供了豐富的創意表達手段。 除了上述四大核心功能外,尋光還提供了故事板生成、角色庫管理、視覺素材創作、影片內容編輯、運鏡控制與運動控制、前景生成與圖層編輯等輔助功能,形成了完整的影片創作工作流。使用者可以在平臺上完成從劇本到成片的全部創作環節。

  • 目前尋光AI處於免費內測階段,尚未公佈具體的商業化定價方案。根據產品頁面資訊,使用者每日登入可獲得100個光點作為免費配額,生成一次AI影片約消耗10光點。這一模式類似於位元組跳動旗下剪映的會員訂閱制,透過提供免費額度吸引使用者體驗,再透過增值服務實現商業變現。 從行業慣例來看,AI影片創作平臺的收費模式通常包括按生成時長計費、按會員訂閱制收費和按光點/積分制收費三種。尋光選擇的光點制是一種相對靈活的計費方式,使用者可以根據實際需求靈活使用。對於企業使用者,平臺未來可能會推出企業級訂閱方案,提供更高的生成配額和優先處理佇列。

  • 由於產品目前仍處於內測階段,公開渠道的使用者評價相對有限。從產品社群和科技媒體的報道來看,尋光AI的口型同步技術和角色姿態控制功能獲得了較高的關注度,業界對其技術實力保持期待。 從產品定位來看,尋光的目標使用者群體包括短影片創作者、自媒體從業者、企業市場部門、教育機構、影視遊戲製作團隊等。平臺的全流程創作能力和精準控制特性使其更適合有專業影片製作需求的使用者群體,而非完全面向普通消費者的文生影片工具。

  • 在AI影片創作領域,尋光AI的釋出被視為阿里巴巴在生成式AI領域的重要佈局。與位元組跳動推出的剪映AI、百度的度加創作工具等國內競品相比,尋光的差異化優勢在於「精準受控編輯」的產品理念和達摩院的技術背書。 從行業格局來看,AI影片創作賽道競爭日趨激烈。國際市場上Runway、Pika、OpenAI的Sora等產品保持領先,國內市場則有多家企業佈局。尋光想要在競爭中脫穎而出,需要在產品體驗、生成質量和商業化落地等方面持續最佳化。

  • 目前關於尋光AI的公開爭議相對有限。需要關注的潛在風險包括: 一是版權和法律風險。AI影片生成涉及素材使用和生成內容的版權歸屬問題,平臺需要明確使用者生成內容的權利邊界。 二是技術濫用風險。精準的影片編輯工具可能被用於深度偽造等不當用途,平臺需要建立相應的稽核和防護機制。 三是商業化落地挑戰。免費內測階段結束後,如何平衡使用者體驗和商業收益是面臨的挑戰之一。

  • 尋光AI適合以下使用者群體:短影片創作者和自媒體從業者可以利用口型同步功能快速製作解說影片;企業市場部門可以用於產品演示和廣告製作;教育機構可以用於教學動畫和AI數字人講解;影視遊戲團隊可以用於預研和分鏡設計。 對於普通消費者,如果主要用於簡單的文生影片需求,可以考慮Runway、Pika等國際競品或剪映AI等國內工具。如果需要精準的影片控制和專業級的後期製作能力,尋光是一個值得嘗試的選擇。

  • 尋光AI是阿里達摩院在AI影片創作領域的重要產品,憑藉「精準受控編輯」的差異化定位和達摩院的技術積累,在競爭激烈的AI影片賽道中展現了獨特的競爭力。目前產品處於免費內測階段,建議有興趣的使用者提前體驗,關注產品的正式商業化程序。

使用者評論

  • 頭像
    CHgra
    剛體驗了尋光AI的口型同步功能,確實挺香的!比我之前用的那些工具精準太多了,而且免費額度也夠用。

  • 頭像
    fxym1auo1
    阿里達摩院出品必屬精品!影片消除功能太實用了,一鍵去掉路人和水印,效果還很自然,栓Q了!

  • 頭像
    DrNinelPantelyuk
    個人感覺風格遷移是亮點,水墨和新海誠風格效果不錯,適合做國風內容。

  • 頭像
    سپهرکوتی
    正在內測中,整體體驗還行,就是希望能開放更多角色模板。

  • 頭像
    6w43g_n
    用了兩週,感覺比Runway更適合做精準控制的影片,國產之光!

  • 頭像
    Hannah_Turner_20238
    說實話免費額度有點少,每天100光點很快就用完了,期待正式版的價格出來。

  • 頭像
    AltSeasonJimenez
    3D姿態控制 yyds!終於可以自己定義角色動作了,不用受限於預設動畫。

  • 頭像
    ALcox_fi
    達摩院的技術確實強,生成的影片質量很高,期待更多功能上線!

  • 頭像
    SamuelPatelSr04
    作為一個短影片博主,尋光真的幫我省了很多後期時間,AI消除路人 yyds!

  • 頭像
    EReyes_202004
    和剪映對比了一下,尋光在專業影片編輯方面更強,適合有一定基礎的使用者。

  • 頭像
    George_TurnerIII
    期待正式版!目前內測階段已經這麼好用了,以後正式上線還得了。

  • 頭像
    JasonWilliams_2021
    運鏡控制功能很強大,可以精細調整鏡頭運動軌跡,這個功能我愛了!

  • 頭像
    k68t3v4q5k
    故事板生成功能救了我的命!以前要花幾個小時想分鏡,現在幾分鐘就搞定了。

  • 頭像
    Sara657
    希望官方能出移動端 App,這樣出門也能編輯影片就更方便了。

  • 頭像
    Barbara_HowardK
    阿里達摩院牛批!多模態大模型技術確實領先,生成的影片質感很棒。

  • 頭像
    程瑤浩
    目前內測階段功能已經這麼完善了,正式版值得期待!

  • 頭像
    NGarcia369
    用了幾天感覺不錯,特別是口型同步,幾乎沒有延遲,效果很自然。

  • 頭像
    Alan.Price
    作為影視從業者,個人很看好尋光在預研階段的潛力,能快速出分鏡和概念影片。

  • 頭像
    KarolineSandvold
    希望能開放API介面,這樣就可以整合到自己的工作流裡了。