尋光

阿里达摩院構築する的オールインワンAI视频创作プラットフォーム,提供する从剧本创作到视频编辑的全流程サービス

詳細レポート

  • Xunguang は、Alibaba Damo Academy によって開発されたワンストップ AI ビデオ作成プラットフォームで、2024 年の上海世界人工知能会議 (WAIC) で初めてリリースされました。同プラットフォームは、脚本作成から絵コンテデザイン、キャラクターカスタマイズ、シーン生成、ビデオ編集までの全プロセスサービスを提供しており、PUGC(プロフェッショナルユーザー生成コンテンツ)ツールとして位置付けられている。従来の Vincent ビデオ ツールとは異なり、Xunguang はビデオ コンテンツの「正確に制御された編集」に焦点を当てており、AI リップ シンク、キャラクターの姿勢制御、インテリジェントなターゲットの削除、芸術的なスタイルの転送などのコア機能をサポートしています。この製品は現在無料の内部テスト段階にあり、ログインすると毎日 100 ライト ポイントが付与されます。

  • Alibaba Damo Academy Vision Technology Laboratory は、Xunguang AI を支える研究開発チームです。 2017 年に設立された DAMO アカデミーは、アリババ グループ傘下の機関であり、基礎研究と破壊的技術革新に重点を置いています。人工知能、機械学習、コンピュータービジョンの分野で深い技術蓄積があります。 Xunguang AIは、2024年7月のWAIC 2024カンファレンスで正式にリリースされる予定です。これは、AIビデオ作成の分野におけるDAMOアカデミーの重要なレイアウトです。 Xunguang は、DAMO アカデミーが独自に開発したマルチモーダル大型モデルと 3D 顔変形技術に依存しており、正確なビデオ制御において独自の技術的優位性を持っています。 製品の位置付けの観点から見ると、Xunguang は単なる Vincent ビデオ ツールではなく、「正確に制御されたビデオ編集プラットフォーム」です。この位置付けにより、同社は Runway や Pika などの Wensheng ビデオ ツールと差別化された競争を形成することができ、プロのビデオ クリエイターや企業チームのポストプロダクション ニーズにより重点を置くことができます。

  • Xunguang AI のコア機能は 4 つの主要なモジュールに分類でき、それぞれのモジュールには DAMO Academy のコンピューター ビジョン分野における技術蓄積が反映されています。 1つ目は、インテリジェントAI口形駆動機能です。この機能はDAMOアカデミーが自社開発したマルチモーダルモデルに基づいており、ユーザーによるテキストアップロードやローカルダビングをサポートします。このシステムは、ミリ秒レベルの顔のキーポイントのマッチングを通じて、自然で正確なリップシンク アニメーションを生成します。この機能は、ショートビデオクリエイターがナレーションビデオを制作する場合に特に便利で、アフレコやリップマッチングにかかる​​時間コストを大幅に削減できます。 2つ目は、高精度なキャラクター・姿勢制御機能です。 3D顔変形モデルとボーンバインディング技術により、動画内のキャラクターの表情や姿勢を細かく制御できます。プラットフォームにはさまざまな表現やアクションの組み合わせがプリセットされており、クリエイターはそれらを柔軟に選択して動画に適用できます。この機能は、映画やテレビの事前リサーチやゲームアニメーションのデザインなどの分野で高い実用価値があります。 3つ目は、インテリジェントなターゲットの削除と修復機能です。高度な画像修復アルゴリズムを使用すると、ユーザーはワンクリックでビデオから不要な破片や歩行者を削除でき、システムは自動的に背景を完成させて痕跡のない画​​面クリーニングを実現します。この機能は、画像分野の Inpaint テクノロジに似ていますが、特にビデオ シーンに最適化されています。 4つ目は、多次元アートスタイル伝達関数です。このプラットフォームには、インク アンド ウォッシュ、Xin Haicheng などのプロレベルのビジュアル スタイルが組み込まれており、軽量のレンダリング エンジンと組み合わせることで、ユーザーはビデオの芸術的な再形成を迅速に完了できます。この機能は、ビデオクリエイターに豊かなクリエイティブな表現手段を提供します。 上記の 4 つのコア機能に加えて、Xunguang はストーリーボードの生成、キャラクター ライブラリの管理、ビジュアル素材の作成、ビデオ コンテンツの編集、カメラの移動制御とモーション制御、前景の生成とレイヤー編集などの補助機能も提供し、完全なビデオ作成ワークフローを形成します。ユーザーは、台本から完成した映画に至るまで、すべてのクリエイティブな側面をプラットフォーム上で完了できます。

  • Xunguang AIは現在無料の内部テスト段階にあり、具体的な商用価格プランはまだ発表されていない。製品ページの情報によると、毎日ログインするユーザーは無料枠として100ライトポイントを獲得でき、AI動画の生成には約10ライトポイントが消費されるとのこと。このモデルは、ByteDance の Clip Movies のメンバーシップ サブスクリプション システムに似ており、無料のクレジットを提供することでユーザー エクスペリエンスを獲得し、付加価値サービスを通じて商業的な収益化を実現します。 業界の慣例から判断すると、AI ビデオ作成プラットフォームの課金モデルには、通常、制作期間に基づく課金、メンバーシップのサブスクリプションに基づく課金、ライト ポイント/ポイントに基づく課金が含まれます。ライトサーチが選択したライトスポットシステムは、ユーザーが実際のニーズに合わせて柔軟に利用できる比較的柔軟な課金方法です。企業ユーザー向けに、プラットフォームは将来、エンタープライズレベルのサブスクリプションプランを開始し、より高い世代割り当てと優先処理キューを提供する可能性があります。

  • この製品はまだ内部テスト段階にあるため、公開チャネルからのユーザー レビューは比較的限られています。製品コミュニティやテクノロジーメディアの報道から判断すると、Xunguang AIの口唇同期技術やキャラクターの姿勢制御機能は高い注目を集めており、業界は依然としてその技術力に期待を寄せている。 製品のポジショニングの観点から見ると、Xunguang のターゲット ユーザー グループには、ショート ビデオ作成者、セルフメディア実践者、企業のマーケティング部門、教育機関、映画およびテレビ ゲームの制作チームなどが含まれます。このプラットフォームのフルプロセス作成機能と正確な制御機能により、完全に一般消費者向けの Wensheng ビデオ ツールよりも、プロのビデオ制作ニーズを持つユーザー グループにより適しています。

  • AIビデオ作成の分野では、Xunguang AIのリリースは、生成AIの分野におけるアリババの重要なレイアウトとみなされています。 ByteDance の Cutout AI や Baidu の Dujia 作成ツールなどの国内競合他社と比較した Xunguang の差別化された優位性は、「正確に制御された編集」という製品コンセプトと DAMO Academy の技術的支持にあります。 業界の観点から見ると、AI ビデオ作成分野での競争はますます激化しています。海外市場では、Runway、Pika、OpenAI の Sora などの製品が依然として主導権を握っていますが、国内市場では多くの企業が存在します。 Xunguang が競合他社から抜きん出たいのであれば、製品エクスペリエンス、生産品質、商品化を最適化し続ける必要があります。

  • 現時点では、Xunguang AI に関する世間の論争は比較的限定的です。注意が必要な潜在的なリスクには次のようなものがあります。 1 つは著作権と法的リスクです。 AI ビデオの生成には、素材の使用と、生成されたコンテンツの著作権所有権が伴います。プラットフォームは、ユーザーが作成したコンテンツの権利境界を明確にする必要があります。 2 つ目は、テクノロジーの悪用のリスクです。精密なビデオ編集ツールはディープフェイクなどの不適切な目的に使用される可能性があり、プラットフォームは対応するレビューと保護のメカニズムを確立する必要があります。 3つ目は事業化への挑戦です。無料の内部ベータ段階の後は、ユーザー エクスペリエンスと商業的メリットのバランスをどう取るかが課題の 1 つです。

  • Xunguang AI は次のユーザー グループに適しています。ショート ビデオ作成者やセルフメディア実践者は、リップ シンク機能を使用して説明ビデオを迅速に作成できます。企業のマーケティング部門を製品のデモンストレーションや広告制作に使用できます。教育機関はアニメーションや AI デジタル ヒューマンの説明を教えるために使用できます。映画やテレビのゲーム チームは、事前調査やストーリーボードのデザインに使用できます。 一般消費者にとって、単純な動画ニーズが主な用途であれば、RunwayやPikaなどの海外競合製品やAIなどの国産ツールを検討することができます。正確なビデオ制御とプロレベルのポストプロダクション機能が必要な場合、ライトハンティングは試す価値のあるオプションです。

  • Xunguang AI は、AI ビデオ作成分野における Alibaba DAMO Academy の重要な製品です。 「精密管理編集」という差別化されたポジショニングとDAMOアカデミーの技術蓄積により、競争の激しいAI映像分野において独自の競争力を発揮しています。この製品は現在、無料の内部テスト段階にあります。興味のあるユーザーは事前に体験し、正式な商品化のプロセスに注目してみることをおすすめする。

ユーザーレビュー

  • 头像
    CHgra
    刚体验了寻光AI的口型同步功能,确实挺香的!比我之前用的那些工具精准太多了,而且免费额度也够用。

  • 头像
    fxym1auo1
    阿里达摩院出品必属精品!视频消除功能太实用了,一键去掉路人和水印,效果还很自然,栓Q了!

  • 头像
    DrNinelPantelyuk
    个人感觉风格迁移是亮点,水墨和新海诚风格效果不错,适合做国风内容。

  • 头像
    سپهرکوتی
    正在内测中,整体体验还行,就是希望能开放更多角色模板。

  • 头像
    6w43g_n
    用了两周,感觉比Runway更适合做精准控制的视频,国产之光!

  • 头像
    Hannah_Turner_20238
    说实话免费额度有点少,每天100光点很快就用完了,期待正式版的价格出来。

  • 头像
    AltSeasonJimenez
    3D姿态控制 yyds!终于可以自己定义角色动作了,不用受限于预设动画。

  • 头像
    ALcox_fi
    达摩院的技术确实强,生成的视频质量很高,期待更多功能上线!

  • 头像
    SamuelPatelSr04
    作为一个短视频博主,寻光真的帮我省了很多后期时间,AI消除路人 yyds!

  • 头像
    EReyes_202004
    和剪映对比了一下,寻光在专业视频编辑方面更强,适合有一定基础的用户。

  • 头像
    George_TurnerIII
    期待正式版!目前内测阶段已经这么好用了,以后正式上线还得了。

  • 头像
    JasonWilliams_2021
    运镜控制功能很强大,可以精细调整镜头运动轨迹,这个功能我爱了!

  • 头像
    k68t3v4q5k
    故事板生成功能救了我的命!以前要花几个小时想分镜,现在几分钟就搞定了。

  • 头像
    Sara657
    希望官方能出移动端 App,这样出门也能编辑视频就更方便了。

  • 头像
    Barbara_HowardK
    阿里达摩院牛批!多模态大模型技术确实领先,生成的视频质感很棒。

  • 头像
    程瑶浩
    目前内测阶段功能已经这么完善了,正式版值得期待!

  • 头像
    NGarcia369
    用了几天感觉不错,特别是口型同步,几乎没有延迟,效果很自然。

  • 头像
    Alan.Price
    作为影视从业者,个人很看好寻光在预研阶段的潜力,能快速出分镜和概念视频。

  • 头像
    KarolineSandvold
    希望能开放API接口,这样就可以集成到自己的工作流里了。