寻光

阿里达摩院打造的一站式AI视频创作平台,提供从剧本创作到视频编辑的全流程服务

深度报告

  • 寻光是由阿里巴巴达摩院研发的一站式AI视频创作平台,于2024年上海世界人工智能大会(WAIC)上首次发布。该平台提供从剧本创作到分镜图设计、角色定制、场景生成以及视频编辑的全流程服务,定位为PUGC(专业用户生成内容)工具。与传统的文生视频工具不同,寻光侧重于对视频内容的「精准受控编辑」,支持AI口型同步、角色姿态控制、智能目标消除和艺术风格迁移等核心功能。目前产品处于免费内测阶段,每日登录赠送100个光点。

  • 阿里巴巴达摩院视觉技术实验室是寻光AI的幕后研发团队。达摩院成立于2017年,是阿里巴巴集团旗下专注于基础研究和颠覆性技术创新的机构,在人工智能、机器学习、计算机视觉等领域拥有深厚的技术积累。寻光AI于2024年7月在WAIC 2024大会上正式发布,是达摩院在AI视频创作领域的重要布局。依托达摩院自研的多模态大模型和3D人脸形变技术,寻光在视频精准控制方面具备独特的技术优势。 从产品定位来看,寻光并非简单的文生视频工具,而是一个「精准受控的视频编辑平台」。这一定位使其与Runway、Pika等文生视频工具形成差异化竞争,更侧重于专业视频创作者和企业团队的后期制作需求。

  • 寻光AI的核心功能可以分为四大模块,每个模块都体现了达摩院在计算机视觉领域的技术积累。 首先是智能AI口型驱动功能。该功能基于达摩院自研的多模态模型,支持用户上传文字或本地配音,系统通过毫秒级面部关键点匹配,生成自然精准的对口型动画。这一功能对于短视频创作者制作解说类视频特别实用,可以大幅降低配音和口型匹配的时间成本。 其次是高精度角色与姿态控制功能。通过3D人脸形变模型与骨骼绑定技术,用户可以对视频中角色的表情和姿态进行精细控制。平台预设多种表情与动作组合,创作者可以灵活选择并应用到视频中。这一功能在影视预研和游戏动画设计领域具有较高的实用价值。 第三是智能目标消除与修复功能。采用先进的图像修复算法,用户可以一键移除视频中不需要的杂物或行人,系统会自动补全背景,实现无痕化的画面清理。这一功能类似于图片领域的Inpaint技术,但针对视频场景进行了专门的优化。 第四是多维艺术风格迁移功能。平台内置水墨、新海诚等多种专业级视觉风格,配合轻量化渲染引擎,用户可以快速完成视频的艺术化重塑。这一功能为视频创作者提供了丰富的创意表达手段。 除了上述四大核心功能外,寻光还提供了故事板生成、角色库管理、视觉素材创作、视频内容编辑、运镜控制与运动控制、前景生成与图层编辑等辅助功能,形成了完整的视频创作工作流。用户可以在平台上完成从剧本到成片的全部创作环节。

  • 目前寻光AI处于免费内测阶段,尚未公布具体的商业化定价方案。根据产品页面信息,用户每日登录可获得100个光点作为免费配额,生成一次AI视频约消耗10光点。这一模式类似于字节跳动旗下剪映的会员订阅制,通过提供免费额度吸引用户体验,再通过增值服务实现商业变现。 从行业惯例来看,AI视频创作平台的收费模式通常包括按生成时长计费、按会员订阅制收费和按光点/积分制收费三种。寻光选择的光点制是一种相对灵活的计费方式,用户可以根据实际需求灵活使用。对于企业用户,平台未来可能会推出企业级订阅方案,提供更高的生成配额和优先处理队列。

  • 由于产品目前仍处于内测阶段,公开渠道的用户评价相对有限。从产品社区和科技媒体的报道来看,寻光AI的口型同步技术和角色姿态控制功能获得了较高的关注度,业界对其技术实力保持期待。 从产品定位来看,寻光的目标用户群体包括短视频创作者、自媒体从业者、企业市场部门、教育机构、影视游戏制作团队等。平台的全流程创作能力和精准控制特性使其更适合有专业视频制作需求的用户群体,而非完全面向普通消费者的文生视频工具。

  • 在AI视频创作领域,寻光AI的发布被视为阿里巴巴在生成式AI领域的重要布局。与字节跳动推出的剪映AI、百度的度加创作工具等国内竞品相比,寻光的差异化优势在于「精准受控编辑」的产品理念和达摩院的技术背书。 从行业格局来看,AI视频创作赛道竞争日趋激烈。国际市场上Runway、Pika、OpenAI的Sora等产品保持领先,国内市场则有多家企业布局。寻光想要在竞争中脱颖而出,需要在产品体验、生成质量和商业化落地等方面持续优化。

  • 目前关于寻光AI的公开争议相对有限。需要关注的潜在风险包括: 一是版权和法律风险。AI视频生成涉及素材使用和生成内容的版权归属问题,平台需要明确用户生成内容的权利边界。 二是技术滥用风险。精准的视频编辑工具可能被用于深度伪造等不当用途,平台需要建立相应的审核和防护机制。 三是商业化落地挑战。免费内测阶段结束后,如何平衡用户体验和商业收益是面临的挑战之一。

  • 寻光AI适合以下用户群体:短视频创作者和自媒体从业者可以利用口型同步功能快速制作解说视频;企业市场部门可以用于产品演示和广告制作;教育机构可以用于教学动画和AI数字人讲解;影视游戏团队可以用于预研和分镜设计。 对于普通消费者,如果主要用于简单的文生视频需求,可以考虑Runway、Pika等国际竞品或剪映AI等国内工具。如果需要精准的视频控制和专业级的后期制作能力,寻光是一个值得尝试的选择。

  • 寻光AI是阿里达摩院在AI视频创作领域的重要产品,凭借「精准受控编辑」的差异化定位和达摩院的技术积累,在竞争激烈的AI视频赛道中展现了独特的竞争力。目前产品处于免费内测阶段,建议有兴趣的用户提前体验,关注产品的正式商业化进程。

用户评论

  • 头像
    CHgra
    刚体验了寻光AI的口型同步功能,确实挺香的!比我之前用的那些工具精准太多了,而且免费额度也够用。

  • 头像
    fxym1auo1
    阿里达摩院出品必属精品!视频消除功能太实用了,一键去掉路人和水印,效果还很自然,栓Q了!

  • 头像
    DrNinelPantelyuk
    个人感觉风格迁移是亮点,水墨和新海诚风格效果不错,适合做国风内容。

  • 头像
    سپهرکوتی
    正在内测中,整体体验还行,就是希望能开放更多角色模板。

  • 头像
    6w43g_n
    用了两周,感觉比Runway更适合做精准控制的视频,国产之光!

  • 头像
    Hannah_Turner_20238
    说实话免费额度有点少,每天100光点很快就用完了,期待正式版的价格出来。

  • 头像
    AltSeasonJimenez
    3D姿态控制 yyds!终于可以自己定义角色动作了,不用受限于预设动画。

  • 头像
    ALcox_fi
    达摩院的技术确实强,生成的视频质量很高,期待更多功能上线!

  • 头像
    SamuelPatelSr04
    作为一个短视频博主,寻光真的帮我省了很多后期时间,AI消除路人 yyds!

  • 头像
    EReyes_202004
    和剪映对比了一下,寻光在专业视频编辑方面更强,适合有一定基础的用户。

  • 头像
    George_TurnerIII
    期待正式版!目前内测阶段已经这么好用了,以后正式上线还得了。

  • 头像
    JasonWilliams_2021
    运镜控制功能很强大,可以精细调整镜头运动轨迹,这个功能我爱了!

  • 头像
    k68t3v4q5k
    故事板生成功能救了我的命!以前要花几个小时想分镜,现在几分钟就搞定了。

  • 头像
    Sara657
    希望官方能出移动端 App,这样出门也能编辑视频就更方便了。

  • 头像
    Barbara_HowardK
    阿里达摩院牛批!多模态大模型技术确实领先,生成的视频质感很棒。

  • 头像
    程瑶浩
    目前内测阶段功能已经这么完善了,正式版值得期待!

  • 头像
    NGarcia369
    用了几天感觉不错,特别是口型同步,几乎没有延迟,效果很自然。

  • 头像
    Alan.Price
    作为影视从业者,个人很看好寻光在预研阶段的潜力,能快速出分镜和概念视频。

  • 头像
    KarolineSandvold
    希望能开放API接口,这样就可以集成到自己的工作流里了。