文汇 5小时前
商汤多剧集生成智能体发布,合作短剧登顶抖音AI短剧榜No.1
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_keji1.html

 

商汤科技本周开始发力,多款兼具开创性与实用性的 AI 产品将陆续登场——今天,Seko2.0 来了。

作为行业首个创编一体、多剧集生成智能体,Seko2.0 专为当下炙手可热的短剧、漫剧行业的个人创作者与工作室量身打造,让 " 一人剧组 " 变成可能。自今年 7 月上线以来,Seko 仅用两个月用户量即突破 10 万,不到半年已聚集超 20 万创作者,其中 30% 为短剧创作者、20% 为漫剧创作者,成为高浓度的创作者社区。

短剧很热,制作很难?Seko2.0 让 " 一人剧组 " 成为可能

当下 AI 漫剧、短剧赛道呈爆发式增长态势。

巨量引擎数据显示,今年上半年漫剧供给量以 83% 的复合增长率持续扩容,对外输出超 3000 部作品,流水规模更是翻了 12 倍。大量个人创作者与小团队涌入,甚至将其视为 " 第二职业 "。

市场火热的背后,是创作者对高效创作工具的强烈渴求。目前,市面上大部分 AI 视频生成产品仅支持单集短片或片段素材生产。

创作者若想完成多集连续剧,不得不面对多工具切换、复杂工作流搭建、角色与场景一致性难以保持等核心痛点。对于广泛的个人或小团队而言," 一人剧组 " 的规模化、高质量内容生产依然遥不可及。

此前,Seko 1.0 已成功帮助大批创作者摆脱了在多工具间疲于切换、为复杂提示词耗费心力的困扰。为更好地满足创作者对高质量、规模化多剧集创作的迫切需求,全新的 Seko 2.0 带来两项核心技术突破: 

一是 SekoIDX:破解多剧集、跨分镜角色一致性难题

多剧集、跨分镜的角色一致性一直是行业难点。传统的生成方法要么会导致角色与参考图如同 " 复制粘贴 " 而缺乏生动性,要么会因新的动作或表情指令导致 " 面目全非 "。SekoIDX 通过在扩散模型的高噪阶段引入 " 负参考图 ",既保证角色在多剧集、跨分镜中的一致性,又避免内容与参考图过度相似,同时在响应不同表情、姿态、场景等指令时依然能保持高度稳定。

二是 SekoTalk:攻克多人对口型难题,实现自然音画同步

传统数字人技术在处理多语言、多人交互的复杂场景时,常出现口型与语音匹配不准的问题。SekoTalk 作为业内首个支持超过 2 人对口型的解决方案,通过一系列创新设计,实现了从单人口形到多人互动的高度精准的声形同步,无论是日常对话、激烈争吵还是集体报数,都能实现精准对口型,让多人场景制作一气呵成。

底层技术的突破直接转化为生产力的飞跃。传统工作流中一支团队完成 50 集作品通常需要 3 个月以上,如今借助 Seko 2.0,漫剧制作周期可缩短 80%-90%,真正让创作者脱离繁琐而海量的素材管理,将 " 一人剧组 " 变成现实。

AI 很强,用着很贵?商汤以国产化方案开启 " 低成本 " 时代

效率提升与成本控制至关重要。来算笔账,AI 短剧、漫剧的多剧集创作涉及海量分镜,仅一个 5 秒视频就需生成接近 10 万 token,若一键生成 10-20 个分镜,总 token 需求量更将高达 100~200 万。

对此,商汤提出 Phased DMD 蒸馏技术,充分降低多剧集生成的综合成本。作为一套多步蒸馏框架,它将分阶段蒸馏的思想与专家混合模型(MoE)相结合,让不同模型专精于生成流程的不同阶段,在不增加推理成本的前提下,显著提升了模型的整体能力与效率上限。

商汤开源了行业首个能实现实时视频生成的推理框架 LightX2V,通过 DiT 蒸馏加速、轻量化 VAE、稀疏注意力等优化,实现低成本、强实时的视频生成。LightX2V 在消费级显卡上能够以不到 5 秒的时间生成 5 秒视频,远优于 Sora2 数分钟的耗时,目前累计下载量已超 350 万次,备受全球创作者青睐。目前,LightX2V 已完成寒武纪、沐曦等国产芯片的适配,实现视频生成模型的全国产化部署,并做到了准实时的生成效率。

从效果对比来看,Seko 在国产化芯片平台上能够以相近的时间,实现和国际芯片平台一致的生成效果——国际芯片平台运行 1 秒可生成 1.25 秒视频,国产芯片平台运行 1 秒可生成 1.0625 秒视频。随着国产芯片性能的持续优化与生态成熟,两者差距还将进一步缩小。

未来,商汤也将为 Seko 的创作者提供国产化方案选择,以极致性价比开启 AI 视频创作的 " 低成本 " 时代。

创作很卷,创新不易?AI 重塑影视内容生态

商汤科技董事长兼 CEO 徐立说:"Seko 将打开一扇门,让原本不具备创作能力但是具有创作想象力的人,真正意义上走入到创作生态中,去释放他们的想象力。"

凭借对行业痛点的精准破解与技术赋能,Seko 的应用边界持续拓展,从普通大众创作者、专业个人创作者和小型工作室,向顶尖影视行业延伸,并交出亮眼答卷。

在漫剧和短剧领域,Seko 已成功孵化出一系列爆款剧集,其中真人短剧《婉心计》强势登顶抖音 AI 短剧榜第一。《我在山顶建末日堡垒》、《隐神录》等作品也收获广泛关注。

在高品质影视工业领域,Seko 与影视行业头部企业长江电影集团正式达成战略合作,将共同探索 "AIGC+ 影视 " 的融合创新,预计将于明年推出荆楚文化历史故事系列短剧,并联合孵化院线级 AIGC 电影,推动 AI 创作工具深入专业影视生产流程。

徐立提到《创新者的窘境》的观点 " 颠覆性技术通常首先在新兴或不起眼的市场商业化 ",他认为 AI 以极致效率和成本帮助创作者释放创意,并随着能力的不断进化,产出内容的质量将逐步向 " 精品化 " 迈进,创造 " 阳春白雪 " 与 " 下里巴人 " 共存的内容新生态。

目前,Seko 与故事接龙社区联合举办的创作大赛即将开启,欢迎大家都来参与。

宙世代

宙世代

ZAKER旗下Web3.0元宇宙平台

一起剪

一起剪

ZAKER旗下免费视频剪辑工具

相关标签

ai 商汤科技 核心技术 巨量引擎
相关文章
评论
没有更多评论了
取消

登录后才可以发布评论哦

打开小程序可以发布评论哦

12 我来说两句…
打开 ZAKER 参与讨论