自本年2月OpenAI的Sora初次公开展示以来，视频生成履历了从备受期待到遭遇质疑的流程。在这爽脆10个月里，Sora迟迟未洞开给公众使用，国内百川智能首创东谈主兼CEO王小川则基于AI的途径判断 “摁死”了公司跟进Sora的念念法，另一些互联网大厂和大模子创业公司还在不竭跟进推出视频生成模子，但对外的发声表态也渐趋舒适。
12月3日，腾讯混元大模子上线了视频生成智商，并开源了这个参数目130亿的视频生成大模子HunYuan-Vieo。据称该模子是业界参数最大的开源视频模子，可生成5秒视频。据混元团队公布的文生视频模子成果评估，混元视频生成模子总体评分41.3%，高于未公开称呼的国内模子A和B以及国外的GEN-3 alpha和Luma1.6。这项评估参照抓续时辰、文本对皆、畅通质地、视觉质地几个维度，显现五个模子评分都不高，最低的Luma1.6评分仅24.8%。
摄取第一财经等媒体采访时，腾讯混元多模态生成技艺肃穆东谈主凯撒直言，文生视频还不处于很熟识的阶段，各模子得胜率都不高，至少文生视频的技艺进程在混元里面的评估中，还莫得到大边界贸易化的进程，而是在技艺打磨阶段。
从开源生态看，凯撒觉得，当今视频生成开源生态也不是很成场所，最大的问题是开源的视频生成底模（基底模子）跟闭源差距太大。当今视频生成所需的算力、数据消费量和图像生成比拟是数目级的差距，业内不太念念把我方花大资本作念出来的模子开源出来。在这种闭门觅句的情况下，最佳的模子好多东谈主也莫得效起来，于是混元开源了我方的视频生成模子。
记者用混元大模子视频生得胜能分歧生成“三只黑猫在雪中玩耍，留住脚印”“三只黑猫在雪中追赶，留住脚印”和“一只戴着黄色领巾的企鹅在故宫门口吃冰糖葫芦”的视频。第一个视频生成三只黑猫在雪中，莫得生成显著的脚印，但黑猫主体竣工，脚踩在坑洼不屈的雪地上时产生了昔日的视野装潢。第二个视频中，猫在雪地上踩出坑，有与物理环境的果真互动，但有两只黑猫会通成了一只。第三个视频场景正确且外相明晰，但冰糖葫芦会我方出动。记者此前尝试使用过一些主流的免费视频生成模子也发现，好多模子已能作念到画面细密果真，但畅通端正或物理端正还弗成很好体现。
从文生视频的具体难点看，凯撒告诉记者，对比文生图模子一次出一张图，这个视频生成模子要生成129帧画面，每一帧都正确终点难。视频生成算力会跟着时辰蔓延而呈平方级高潮，且时长越长，画面退化越严重，业界面前主流都是五六秒。若是类比文生图模子，当今视频生成的水平就像两年前SD（Stable Diffusion）还没面世时的水平。此外，视频模子无法敷裕果真地模拟寰宇的物理端正，举例掉下的杯子不碎，要转变这少量，背后波及难度终点大的数据处理、清洗以及物理端正引入使命，后续混元将给视频模子引入果真寰宇的学问。
此外，记者了解到，视频生成模子的技艺旅途也还未整个明晰。凯撒示意，业界此前未解答“Scaling Law（缩放定律）在视频边界存不存在”的问题，混元只可重新作念，把视频的Scaling Law走了一遍，考据图像和视频DiT（Diffusion with Transformer，两者会通）也存在Scaling Law，后续Scaling Law还会进一步往下走。
业内其他厂商也对视频生成模子的进展和难点提议了新判断。11月，生数科技发布Vidu 1.5版块，优化多主体一致性、高下文牵挂方面发达。随青年数科技计议首创东谈主鲍凡称，对于Scaling Law是否“撞墙”，业内莫得圭臬谜底，存在Scaling Law从数学表面上“撞墙”的可能，业内也在寻找新关节。架构上，业内架构已在一边拘谨一边革命，此前业内有自追溯和会通的架构之争，实质成果显现Diffusion和Transformer会通架构更优，于是包括OpenAI等公司都在顺延采选这种结构，同期业内也探索在新关节，举例管束DiT处理高下文智商欠缺的问题。而Vidu1.5的推出已标明这种Diffusion和Transformer的架构并非最优，接下来架构途径可能进一圭表整。
举报 第一财经告白联接，请点击这里此内容为第一财经原创，著述权归第一财经扫数。未经第一财经籍面授权，不得以任何神志加以使用，包括转载、摘编、复制或成立镜像。第一财经保留致密侵权者法律累赘的权益。 如需获取授权请联系第一财经版权部：021-22002972或021-22002335；banquan@yicai.com。 文章作家
郑栩彤
联系阅读
Sora炸圈后哑火，国产视频大模子接棒降门槛视频可能不是OpenAI当下的第一优先级，但国产视频大模子忙着镌汰门槛、让东谈主东谈主用上。
213 09-11 18:48 腾讯发布混元Turbo大模子混元TUrbo采选万亿级层间异构MoE（混杂各人模子），推理效能比上一代擢升100%，推理资本着落50%。
41 09-05 10:03 华泰证券：现时传媒板块已回调至相对低位 具有建树价值｜有看投0 07-05 12:04
热市跟踪丨Sora见识大涨， 这只汽车零部件见识股5连板汽车零部件见识股金麒麟5连板，车联网见识股飞天诚信4连板。
108 06-26 16:39 记者实测|视频生成赛谈涌入更多新品，新势力能否降服老玩家？新竞争者不竭入局开云kaiyun.com，视频生成边界竞争趋于热烈。
465 06-14 20:37 一财最热 点击关闭