设置
  • 日夜间
    随系统
    浅色
    深色
  • 主题色

昆仑万维开源中国首个面向AI短剧创作的视频生成模型SkyReels-V1,重塑AI短剧行业格局

发布时间: 2025-02-19 09:39:35 来源:

2月18日,昆仑万维开源中国首个面向AI短剧创作的视频生成模型SkyReels-V1、中国首个SOTA级别基于视频基座模型的表情动作可控算法SkyReels-A1。awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

1. SkyReels-V1:Human-Centric Video Foundation Model,中国首个面向AI短剧创作的开源视频生成模型awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

SkyReels-V1可实现影视级人物微表情表演生成,支持33种细腻人物表情与400+种自然动作组合,高度还原真人情感表达。正如以下视频所示,SkyReels-V1支持生成大笑、怒吼、惊讶、哭泣等微表情,展现出人物情感丰沛的表演细节。即使有大幅度肢体动作,SkyReels-V1生成的微表情也完美贴合人物肢体表演。awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

同时,SkyReels-V1为AI视频生成带来了电影级光影美学,基于好莱坞级的高质量影视数据训练,当前SkyReels生成的每一帧画面,在构图、演员站位、相机角度等都具备电影级的质感。无论是单人镜头表演细节,还是多人构图,当前已具备精准的表情控制和高质感画面。awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

更重要的是,SkyReels-V1不仅支持文生视频、还能支持图生视频,是开源视频生成模型中参数最大的支持图生视频的模型,在同等分辨率下各项指标实现开源SOTA。awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

图1丨SkyReels-V1文生视频指标对比(来源:昆仑万维SkyReels)awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

能够实现这样的SOTA级别,不仅依赖于昆仑万维SkyReels团队基于自研的高质量数据清洗和人工标注管线,构建了千万级的高质量电影&电视剧&纪录片数据。更依托团队自研「Human-Centric」的视频理解多模态大模型,大幅提升视频中人物相关的理解能力,尤其是自研人物智能解析系统。awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

综上所述,得益于扎实的数据工作和先进的人物智能解析系统,SkyReels-V1可以实现:awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

影视化表情识别体系:11种针对影视戏剧中的人物表情理解,如不屑、不耐烦、无助、厌恶等表情的理解;awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

人物空间位置感知:基于人体三维重建技术,实现对视频中多人的空间相对关系理解,助力模型生成影视级人物站位;awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

行为意图理解:构建超过400种行为语义单元,实现对人物行为的精准理解;awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

表演场景理解:实现人物-服装-场景-剧情的关联分析。awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

SkyReels-V1不仅是全球极少数开源的视频生成模型,还是围绕人物表演、开源视频生成模型中性能最强的。awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

在自研推理优化框架「SkyReels-Infer」的加持下,大幅提升推理效率,实现544p分辨率,推理基于单台4090只需80s,还支持分布式多卡并行,支持Context Parallel,CFG Parallel,和 VAE Parallel。此外,采取fp8 quantization以及parameter-level offload,满足低显存用户级显卡运行需求;支持flash attention、SageAttention,模型编译优化等,进一步优化延迟;基于开源diffuser库,提升易用性。awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

正如下图2所示,在同等RTX4090资源情况下对比(4卡),SkyReels-Infer版本比HunyuanVideo官方版本端到端延迟减少58.3%(293.3s vs 464.3s);SkyReels-Infer版本具备更鲁棒的部署策略,支持用户级别显卡1卡-8卡的推理部署。awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

图2丨推理生成544p视频,使用相同卡数的RTX 4090,SkyReels-Infer版本端到端延迟优于HunyuanVideo官方(xdit) 58.3%awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

在同等A800资源情况下对比,SkyReels-Infer版本比HunyuanVideo官方版本端到端延迟减少14.7%~28.2%(如图3所示),SkyReels-Infer版本具备更鲁棒的多卡部署策略。awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

图3丨推理生成544p视频,SkyReels-Infer版本具备更鲁棒的多卡部署策略,支持8卡部署awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

2.SkyReels-A1:首个SOTA级别的基于视频基座模型的表情动作可控算法awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

为了实现更加精准可控的人物视频生成,昆仑万维还开源了SOTA级别的基于视频基座模型的表情动作可控算法SkyReels-A1,对标Runway的Act-One,SkyReels-A1支持视频驱动的电影级表情捕捉,实现高保真微表情还原。能够基于任意人体比例(包括肖像、半身及全身构图)生成高度逼真的人物动态视频,其真实感源自对人物表情变化和情绪的精准模拟、皮肤肌理、身体动作跟随等多维度细节的深度还原。awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

SkyReels-A1不仅支持侧脸的表情控制生成、还能实现更加逼真的眉眼微表情生成和更大幅度的头部与自然身体动作。SkyReels-A1能够实现更大幅度的人物表情驱动。相比Runway的Act-One,SkyReels-A1可以迁移更复杂的表情动作,生成的人物面部神情可以配合肢体及画面内容实现更栩栩如生的表演。awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

3.以开源之姿,以破局之势,昆仑万维致力于推动全球AI短剧创作生态繁荣发展awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

昆仑万维一直坚持开源,推动技术平权。昆仑万维同时将SOTA级别的SkyReels-V1和SkyReels-A1进行开源,是AI短剧行业首例,也是昆仑万维SkyReels回馈行业迈出的一小步,更是促进AI短剧创作和视频生成行业枝繁叶茂的一大步。awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

我们相信在进行推理优化的升级和可控算法的开源后,它们将为用户带来低成本、可控性更强的AIGC能力。昆仑万维希望通过更多优秀视频生成模型的开源和极致的AI短剧产品能力,为用户带来低成本实现AI短剧创作的可能性、突破行业目前视频生成一致性差的问题,让大众通过自己的电脑生成精细且可控的人物表演。awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

此次开源的视频大模型,不仅是一次技术突破,有助于缩小全球内容产业的数字鸿沟,更是文化产业生产力的一次革命。未来,短剧与游戏、虚拟现实等领域的跨界发展,将会加速产业融合。AI短剧也有希望从“技术实验”迈向“主流创作”,成为全球文化输出的新载体。awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

“实现通用人工智能,让每个人更好地塑造和表达自我”是公司的使命,未来,昆仑万维及SkyReels还将开源更多视频生成模型和算法、通用模型,通过开源实现AGI平权,推动AI短剧生态的持续建设和繁荣,促进开源社区、开发生态以及AI行业的发展。(中国网)awk速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

新快报讯 人间三月,姹紫嫣红,一年中最美丽的节日——第114个“三八”国际妇女节即将来临。3月2日,由东莞市妇联、东莞市委政法委指导,东莞市妇女儿童福利会、麻涌镇妇女联合会协办,广东嘉荣超市有限公司、金佰利(中国)有限公 新快报讯 2月29日,横琴粤澳深度合作区执行委员会主任李伟农在致辞中表示,自2月8日,合作区执委会与省政府横琴办联合发布通告,明确横琴粤澳深度合作区正式封关运行的时间节点以来,各界对合作区封关运行高度关注。 李伟农说, 近日,法大大与企业绿色发展研究院联合发布了《2023年签约减碳与低碳办公白皮书》,该白皮书基于《低碳办公评价》标准倡导的创新减碳技术应用方向,深入剖析企业低碳办公场景及签约减碳价值。为践行“双碳 浙江通超工贸有限公司(简称“通超工贸”)于近日签约入驻企知道科创空间,以专业的大数据科创管理平台,助力自身更高阶发展。作为一家专业从事开发、生产橡胶制品的民营企业,通超工贸经过多年的发展,在国内高 受国务院委托,国家发展和改革委员会3月5日提请十四届全国人大二次会议审查《关于2023年国民经济和社会发展计划执行情况与2024年国民经济和社会发展计划草案的报告》。摘要如下:一、20 最近,上海豪宅市场传来消息,一些豪宅即将涨价400万,中介们纷纷收到通知。这些单价高达10万元以上的豪宅批量入市,引发了市场的热议。但是,这波豪宅涨价潮能否托住整体房价呢?据上海中原地产市场分析师卢文曦介绍,2000万元以 。

本文链接:昆仑万维开源中国首个面向AI短剧创作的视频生成模型SkyReels-V1,重塑AI短剧行业格局http://www.sushuapos.com/show-1-35724-0.html

声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

上一篇: 续创佳绩! 轻喜到家与顺丰、跨越等一同入选“2024年航城街道服务业十强”

下一篇: 英莱科技激光视觉焊缝跟踪系统全新PF系列新品发布,三大技术融合,强悍来袭

热门资讯

推荐资讯

  • 超长裙搭配什么鞋子?

    超长裙搭配什么鞋子?超长裙是一种非常优雅和浪漫的服饰,搭配鞋子时可以考虑以下几个方面: 凉鞋或高跟鞋:如果您的超长裙是轻盈的夏日风格,那么一双简单的凉鞋或高跟鞋可能是一

  • 夏日吊带怎么搭配好看?

    吊带搭配方法:吊带+短裤 吊带搭配短裤是夏日最常见最简单的搭配了,随处可见!图中小姐姐利用针织吊带上衣搭配牛仔短裤,整体搭配清爽凉快,给人感觉少女又充满活力! 吊带+牛仔阔

  • 男士休闲夹克一般搭配什么裤子?

    男士休闲夹克一般搭配什么裤子?男士休闲夹克可以搭配多种裤子,具体搭配取决于个人的风格和场合。以下是几种常见的搭配方式: 牛仔裤:牛仔裤是男士休闲夹克的经典搭配。选择一

  • 男士工装裤一般搭配什么衣服?

    男士工装裤一般搭配什么衣服?1.工装裤+T恤 版型简洁的工装裤,没有过多的修饰,颜色淡雅不花哨,简约素雅范,与T恤搭配很协调。简单的T恤搭配工装裤,大气有格调。勾勒出男士的健硕

  • 米色短款小香风外套怎么搭?

    米色短款小香风外套怎么搭搭配米色短款小香风外套可以打造出优雅、经典的时尚造型。以下是一些详细的搭配建议: 搭配黑色修身西裤和白色衬衫:将米色外套与黑色修身西裤和白

  • 焦糖色最佳颜色搭配图:打造时尚气息的视觉盛宴

    一、引言近年来,焦糖色在时尚圈的地位日益攀升,成为一种备受推崇的流行色彩。焦糖色不仅给人以温馨、柔和的感觉,还散发着一种低调的奢华。那么,如何将焦糖色与其他颜色搭配得

  • 薄款风衣内搭选择什么比较合适

    一、引言随着气温逐渐转凉,薄款风衣成为了不少时尚达人的秋日必备单品。然而,如何在内搭上做出合适的选择,以展现出独特的时尚品味,成为了许多新手们的困惑。本文将为大家详

  • 时尚百搭:牛仔衬衫怎么搭配好看女

    作为时尚界的“常青树”,牛仔衬衫凭借其休闲、时尚、百搭的特点深受女性们的喜爱。那么,如何将牛仔衬衫搭配出好看又时髦的效果呢?本文将为您详细介绍几种实用的搭配方法,让您

  • 紫色配什么颜色好?揭秘色彩搭配的奥秘

    一、引言在时尚界和设计领域,色彩搭配一直是一个充满魅力和奥秘的课题。紫色,作为一种神秘而高贵的颜色,在配色过程中常常让人感到困惑。那么,紫色究竟配什么颜色好呢?今天,我将

  • 白色阔腿裤配什么鞋子好看?轻松打造时髦感

    一、引言对于时尚达人来说,如何搭配出一身出众的穿搭一直是一个值得探讨的问题。其中,白色阔腿裤是一款备受青睐的单品,但是搭配鞋子却让很多人犯了难。今天,我将为大家分享一

  • 96 年鼠女与 93 年鸡男姻缘婚配:解析最佳配对秘诀

    随着社会的发展,越来越多的人开始关注星座、生肖等命理学说,以便更好地了解自己的性格特点和命运趋势。在众多姻缘配对中,96 年鼠女与 93 年鸡男的结合一直是人们关注的焦点

  • 靴子搭配什么衣服好看图片:时尚达人教你玩转潮流

    穿着靴子,如何搭配出时尚、个性的服装造型一直是众多时尚达人们关注的焦点。今天,我们就来为大家奉上一篇关于靴子搭配什么衣服好看的时尚宝典,让你成为街头潮流的焦点。一、

  • 日榜
  • 周榜
  • 月榜