设置
  • 日夜间
    随系统
    浅色
    深色
  • 主题色

AI 视频总 “穿帮”?群核 SpatialGen 用 3D 扩散模型,让物体位置不 “漂移”

发布时间: 来源: 大象新闻

“明明是同一个客厅场景,镜头一转,沙发就从靠窗位置移到了墙边;生成的厨房视频里,冰箱突然‘穿透’了橱柜”—— 这是当前 AIGC 视频工具的常见问题,行业称之为 “空间一致性不足”。这一问题不仅影响视频的真实感,更让 AI 视频难以应用于虚拟看房、产品演示等商业化场景。而群核科技在首届 TechDay 上发布并开源的空间生成模型 SpatialGen,正是用 3D 扩散模型技术,从根源上破解了这一行业痛点。pXi速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

近日,群核科技在首届技术开放日(TechDay)上正式发布其空间大模型最新成果:新一代空间语言模型SpatialLM 1.5与空间生成模型SpatialGen。其中,SpatialGen依托群核科技海量室内3D场景数据与多视角扩散模型技术,可生成3D高斯(3DGS)场景和渲染漫游视频,并确保同一物体在不同镜头下始终保持准确的空间属性和物理关系,支持任意视角切换、路径漫游,光照、纹理、遮挡关系全程物理一致。pXi速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

pXi速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

图说:SpatialGen的多视角一致性演示pXi速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

要理解 SpatialGen 的突破,首先需要搞清楚 AI 视频 “穿帮” 的根源:当前多数文生视频、图生视频工具,都是基于 2D 图像或视频数据训练,缺乏对 3D 空间结构的理解。比如,AI 生成室内视频时,会将每个镜头视为独立的 2D 图像来处理,无法记住 “沙发在 3D 空间中的真实位置”,导致镜头切换时物体 “漂移”;生成物体交互场景时,也无法理解 “冰箱不能穿透橱柜” 的物理逻辑。pXi速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

这背后的原因是当下多数视频生成模型是基于图像或视频数据训练,图像缺少人类感知空间时所依赖的深度线索,因此仅凭自然语言难以让 AI 建立精确的空间关系认知,因此会缺乏对 3D 空间结构和物理法则的理解和推演能力。pXi速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

SpatialGen 依托群核积累的数亿 3D 空间数据集和自研渲染引擎,训练可以生成任意指定视角图片的扩散模型。其核心在于让 AI 对空间的认知严格符合真实物理规律,从底层解决 2D 感知到 3D 理解的映射偏差。并首次基于多视角扩散+3DGS重建技术,从源头解决空间一致性问题。pXi速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

TechDay 现场的对比演示,直观展现了这种技术的优势:工作人员分别用其他AI视频生成模型和 SpatialGen 生成 “客厅漫游视频”。其他模型生成的视频,在镜头转换过程中,家具发生了明显不一致状况,而 SpatialGen 生成的视频中,无论镜头如何切换 —— 从正面拍沙发,从侧面拍餐桌,从俯瞰拍整个客厅 —— 沙发、餐桌的位置与尺寸始终保持一致。pXi速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

SpatialGen 能实现这种突破,还得益于群核科技海量的 3D 场景数据和空间智能飞轮支撑。基于酷家乐这一全球最大的空间设计平台,群核科技构建了“空间编辑工具-空间合成数据-空间大模型”的空间智能飞轮,让工具沉淀数据,用数据加速模型训练,用模型提升工具体验,再在工具的广泛应用中沉淀更为丰富的场景数据。正如快手依托短视频生态推动可灵迭代一样,群核凭借酷家乐沉淀的海量室内物理数据,正在空间智能领域复现“工具—数据—模型”的技术增强回路。pXi速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

据透露,群核还在研发一款基于3D技术的AI视频生成产品,并计划在今年内正式发布——这或许是全球首款深度融合3D能力的AI视频生成Agent。通过构建3D渲染与视频增强一体化的生成管线,有希望弥补当前AIGC视频生成中时空一致性不足的问题。pXi速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

(本文来源:大象新闻。本网转发此文章,旨在为读者提供更多信息资讯,所涉内容不构成投资、消费建议。对文章事实有疑问,请与有关方核实或与本网联系。文章观点非本网观点,仅供读者参考。)pXi速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

“明明是同一个客厅场景,镜头一转,沙发就从靠窗位置移到了墙边;生成的厨房视频里,冰箱突然‘穿透’了橱柜”—— 这是当前 AIGC 视频工具的常见问题,行业称之为 “空间一致性不足”。这一问题不仅影响视频的真实感,更让 AI 视频难以应用于虚拟看房、产品演示等商业化场景。而群核科技在首届 TechDay 上发布并开源的空间生成模型 SpatialGen,正是用 3D 扩散模型技术,从根源上破解了这一行业痛点。pXi速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

近日,群核科技在首届技术开放日(TechDay)上正式发布其空间大模型最新成果:新一代空间语言模型SpatialLM 1.5与空间生成模型SpatialGen。其中,SpatialGen依托群核科技海量室内3D场景数据与多视角扩散模型技术,可生成3D高斯(3DGS)场景和渲染漫游视频,并确保同一物体在不同镜头下始终保持准确的空间属性和物理关系,支持任意视角切换、路径漫游,光照、纹理、遮挡关系全程物理一致。pXi速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

pXi速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

图说:SpatialGen的多视角一致性演示pXi速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

要理解 SpatialGen 的突破,首先需要搞清楚 AI 视频 “穿帮” 的根源:当前多数文生视频、图生视频工具,都是基于 2D 图像或视频数据训练,缺乏对 3D 空间结构的理解。比如,AI 生成室内视频时,会将每个镜头视为独立的 2D 图像来处理,无法记住 “沙发在 3D 空间中的真实位置”,导致镜头切换时物体 “漂移”;生成物体交互场景时,也无法理解 “冰箱不能穿透橱柜” 的物理逻辑。pXi速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

这背后的原因是当下多数视频生成模型是基于图像或视频数据训练,图像缺少人类感知空间时所依赖的深度线索,因此仅凭自然语言难以让 AI 建立精确的空间关系认知,因此会缺乏对 3D 空间结构和物理法则的理解和推演能力。pXi速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

SpatialGen 依托群核积累的数亿 3D 空间数据集和自研渲染引擎,训练可以生成任意指定视角图片的扩散模型。其核心在于让 AI 对空间的认知严格符合真实物理规律,从底层解决 2D 感知到 3D 理解的映射偏差。并首次基于多视角扩散+3DGS重建技术,从源头解决空间一致性问题。pXi速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

TechDay 现场的对比演示,直观展现了这种技术的优势:工作人员分别用其他AI视频生成模型和 SpatialGen 生成 “客厅漫游视频”。其他模型生成的视频,在镜头转换过程中,家具发生了明显不一致状况,而 SpatialGen 生成的视频中,无论镜头如何切换 —— 从正面拍沙发,从侧面拍餐桌,从俯瞰拍整个客厅 —— 沙发、餐桌的位置与尺寸始终保持一致。pXi速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

SpatialGen 能实现这种突破,还得益于群核科技海量的 3D 场景数据和空间智能飞轮支撑。基于酷家乐这一全球最大的空间设计平台,群核科技构建了“空间编辑工具-空间合成数据-空间大模型”的空间智能飞轮,让工具沉淀数据,用数据加速模型训练,用模型提升工具体验,再在工具的广泛应用中沉淀更为丰富的场景数据。正如快手依托短视频生态推动可灵迭代一样,群核凭借酷家乐沉淀的海量室内物理数据,正在空间智能领域复现“工具—数据—模型”的技术增强回路。pXi速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

据透露,群核还在研发一款基于3D技术的AI视频生成产品,并计划在今年内正式发布——这或许是全球首款深度融合3D能力的AI视频生成Agent。通过构建3D渲染与视频增强一体化的生成管线,有希望弥补当前AIGC视频生成中时空一致性不足的问题。pXi速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

(本文来源:大象新闻。本网转发此文章,旨在为读者提供更多信息资讯,所涉内容不构成投资、消费建议。对文章事实有疑问,请与有关方核实或与本网联系。文章观点非本网观点,仅供读者参考。)pXi速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

青春聚力,共赴“开新”。《中央广播电视总台2024网络春晚》将于2月2日20:00档在央视综合频道(CCTV-1)、综艺频道(CCTV-3)及央视网、央视频、央视新闻、央视财经、央视文艺等总台新媒体平台同 近期一部《19层》正风靡全网,播出后就获得了极佳的反响。网友们对它的热衷度也在不断攀升,各大论坛上也都是关于它内容,网友们纷纷展开热烈的讨论,不少人都想了解其中的具体内容和剧情细节。今天小编将详 《致命游戏》正在热播中,该剧一经播出,就以其精彩的剧情,精良的制作,精心的演绎,受到了观众的一致好评,拿下了收视第一的宝座,是非常值得一看的好剧!《致命游戏》阮澜烛认出三胞胎的原因是他在三胞胎身上用闪 近日,湖南卫视&芒果TV双平台独播的开年首部“客厅喜剧”《欢乐家长群》一经开播,收视成绩领跑荧屏春节档,酷云数娱平台显示连续4天霸榜黄金时段卫视平均收视率top1,同时该剧在欢网实时收视数 最近“哈尔的初恋是荒地魔女吗”引起了不少人的关注,这部作品在宣传期间就已拥有相当高的热度和人气。在播出之后,这部剧的表现令观众们感到欣喜和满意,真正地实现了大家的期待。今天,我将为大家讲讲哈尔 最近《独一有二的她》的讨论度非常高,每一次的更新都能让观众讨论很久,而剧中的各种发展也牵动着大家的心,《独一有二的她》第13集分集剧情介绍就是其中之一,下面就是小编给带来的整理内容,快来一起看看吧 。

本文链接:AI 视频总 “穿帮”?群核 SpatialGen 用 3D 扩散模型,让物体位置不 “漂移”http://www.sushuapos.com/show-7-23226-0.html

声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

上一篇: 《NIGHTKIDZ 夜之子》强势登顶 !网易云音乐25年第35期说唱周榜发布

下一篇: 林强解读天然钻石投资,4C定价值、稀缺性筑护城河,消费升级添动力

热门资讯

推荐资讯

  • 飞行服怎么搭配?

    飞行服怎么搭配?飞行服是一种很有个性的服装,搭配时可以选择配以紧身裤或牛仔裤,搭配一双厚底靴子或运动鞋,或者选择一条迷彩裤或束脚裤,搭配一双军靴会显得非常酷。 上身可以

  • 男生冬季韩风穿搭(男生韩式风格穿衣搭配)

    男生冬季韩风穿搭冬季的韩风穿搭通常以时尚潮流和舒适保暖为主,以下是男生冬季韩风穿搭的一些详细建议: 上衣: 抓绒外套:选择一件抓绒外套,可以增加保暖性,同时潮流感十足。

  • 韩版风衣品牌排行前十名

    韩版风衣品牌排行前十名:以下这些牌子的韩版风衣质量都很好,是韩版风衣的十大品牌: 1.太平鸟韩版风衣(十大韩版风衣品牌,太平鸟); 2.森马韩版风衣(十大韩版风衣品牌,森马);

  • 秋季上班族穿搭技巧

    秋季上班族穿搭技巧 秋季上班族可以选择一些经典且适合办公室穿着的服装单品,同时注重舒适性和时尚感。以下是一些适合秋季上班族穿搭的建议: 针织衫:选择质地柔软舒适的针织

  • 一字肩潮流穿搭法

    一字肩潮流穿搭法1、一字肩+短裙 短裙的俏皮与一字肩的撩人结合,共同演绎出轻熟的魅力。 无论是牛仔短裙还是鱼尾裙,高腰的确是关键,打造出高腰线是拥有大长腿的法宝。如果

  • 冬天穿芭比裤,如何搭配才更有型?

    在寒冷的冬天,很多女性为了追求时尚和个性,依然会选择穿着芭比裤。可是,如何搭配才能既保暖又时尚呢?今天,我就为大家分享一下我的一些心得,希望对大家有所帮助。一、选择合适的

  • 五行能量旺运穿衣色彩搭配:打造个人专属的幸运色彩

    一、引言生活在这个五彩斑斓的世界,色彩不仅让我们感受到了美丽的风景,还影响着我们的心情和运势。在我国,五行能量旺运穿衣色彩搭配是一种古老的传统文化,它通过五行相生相克

  • 美女穿比基尼亲嘴:激情夏日的独特魅力

    随着夏日阳光的升温,海滩成为人们避暑度假的热门之地。在沙滩上,美女们穿着各式各样的比基尼,自信地展现自己的身材。而其中最引人注目的一幕,莫过于美女们穿着比基尼亲嘴的瞬

  • 红咖色搭配什么颜色:探索时尚界的色彩密码

    一、引言在时尚界,色彩搭配一直是备受关注的话题。近年来,红咖色在各大秀场和街头时尚中脱颖而出,成为了备受追捧的流行色彩。那么,如何才能将红咖色搭配出独特的时尚感呢?本文

  • 荧光绿搭配三种颜色,打造独特的时尚风格

    随着时尚潮流的不断变迁,人们对于颜色的搭配也越来越大胆尝试。其中,荧光绿这一鲜明的色彩在时尚舞台上脱颖而出,成为许多时尚达人的宠儿。那么,如何将荧光绿与另外三种颜色搭

  • 女士黑色老爹鞋搭配:时尚圈的“黑马”

    一、引言近年来,时尚圈的风向标不断变化,各种鞋款轮流占据潮流舞台。其中,女士黑色老爹鞋作为一款“黑马”鞋款,逐渐成为时尚达人的必备单品。那么,如何搭配女士黑色老爹鞋,才能

  • 黑色大衣配什么裤子?别再为了搭配而犯愁!

    黑色大衣作为时尚圈的经典单品,一直以来都备受追捧。但是搭配什么裤子才能更好地展现个性和时尚感呢?本文将为您提供一些实用的建议,让您在穿着黑色大衣时,能够轻松搭配出与众

  • 日榜
  • 周榜
  • 月榜