DualGS
DualGS是基于双高斯溅射技术的体积视频处理开放项目官网,核心定位为面向学术研究、数字内容创作领域的人体体积视频表示技术落地载体,核心功能包括双高斯人体建模、体积视频高压缩比处理、多端实时渲染适配
DualGS是基于双高斯溅射技术的体积视频处理开放项目官网,核心定位为面向学术研究、数字内容创作领域的人体体积视频表示技术落地载体,核心功能包括双高斯人体建模、体积视频高压缩比处理、多端实时渲染适配。目标用户覆盖计算机图形学研究者、动作捕捉内容开发者、VR内容创作者、数字人制作团队等,可应用于学术研究复现、体积视频内容生产、移动端/VR端动态数字人渲染、动捕素材高效存储传输等场景,为人体体积视频的制作、压缩、渲染全流程提供技术方案参考与Demo体验。
- 适用对象
- 计算机图形学研究者(学术实验复现)
- 主要功能
- 双高斯人体建模、高比例混合压缩
- 计费方式
- 免费
- 平台
- 网页
- 已收录
- 2026.06.14(139 天)
阅读目录
编辑评测与站内热度
编辑综合评分
满分 5 分
六维指标基于站内真实数据(热度、社区反馈、资料完整度、可达性核验等)综合评估,非用户投票。
全站热度排名
#12201
分类内排名
#135 / 209
累计站内点击
1
近 7 日点击
1
排名与点击为站内真实统计口径,反映 Toolifai 用户行为,非编辑评分。
DualGS是什么,怎么使用?
约 4 分钟DualGS是基于双高斯溅射技术的体积视频处理开放项目官网,核心定位为面向学术研究、数字内容创作领域的人体体积视频表示技术落地载体,核心功能包括双高斯人体建模、体积视频高压缩比处理、多端实时渲染适配。目标用户覆盖计算机图形学研究者、动作捕捉内容开发者、VR内容创作者、数字人制作团队等,可应用于学术研究复现、体积视频内容生产、移动端/VR端动态数字人渲染、动捕素材高效存储传输等场景,为人体体积视频的制作、压缩、渲染全流程提供技术方案参考与Demo体验。
主要功能
- 双高斯人体建模:该功能将人体结构拆分为关节高斯与皮肤高斯两类进行联合优化,用户可上传动态人体表演的多视角捕捉素材,系统会自动对齐骨骼关节点与皮肤形变信息,生成对应体积视频模型,相比传统单高斯建模方案,对人体衣物褶皱、肢体快速运动等复杂场景的捕捉精度更高,可降低动态场景下的渲染噪点与穿模问题。
- 高比例混合压缩:支持体积视频的混合压缩处理,用户将生成的双高斯体积视频模型导入后,可选择不同压缩档位,系统会通过几何信息量化、冗余帧合并、纹理信息联合编码的组合策略实现压缩,最高压缩比可达120倍,压缩后模型仍能保留核心动作与视觉细节,大幅降低体积视频的存储占用与传输带宽需求。
- 多端实时渲染:针对不同设备环境做了渲染适配优化,用户可将压缩后的体积视频模型分别部署到移动端设备、VR头显、普通PC端,无需依赖高端GPU硬件即可实现实时渲染,在移动设备上可稳定达到30帧以上的渲染帧率,VR场景下可满足90帧的刷新率要求,保障交互过程的流畅度。
- 动态跟踪适配:内置动态跟踪模块,支持体积视频模型与实时动捕数据对接,用户导入动捕数据流后,系统可快速驱动双高斯模型完成对应的动作变化,跟踪延迟控制在20ms以内,适合用于虚拟直播、实时互动数字人、VR虚拟互动场景等需要动态响应的使用场景。
- Demo体验入口:官网提供可直接在线体验的Demo演示页面,用户无需部署本地环境,打开页面即可查看不同人体表演场景的双高斯渲染效果,也可上传自己的短片段动捕素材进行效果测试,直观感受建模精度、压缩效果与渲染流畅度,方便快速验证技术适配性。
- 技术文档支持:提供完整的技术实现文档与开源代码链接,用户可下载对应代码包,按照文档步骤完成本地环境部署,也可查看SIGGRAPH Asia 2024对应的论文原文,了解技术核心原理与实验数据,支持研究者基于该项目做二次开发与技术迭代。
怎么使用
- 第一步,访问DualGS官网首页,可先浏览核心技术介绍与SIGGRAPH Asia 2024展示相关信息,了解双高斯溅射技术的基本原理与适用场景。第二步,找到在线Demo体验入口,选择预设的人体表演案例,查看不同压缩比下的渲染效果,也可上传短片段多视角动捕素材进行测试。第三步,若需要本地部署使用,可点击代码仓库链接,下载对应开源代码包,查看配套的环境配置文档,完成Python、CUDA等依赖项安装。第四步,按照文档说明导入多视角人体表演捕捉数据,运行建模脚本,等待系统完成关节高斯与皮肤高斯的联合优化,生成体积视频模型。第五步,根据使用需求选择对应压缩档位处理模型,再将模型导出部署到目标设备,即可实现实时渲染与动态交互效果。
适合什么人群
- 计算机图形学研究者(学术实验复现)
- VR内容开发者(虚拟场景人体内容制作)
- 数字人制作团队(动态数字人建模)
- 动作捕捉服务商(动捕素材压缩存储)
- 虚拟直播运营团队(实时虚拟形象驱动)
- 移动内容开发者(移动端体积视频内容落地)
总结
这是一个面向图形学领域和数字内容创作领域的技术开放项目站点,核心围绕双高斯溅射的体积视频技术展开,是SIGGRAPH Asia 2024相关技术的官方展示载体。相比传统的体积视频技术方案,它最突出的特点是平衡了建模精度、压缩效率与渲染性能,既解决了以往体积视频文件过大、难以落地到消费级设备的问题,也保证了人体动态表演的还原精度,不会出现过度压缩导致的动作变形、纹理模糊问题。站点不仅提供了技术原理的详细说明、相关论文的下载入口,还开放了可直接体验的Demo和完整的开源代码,对于想要研究体积视频技术、落地人体动态数字人内容的团队和研究者来说,是非常有参考价值的技术资源。同时它针对移动端和VR设备的适配优化,也给元宇宙相关内容的落地提供了新的技术路径,不需要依赖高端硬件就可以实现流畅的体积视频交互,降低了体积视频内容的应用门槛。
价格与免费额度
DualGS为开源技术项目,所有核心功能完全免费开放,没有功能限制,用户可免费下载源代码、查看所有技术文档、使用在线Demo,也可基于该项目进行二次开发与商用,无需支付授权费用。目前官方暂未推出付费版本,若有定制化开发需求,可通过项目开源仓库的issue渠道联系开发团队沟通合作,适合所有有体积视频技术研究或落地需求的用户免费使用。
优点与不足
优点
- 双高斯建模结构对人体动态表演的捕捉精度较高,可降低快速动作场景下的穿模与噪点问题
- 混合压缩策略最高可实现120倍压缩比,大幅降低体积视频的存储与传输成本
- 适配低端移动设备与VR头显,无需高端GPU即可实现体积视频实时渲染
- 代码完全开源,提供完整技术文档与Demo,方便研究者与开发者二次开发
不足
- 目前仅支持人体类体积视频处理,暂不覆盖动物、静态场景等其他类型的体积内容
- 本地部署需要CUDA环境支持,对不熟悉图形学开发环境的用户有一定上手门槛
- 在线Demo仅支持短片段素材测试,长时长体积视频处理需要本地部署完成
- 暂未提供可视化拖拽式操作界面,所有功能需要通过代码脚本调用实现
能帮你做的 8 件事
- 01双高斯人体建模
- 02高比例混合压缩
- 03多端实时渲染
- 04动态跟踪适配
- 05高斯溅射场景的常用方案
- 06体积视频场景的常用方案
- 07计算机图形学研究者(学术实验复现)的日常效率工具
- 08零成本体验完整核心功能
更新历史
- DualGS 收录进 Toolifai 目录
- 页面资料核验与信息更新
常见问题
DualGS处理体积视频对输入素材有什么要求?
输入素材需要是多视角同步拍摄的人体表演视频,推荐至少使用6个以上的同步相机拍摄,相机参数需要完成标定,帧率不低于24fps,分辨率建议在1080P及以上,素材需覆盖人体完整的动作周期,避免出现长时间的肢体遮挡。如果是已经完成骨骼关键点标注的动捕素材,可直接导入系统进行建模,能进一步提升建模效率与精度,目前暂不支持单视角拍摄的素材直接生成体积视频。
DualGS生成的体积视频可以在普通手机上运行吗?
可以,DualGS针对移动端做了专门的渲染优化,压缩后的体积视频模型可以在中低端安卓、iOS移动设备上实现实时渲染,普通性能的手机在运行时可稳定达到30帧以上的帧率,不需要依赖特殊的硬件加速模块。如果需要在手机端集成,可直接使用官方提供的移动端渲染SDK,只需要少量代码接入即可完成部署,适合用于移动端互动广告、短视频特效、虚拟偶像互动等场景。
120倍压缩比下的体积视频会损失多少画质?
120倍压缩比属于最高压缩档位,主要针对对文件大小要求极高的传输场景,压缩后人体的核心动作、轮廓与基础纹理信息可以保留,细节纹理比如衣物的精细图案、皮肤的细微纹路会有一定损失,但不会出现动作变形、穿模等结构性问题。如果对画质要求较高,也可选择30倍、60倍等中低压缩档位,这类档位下肉眼几乎不会察觉到画质损失,可根据实际使用场景的存储、带宽需求灵活选择。
DualGS支持实时动捕数据驱动吗?
支持,DualGS的动态跟踪模块可以对接常见的动捕设备输出的实时数据流,包括光学动捕、惯性动捕、AI单目动捕等来源的数据,接收到动捕数据后可以在20ms以内完成双高斯模型的动作驱动,延迟控制在人眼感知范围以外,适合用于虚拟直播、VR实时互动、线上虚拟活动等需要实时响应的场景,驱动过程中不会出现动作卡顿或者错位的问题。
可以基于DualGS做二次开发商用吗?
可以,DualGS采用MIT开源协议,用户可以免费下载、修改、二次分发代码,也可以用于商业场景,不需要向官方支付授权费用,只需要在衍生产品中保留原项目的版权声明即可。官方也鼓励开发者基于该技术开发不同领域的应用,比如数字人平台、VR内容工具、动捕处理软件等,如果在开发过程中遇到问题,也可以通过开源仓库的issue渠道向开发团队反馈,获取技术支持。
DualGS和传统的NeRF体积视频方案有什么区别?
相比NeRF类体积视频方案,DualGS的渲染速度更快,不需要进行大量的光线步进计算,在消费级设备上即可实现实时渲染,而传统NeRF方案大多需要高端GPU才能实现实时运行。同时DualGS的压缩效率更高,同画质下文件大小远小于NeRF类体积视频,更适合传输与落地。不过NeRF方案对场景的通用性更强,而DualGS目前仅针对人体场景做了优化,在非人体场景的表现上不如通用NeRF方案。
开始使用 DualGS
从官方入口了解最新功能与使用方式。
由 Toolifai 编辑维护
欢迎产品方补充截图、功能介绍与官方资料。更新和纠错由编辑审核后发布。