- 适用对象
- 中小团队开发者搭建多模态内容工具时使用
- 主要功能
- 多模态融合处理、端到端交互支持
- 平台
- 网页
- 已收录
- 2026.10.18(21 天)
阅读目录
编辑评测与站内热度
全站热度排名
待评估
分类内排名
待评估
累计站内点击
3
近 7 日点击
2
排名与点击为站内真实统计口径,反映 Toolifai 用户行为,非编辑评分。
商汤-日日新大模型API是什么,怎么使用?
约 5 分钟商汤-日日新大模型API,原生多模态通用大模型系列,其核心能力覆盖文本、图像、视频、语音的融合处理与端到端交互
商汤-日日新大模型API是商汤推出的原生多模态通用大模型开放接口,面向有开发或集成需求的用户,解决多模态内容处理时需对接多个不同单模态接口的繁琐问题。用户可通过官方web端完成接口申请与调试,将覆盖文本、图像、视频、语音的处理能力接入自有业务流程,不用分别适配不同厂商的单模态模型接口,减少多模态场景下的对接调试成本。
它的能力边界集中在多模态内容的融合处理与端到端交互,不涉及垂直领域的定制化模型训练服务。如果你正在搭建需要同时调用文本生成、图像解析、语音转写、视频内容理解的应用,且不想拆分多个接口做数据对齐,选它会比零散对接单模态工具更适配。
主要功能
- 多模态融合处理:可同步调用文本、图像、视频、语音四类模态能力,不用拆分多个独立接口适配
- 端到端交互支持:输入跨模态混合内容可直接输出对应处理结果,省去中间格式转换的额外步骤
- web端调试面板:在官方网页内可直接完成接口参数调试,快速验证不同模态组合的输出效果
- 标准化开放接口:适配常规开发调用规范,可直接嵌入多数现有业务系统的内容处理链路
怎么使用
- 打开商汤日日新大模型官方网页,注册并完成开发者身份核验
- 进入模型列表页,找到对应多模态API的申请入口提交使用申请
- 申请通过后在控制台获取专属调用密钥,在web调试面板测试基础调用效果
- 参照官方提供的开发文档,将接口参数配置接入自有业务系统完成联调
适合什么人群
- 中小团队开发者搭建多模态内容工具时使用
- 内容平台运营批量处理图文音视频混合素材
- AI应用创业者快速验证多模态交互类产品原型
- 企业技术人员打通内部多模态数据流转链路
商汤-日日新大模型API
商汤-日日新大模型API是商汤科技推出的原生多模态通用大模型系列工具,官方介绍中称其核心能力覆盖文本、图像、视频、语音的融合处理与端到端交互,主要面向需要调用大模型能力的开发者、企业技术团队等群体,解决跨模态内容生成与交互的技术落地问题,填补单一模态工具无法处理多类型媒体数据的空白。
核心能力
该API具备跨模态融合处理能力,能将文本、图像、视频、语音的输入数据进行统一编码,生成跨模态关联的输出结果,运作时无需用户单独处理不同模态数据的格式转换,依赖商汤自研的多模态预训练模型框架,可直接调用已训练的模型参数完成任务。它的跨模态处理仅支持预设的模态组合,无法自行扩展未训练的模态类型,也不能处理存在严重失真的输入数据。该API支持端到端交互流程,能接收用户的连续多模态输入并生成连贯的输出,运作时会保留上下文的模态关联关系,不会割裂前后输入的内容逻辑,依赖会话状态的临时存储机制,可在单一会话内维持交互连贯性。它的会话存储仅覆盖当前请求周期,无法跨会话保留历史数据,也不能处理超过单会话容量的长序列内容。该API提供定制化模态处理选项,允许用户指定不同模态的权重分配,运作时会根据权重调整各模态数据在生成过程中的贡献度,依赖权重参数的可配置接口,仅支持官网公示的预设权重范围,不能自定义超出范围的权重值。它的权重调整仅影响输出的模态相关性,无法改变模型本身的基础能力边界,也不能用于提升低质量输入的处理效果。
工作方式
用户进入商汤日日新大模型API的官方平台后,需先完成开发者身份认证,获取调用所需的接口密钥,接着在官网提供的参数配置界面,选择所需的模态组合、权重参数及输出格式,随后将包含文本、图像、视频或语音的输入数据按指定格式上传,提交请求后等待模型处理。该API的产出物形态以结构化数据为主,包括文本内容、图像生成结果、视频片段及语音转录文件,可直接对接下游应用的开发需求。
典型场景与产出
开发者开发跨模态内容生成应用时,会调用该API处理用户上传的图文混合输入,产出符合指定风格的图文结合内容,用于社交平台的内容自动生成,无需单独对接文本与图像工具,能节省多模态处理的开发时间。企业构建智能客服系统时,会调用该API处理用户的语音输入与文字问题,产出语音应答内容,同时生成文字回复的结构化数据,用于客服系统的多渠道响应,无需分别对接语音与文本处理工具。影视后期团队处理素材时,会调用该API上传视频片段与文本标签,产出带文本标注的视频剪辑片段,用于快速筛选符合要求的素材,无需手动添加标注内容。
适用边界
该API不适合仅处理单一模态数据的简单任务,也不适合需要完全自定义模型参数的深度定制场景,其已知局限包括无法处理未训练的模态类型、无法跨会话保留历史数据,需要绕开的坑是不要上传严重失真或格式错误的输入数据,替代工具可选择单一模态的专用API,需查看官网的模型支持列表确认适配性。
编辑点评
商汤日日新大模型API的跨模态融合处理能力覆盖多类媒体数据,能简化开发者的多模态应用开发流程,但目前仅支持预设模态组合,无法扩展自定义模态类型,会话存储的时间限制也会影响长交互场景的使用,费用与具体功能细节以官网公示为准,数据隐私相关规则可查看官网帮助中心的隐私政策说明,建议开发者在调用前确认自身任务的模态需求是否在官网支持范围内。
优点与不足
优点
- 单接口可覆盖四类模态的内容处理需求,不用分别对接多个单模态工具
- web端自带调试面板,无需本地配置开发环境就能快速验证调用效果
- 原生多模态设计,跨模态内容交互的衔接流畅度优于拼接的单模态接口
不足
- 暂不提供垂直领域定制化模型训练的相关配套服务
- 界面默认无全中文本地化选项,部分专业术语需自行对照理解
能帮你做的 6 件事
- 01多模态融合处理
- 02端到端交互支持
- 03web端调试面板
- 04标准化开放接口
- 05中小团队开发者搭建多模态内容工具时使用的日常效率工具
- 06在网页等多端直接使用
更新历史
- 商汤-日日新大模型API 收录进 Toolifai 目录
- 页面资料核验与信息更新
常见问题
没有多模态开发经验能上手吗
可以,官方web端提供可视化调试面板,不用写复杂代码就能测试基础功能,配套的帮助中心有分步指引,新手可先从调试面板入手熟悉能力,再逐步对接自有系统。
调用费用是怎么计算的
该工具未标注固定定价类型,不同模态的调用计费规则存在差异,具体收费标准以官网公示的定价页内容为准,新用户可查看官网是否提供初始免费调用额度用于测试。
上传的业务数据会被留存吗
该工具的用户数据处理规则以官方隐私政策为准,常规调用场景下不会留存用户上传的私有业务数据,涉及敏感数据的使用场景可提前查看官网隐私政策的对应条款确认细节。
支持垂直领域定制训练吗
不支持,它仅提供通用多模态大模型的开放调用能力,不提供针对特定垂直行业的定制化模型训练服务,有定制训练需求的用户可查看官网其他相关服务板块。
开始使用 商汤-日日新大模型API
从官方入口了解最新功能与使用方式。
由 Toolifai 编辑维护
欢迎产品方补充截图、功能介绍与官方资料。更新和纠错由编辑审核后发布。
