EgoLife

EgoLife是聚焦长期多模态日常生活场景的AI研究项目平台，核心定位是为长期上下文理解、多视角行为分析等AI方向的研究提供真实数据集与技术框架支撑。平台收录六名志愿者一周共享生活的50小时标注数据，涵盖日常起居、协作办公、休闲社交等多类真实场景，内置EgoRAG检索增强生成框架，支持多模态数据的长期关联查询与上下文推理。目标用户包括AI领域研究人员、计算机视觉方向开发者、人机交互研究学者，可用于日常行为预测模型训练、具身智能系统开发、多模态大模型性能测试等多种研究场景。

主要功能

• 多模态数据集：平台提供的数据集包含视频、视线追踪、IMU运动传感三类数据，所有数据均来自志愿者佩戴的可穿戴设备与固定视角摄像头，覆盖做饭、办公、聚会、运动等12类日常场景，研究者可按场景、时间、参与人员维度筛选下载，满足多模态模型训练对数据多样性的需求。
• 多视角数据标注：平台对同一场景下的多摄像头采集数据进行同步标注，既包含第一人称视角的视线焦点、动作意图标注，也包含第三人称视角的全局行为、人际互动标注，标注精度达到帧级别，研究者可直接调用标注数据开展多视角融合的行为分析研究，无需自行完成标注工作。
• EgoRAG框架支持：平台开源自研的EgoRAG检索增强生成框架，支持针对长达一周的连续生活数据进行跨时间维度的信息检索与上下文推理，研究者输入包含时间、人物、行为的查询指令后，框架可快速匹配对应片段并生成关联上下文的推理结果，降低长期多模态理解任务的开发门槛。
• 数据筛选工具：平台内置数据筛选功能，支持研究者按场景类型、数据模态、参与人数、时间长度等多个维度过滤数据集，也支持自定义时间段截取数据片段，筛选后的数据集可直接生成下载链接，帮助研究者快速获取符合自身研究方向的目标数据，减少无关数据的处理成本。
• 基准测试任务：平台设置日常行为预测、社交意图识别、长期记忆查询三类基准测试任务，配套统一的评估指标与测试集，研究者可将自己的模型在基准任务上运行，平台自动生成性能评估报告，方便与同领域其他模型的效果进行横向对比，展示研究成果的性能表现。
• 研究案例展示：平台收录基于EgoLife数据集完成的各类研究成果案例，包含论文链接、模型代码、效果演示视频等内容，研究者可参考已有的研究思路与技术方案，结合自身研究方向开展延伸探索，也可提交自己的研究成果到平台进行展示，促进领域内的学术交流。

怎么使用

1. 第一步，打开EgoLife官方网站，在首页导航栏点击「数据集」板块，浏览数据集的覆盖场景、数据类型、标注规则等基础信息，确认数据集符合自身研究需求。第二步，点击页面中的注册按钮，填写研究机构、研究方向、联系方式等基本信息提交申请，等待平台审核通过后获取账号登录权限。第三步，登录账号后进入数据筛选页面，根据自身研究需要选择对应的场景类型、数据模态、时间范围等筛选条件，生成符合需求的目标数据子集。第四步，若需要使用EgoRAG框架，可进入「技术框架」板块，下载框架源代码与部署文档，按照文档指引完成本地环境的部署与配置。第五步，完成数据下载或框架部署后，可进入「基准测试」板块下载测试集与评估工具，开展模型训练与性能测试，也可在「研究案例」板块参考相关成果拓展研究思路。

适合什么人群

• AI多模态研究人员（日常场景理解模型训练）
• 计算机视觉开发者（多视角行为分析算法研发）
• 具身智能研究者（具身系统长期记忆模块开发）
• 人机交互学者（自然人机交互模式研究）
• 大模型研发团队（多模态大模型长期上下文能力测试）
• 社会学研究者（群体日常行为模式分析）

总结

这是一个专注于真实日常生活多模态数据采集与长期AI理解研究的专业平台，和普通的公开数据集平台不同，它的所有数据都来自真实的群体长期共同生活场景，而非实验室模拟场景，数据中包含的人际互动、跨时间行为关联等信息，是很多现有公开数据集缺失的内容。其推出的EgoRAG框架，专门针对跨天级别的长期上下文理解任务设计，解决了传统RAG框架在处理超长连续多模态数据时检索精度不足、上下文关联混乱的问题。对于研究日常场景AI应用、具身智能、多模态大模型的从业者来说，该平台提供的数据集和技术框架可以很好地弥补现有研究资源的不足，尤其是需要测试模型在真实复杂生活场景下的长期表现时，该平台的基准测试任务可以提供较为客观的评估依据。平台还配套了完整的研究案例与工具链，研究者不需要额外花费大量时间做数据预处理与框架适配，可以将更多精力放在核心算法的研发上。

价格与免费额度

EgoLife目前面向学术研究场景提供免费使用权限，学术用户完成身份审核后即可免费下载全量数据集、获取EgoRAG框架源代码与基准测试工具，免费版无功能限制，仅要求研究成果中注明数据来源。商业用途需要向平台提交申请，根据使用场景、数据用量、商业项目规模协商授权费用，目前暂未设置公开的标准化付费套餐。建议学术研究人员优先使用免费版资源，商业机构可先联系平台确认授权规则后再开展相关工作。

优点与不足

能帮你做的 8 件事

1. 01多模态数据集
2. 02多视角数据标注
3. 03EgoRAG框架支持
4. 04数据筛选工具
5. 05多模态数据集场景的常用方案
6. 06AI研究平台场景的常用方案
7. 07AI多模态研究人员（日常场景理解模型训练）的日常效率工具
8. 08先用免费额度验证需求再决定付费

更新历史

• 2026.06.14EgoLife 收录进 Toolifai 目录
• 页面资料核验与信息更新

常见问题