登录 注册
图像、视频与音频数据分析与数据处理开发者工具 computer-visioncppmultimodalpythonroboticsrust
11,765
Stars
901
Forks
73
Watchers
1,238
Open Issues
Apache-2.0
许可证
Rust
语言
2022-04-08
创建时间
2026-11-11
最近更新

项目能做什么

用于多模态机器人数据可视化、查询与流式训练的工具。
来源:AI 基于仓库事实生成 · 内容以仓库实际 README 为准

使用说明 查看原始 README 原仓库文档

中文使用说明暂未生成。下面保留原仓库 README 摘录,命令与配置均以原文为准。
原始 README 摘录(英文原文,节选前 3000 字符)
<h3 align="center">
  <a href="https://www.rerun.io/">
    <img width="1000" height="200" alt="Banner with Rerun logo" src="https://static.rerun.io/d0f5443d4803cac65c73fcc064936c09f5e7f208_rerun_banner.png" />

  </a>
</h3>

<h3 align="center">
  <a href="https://pypi.org/project/rerun-sdk/">                        <img alt="PyPi"           src="https://img.shields.io/pypi/v/rerun-sdk.svg">                              </a>
  <a href="https://crates.io/crates/rerun">                             <img alt="crates.io"      src="https://img.shields.io/crates/v/rerun.svg">                                </a>
  <a href="https://github.com/rerun-io/rerun/blob/main/LICENSE-MIT">    <img alt="MIT"            src="https://img.shields.io/badge/license-MIT-blue.svg">                        </a>
  <a href="https://github.com/rerun-io/rerun/blob/main/LICENSE-APACHE"> <img alt="Apache"         src="https://img.shields.io/badge/license-Apache-blue.svg">                     </a>
  <a href="https://discord.gg/Gcm8BbTaAj">                              <img alt="Rerun Discord"  src="https://img.shields.io/discord/1062300748202921994?label=Rerun%20Discord"> </a>
</h3>

# The data layer for physical AI

Log, query, visualize, and stream to training on shared columnar storage built for multimodal data.

**What it does:** Rerun ingests multi-rate, multimodal data (images, point clouds, transforms, time series, joint states, video) from many sources and formats (robot logs, human-data rigs, sim, web video; MCAP, rrd, LeRobot). The built-in viewer renders everything in sync, in realtime: scrub episodes, compare sensors side-by-side, watch CV pipelines run live. The same data is queryable with [dataframes](https://rerun.io/docs/howto/query-and-transform/get-data-out) or SQL, and streams directly into training. Built in Rust on column-chunk storage purpose-built for multi-rate physical data. SDKs in Python, Rust, and C++.

**Quickstart:** `pip install rerun-sdk` — log your first multimodal data and see it in the viewer in under 2 minutes.

* [Run the Rerun Viewer in your browser](https://www.rerun.io/viewer)
* [Read about what Rerun is and who it is for](https://www.rerun.io/docs/overview/what-is-rerun)

### Use cases
- Ingest robot logs, egocentric/UMI rigs, sim, and web video into one substrate
- Run CV pipelines (SLAM, hand tracking, motion retargeting) as table edits
- Query raw, intermediate, and derived data with dataframes or SQL
- Visualize multi-rate, multimodal sequences across the pipeline
- Stream dataset mixes directly to training — no export jobs, no stale copies

### Data types
Multi-rate, multimodal, spatial: images, point clouds, time series, tensors, transforms, joint states, video. Preserved end-to-end.

### A short taste
```py
import rerun as rr  # pip install rerun-sdk

rr.init("rerun_example_app")

rr.spawn()  # Spawn a child process with a viewer and connect
# rr.save("recording.rrd")  # Stream all logs to disk
# rr.connect_grpc()  # Connect to a remo
阅读完整原文

商业机会分析 AI 生成

云端多模态机器人数据协作与回放平台 (SaaS/私有化)

产品构想基于 Rerun 的流式接收与 Web 端渲染能力,为机器人团队提供集中式传感器日志存储、时空切片索引与网页端协作审查工具。
核心功能远程数据流汇聚代理、时空跨度检索与剪辑、多用户权限隔离、嵌入式 Web Viewer 协作批注。
目标用户多分支研发的机器人公司、自动驾驶数据合规与评测团队。
难度/周期高 · 3-6个月 · 成本:高带宽与高吞吐对象存储服务器成本、中长周期研发成本
收费模式按席位数订阅制(SaaS)或企业年费私有化部署授权
竞争风险面对 Foxglove 等成熟竞品竞争;Rerun 官方商业化版本可能会直接覆盖该场景(推测)。
依据 数据支持的判断

工业仿真与 ROS 体系深度集成连接器套件

产品构想开发针对 NVIDIA Isaac Sim、Gazebo、CARLA 以及 ROS2/MCAP/CAN 总线协议的开箱即用高性能转换与同步插件。
核心功能低延迟多通道数据转码、零代码配置的 ROS2 节点桥接、仿真物理事件自动对齐标记。
目标用户使用复杂仿真平台或标准 ROS 栈进行算法验证的工程师。
难度/周期中 · 1-2个月 · 成本:开发环境与测试硬件投入
收费模式商业授权(高级插件商用许可)、企业定制系统集成咨询费
竞争风险开源社区可能快速产出免费的替代集成脚本;仿真器官方可能提供原生支持。
依据 已验证事实

具身智能多模态训练数据清洗与切片标注工作站

产品构想面向 VLA(视觉-语言-动作)大模型训练需求,基于 Rerun 的可视化能力开发专用数据质量筛查、失败轨迹剪切与同步标注工具。
核心功能异常轨迹自动过滤算法、交互式多视角动作打标、导出符合主流模型训练格式(如 HDF5/WebDataset)。
目标用户具身智能创业团队、高校机器人实验室、数据标注外包服务商。
难度/周期中高 · 2-3个月 · 成本:算力成本与开发成本
收费模式按数据处理量(GB/时长)计费或软件席位购买
竞争风险具身智能训练数据标准尚未定型,工具需求可能随模型架构变迁而变动。
依据 尚需验证的假设
AI 基于仓库公开数据分析生成,含推测成分,不构成收益承诺。
报告会保存到 个人中心

竞品与相似项目 GitHub Search 真实检索

项目中文简介Stars语言
opencv/opencv 中文介绍暂未生成
Open Source Computer Vision Library
91,525 C++
Developer-Y/cs-video-courses 中文介绍暂未生成
List of Computer Science courses with video lectures.
84,804 -
d2l-ai/d2l-zh 中文介绍暂未生成
《动手学深度学习》:面向中文读者、能运行、可讨论。中英文版被70多个国家的500多所大学用于教学。
82,442 Python
rohitg00/ai-engineering-from-scratch 中文介绍暂未生成
Learn AI Engineering! Learn it. Build it. Ship it for others
78,270 Python
microsoft/AI-For-Beginners 中文介绍暂未生成
12 Weeks, 24 Lessons, AI for All!
70,698 Jupyter Notebook
ultralytics/ultralytics 中文介绍暂未生成
Ultralytics YOLO27, YOLO26, YOLO11, YOLOv8 — object detectio
63,284 Python
以上为通过 GitHub 官方 Search API 检索的相似项目,功能差异与优劣势需进一步人工确认,配置 AI 后可生成对比分析。

项目优势与风险

技术成熟度创建于 2022-04-08,近 30 天仍在推送,发布过 93 个 Release
社区活跃Star 11,765 / Fork 901 / Issue 1,238(数据支持,可自行核实)
许可证Apache-2.0
主要风险上游项目方向可能变化;同赛道竞争者较多(见竞品表);热度与需求不完全等价

安装与使用

快速开始(以仓库 README 为准)
git clone https://github.com/rerun-io/rerun.git
cd rerun
# 请阅读仓库 README 获取确切安装步骤(依赖、配置、启动命令)
阅读原仓库文档
术语说明:Docker=应用容器(把程序和依赖打包运行);API Key=调用外部服务的密钥;Git Clone=把仓库代码下载到本地。常见错误:API Key 未配置 / 端口占用 / 数据库连接失败,多数项目在 README 的 Troubleshooting 章节有说明。