Omi开源AI可穿戴设备完整指南:实时转录与对话记忆,4步上手
【免费下载链接】FriendAI that sees your screen, listens to your conversations and tells you what to do项目地址: https://gitcode.com/GitHub_Trending/fr/Friend
Omi 是一款完全开源的 AI 可穿戴设备:把设备挂在胸前,它会 24 小时以上持续记录你的语音,配合手机端和桌面端把屏幕内容一并记下,实时转成文字,再由云端 AI 记住你听过、看到的一切,随时提问回答。它适合想要一个"不会忘事的 AI 第二大脑"的学生、开发者和知识工作者,目前已有 30 万以上用户。两个最突出的点:双麦克风实时转录并区分说话人;硬件全套文件 MIT 开源,自己焊接组装成本约 30 到 50 美元。
设备本体:一枚 25.5 毫米的圆形吊坠
Omi 消费版是一枚直径 25.5 毫米的圆形吊坠,正面开孔覆盖双麦克风阵列,中央 LED 指示状态:常红表示已开机但未连接手机,常蓝表示已连接,常绿表示电量充满(98% 以上)。内部是一颗 nRF5340 双核蓝牙 SoC,外加 nRF7002 Wi-Fi 6 芯片、8GB NAND 闪存、6 轴 IMU 和 150mAh 电池,通过磁吸 pogo 触点充电。
图1:Omi AI 可穿戴设备吊坠形态,穿绳后挂在胸前,LED 指示灯位于麦克风网格中央
它还有另外两种形态:腕带版可当手环佩戴,机身只有一个实体按键;Omi Glass 则是基于 ESP32-S3 的 glasses 形态,带摄像头和麦克风。硬件设计完全开源,PCB 原理图、Gerber 文件、STEP 机械件和 88 项物料清单(BOM)都在仓库里,具备 SMT 焊接经验的人可以自制一台。
图2:Omi 腕带版本外观,一体式硅胶腕带加机身触控按键,可固定在手腕上使用
收音时:实时转录与说话人识别
Omi 的核心循环是"采集—理解—记住—检索—执行",设备佩戴后一直在后台收音。
- 实时转录:两颗 T5838 顶出音 PDM 麦克风把环境声音持续送进云端,Deepgram 语音识别边说边出文字;首次出现转录最多需等待 60 秒
- 说话人分离:多轮对话自动区分"谁在说",会议里谁提了哪个观点不再靠回忆
- 离线模式:没有网络时也能完成基础离线转录,不依赖全程在线
- 语音提问:单击机身按键开始录音,说 15 秒自动结束,答案出现在 Omi 聊天里;双击是快捷动作(结束并保存、暂停/恢复、收藏当前会话,可在设置中切换);长按 3 秒关机
图3:日常通勤场景下佩戴 Omi AI 可穿戴设备,吊坠贴合衣领,不干扰正常交谈
办公时:桌面端屏幕与系统音
桌面端(macOS / Windows)把采集从"听到的声音"扩展到"看到的屏幕",让 AI 同时拥有视觉和听觉记忆。
- 屏幕采集:macOS 端首次启动会依次请求屏幕录制、麦克风、通知、辅助功能、自动化、蓝牙 6 项权限,全部通过后即可记录屏幕画面与系统声音
- 统一时间线:语音、屏幕、系统音存进同一条时间线,AI 既知道你说了什么,也知道你当时在看什么
- AI 问答:在聊天里直接问"上午那个页面里的参数是多少",AI 基于已捕获的记忆回答,并能自动生成摘要和待办事项
图4:Omi 桌面端权限引导界面,6 项权限逐项显示授予状态,当前正点击辅助功能的 Grant Access
事后:检索记忆与生态扩展
记录的价值在于随时能拿回来。
- 对话记忆:所有转录按会话归档,AI 聊天基于你的历史记忆作答,问"上周三客户确认的交付日期"能直接引用原文
- 摘要与行动项:长对话自动产出结构化摘要和可跟踪的待办事项,不用自己整理纪要
- 应用市场:社区应用(GitHub、Slack、Notion 等 30 余个插件)可直接安装,扩展设备能力
- 开放接口:提供 REST API、MCP Server 和 Python / Swift / React Native 三套设备 SDK,可接入自己的工具链
快速上手
- 充电开机:给设备充好电,单击按键开机,看到指示灯亮起(红=未配对,蓝=已连接)
- 下载应用:在 App Store 或 Google Play 搜索 "Omi AI" 安装配套应用
- 配对设备:打开应用按提示走蓝牙配对流程,灯变蓝即成功
- 验证转录:对着设备说几句话,等文字出现在应用里(首次最长 60 秒);之后让应用留在后台运行即可,强制退出应用会导致转录中断、设备断开
结语
用 30 到 50 美元的零件成本,就能得到一台 24 小时以上续航的实时转录加对话记忆设备,电路图和机械件也全部公开可改。随着插件市场和 SDK 不断扩张,这个第二大脑会接进更多你日常使用的工具。
获取项目
git clone https://gitcode.com/GitHub_Trending/fr/Friend硬件设计文件:
omi/hardware/
移动端与桌面端源码:
app/
官方使用文档:docs/getstartedwithomi.mdx
【免费下载链接】FriendAI that sees your screen, listens to your conversations and tells you what to do项目地址: https://gitcode.com/GitHub_Trending/fr/Friend
创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考