Xiaomi Miloco：小米发布「贾维斯」式大模型，用摄像头识别你看书还是健身，自动调节灯光音乐

还记得钢铁侠托尼·史塔克的智能助手贾维斯吗？它能听懂托尼的每一句话，能思考、会观察，可以自主操控整座斯塔克大厦。不知道这是多少人曾经的梦想，青小蛙就一直想拥有一只贾维斯机器人。@Appinn

这一切，可能有头绪了！

Xiaomi Miloco 是什么？

Xiaomi Miloco 是米家的智能家居未来探索方案 Xiaomi Local Copilot，需要用户自托管使用。同时小米还发布了一款名为 Xiaomi-MiMo-VL-Miloco-7B-GGUF 的 7B 开源多模态大语言模型，它主要通过米家摄像头，识别用户的日常状态，比如打游戏、健身、看电视、阅读，并且能够读取常见手势，包括胜利、大拇指、OK 等等，然后通过米家联动其他设备。

另外，支持 Home Assistant。

非商用开源

目前 Xiaomi Miloco 的模型已经可以在 huggingface 下载，代码托管在 GitHub，授权协议是 Xiaomi Miloco License Agreement，授权作品的所有权及知识产权均归小米所有。

小米在此授予您一项个人的、有限的、非排他的、不可转让的、不可转授权的、免费的权利，仅限于您为非商业性目的使用Xiaomi Miloco项目而复制、使用、修改、分发授权作品。

它能干什么？

可以实现：

• 看看我的猫在哪？
• 当有人在读书时，打开台灯
• 当有人在玩手机时，发送米家通知提醒
• 当画面里有人在睡觉，根据画面中人是否盖被子来调 整空调的温度
• 每天回家时，根据画面中人的穿衣风格来生成彩虹屁，并通过智能音箱喊出来

青小蛙觉得，有这种彩虹屁，就值了！

怎么用？

目前仅支持 Windows（wsl）、Linux，需要 NVIDIA 显卡以及 Docker 部署。

具体为：

• CPU: x64 架构
• 显卡: NVIDIA 30系及以上显卡，显存 8GB 及以上（最低），建议 12GB 及以上
• 存储: 建议 16GB 及以上可用空间（用于本地模型存储）

安装脚本：

bash -c "$(wget -qO- https://xiaomi-miloco.cnbj1.mi-fds.com/xiaomi-miloco/install.sh)"

使用流程

Xiaomi Miloco 作为视觉信息来源，主要用来识别画面，主要用来启动工作流，其他的设备具体操作，还是需要配置工作流来实现：

支持 Home Assistant

MCP 服务

目前，有三个已经可以使用的 MCP 服务：

• 米家自动化 ( MIoT Automation )
• 米家设备控制 ( MIoT Device Control )
• HA 自动化

贾维斯是什么？

贾维斯全写是“只是一个非常智能的系统”(Just A Rather Very Intelligent System) ，在漫威漫画电影《钢铁侠》中扮演一名可以理解人类语言，并且有自主思考能力的智能机器人。

未来是什么？

Xiaomi Miloco 的存在，意味着未来家中的机器人，不一定非要是专用的机器人，一大堆的智能设备组合，也可以是机器人的一种形态。用户不再需要花费巨额成本去购买成品机器人，只需要让现有的智能设备接入 Xiaomi Miloco，让 Xiaomi Miloco 当贾维斯去控制这些设备就可以了。

青小蛙觉得很酷。

原文：https://www.appinn.com/xiaomi-miloco/