最近在折腾家里的智能家居,想把 米家 、海尔 的都集成到一起,同时做一个 真正的AI智能管家:需要能理解对话、有记忆、能搜索、能控制智能家居。
初期考虑便宜的语音输入设备,大概100多块钱,但是样子不好看。 查找了一些资料发现了 小爱音箱Pro 可以刷机接入自定义的 AI大模型,200多块钱可以解决 米家mesh网关 以及 语音输入、输出设备,比较划算。
大致结构是这样的:
小爱音箱里 刷入一个监听程序 – 实时监控语音(保留小爱的原生能力,只是多加了一个AI) – mini主机运行着 server 端,处理 语音识别 并转文字 – hermes 接入 deepseek 处理输入的文字-- 控制 ha – 文字传回小爱音箱并播放语音
为了提升体验,做了很多优化;
1、语音识别提速
2、使用小爱 tts 合成语音(免费)
3、大模型输出时,边输出文字、边合成语音、边播放,体验很不错。
4、模型选用的 deepseek flash ,输出比较快,减少等待时间。
5、新闻播放时处理 小爱tts 敏感词检查的问题
整体上语音输出体验就比 小爱原生语音慢 0.x 秒。但是整体功能上比小爱强很多。
Home Assitant 里同步小米账号,就能使用 hermes 控制 米家智能家居了。
对着小米音箱 说 “你好,小七”,就能唤醒自定义AI,然后就体验根人对话的感觉,同时在聊天中调整家里的设备。
现在你就拥有 AI管家、个人助理啦!
【小爱音箱 + hermes agent,让真正的 AI管家 进入你家】 https://www.bilibili.com/video/BV1hhao6cEfq/?share_source=copy_web&vd_source=9550a012bf30d7adb10982a6864c651c