图片来源: Google下周举行硬件发表会前夕，于昨（5）日宣布为Nest系列摄影机、智慧音箱、显示器等Google Home装置加入Gemini多模态模型能力。
Google已为Nest Camera加入AI功能，像是简单的动作侦测、人脸辨识或封包侦测，不过过去Nest Camera尚无法真正理解真实环境发生的事。在最新进展下，Nest Camera使用的AI模型已升级到Gemini多模态模型。随着用户使用一段时间，AI模型理解能力将从特定事物（如动作、人脸和封包等）扩及到更多种，并说出最重要的意义。结合Gemini模型的Google Home App可在用户观看Nest Camera拍摄的影片时，为影片产出文字描述或图说，像是「狗在花园中挖洞」。
Google Home App还能根据用户输入的问题搜寻目标。例如当用户问脚踏车是否停在院子车道上，Home App能搜寻相机历史纪录，只提供最相关事件清单，并给出摘要资讯。
图片来源／Google
Google也为Home平台加入自动化能力。Home App和自动化脚本编辑器（script editor）现在都能支援100多种家用自动化指令（如开／关、暂停、调暗／调亮），允许用户设定、串连家中联网装置动作，例如说出或输入「锁上门、关闭浴室所有电源」。
第二，Nest智慧音箱与显示器内建的Google Assistant也获得Gemini模型加持。首先，这些装置以LLM强化媒体播放或计时设定，今年内Google还会利用Gemini模型为Google Assistant加入不同腔调、类型的新声音，并提升其理解能力，使Assistant能接受自然语言提问，和用户产生更流畅的双向对话，或提供更有用的建议。
这些新AI加持的功能将在今年下半，先以公众测试版提供给Nest Aware订阅用户，预料会逐步增加功能，并开放更多用户使用。
