现场体验过Violoop之后,关于AI助手该长什么样、能做些什么、能力极限在哪里的疑问,或许会变得清晰一些。这款巴掌大小的硬件即插即用,V4版本通过一根Type-C线连接电脑,不挤占电脑的CPU或GPU资源。它能实时读取屏幕上的全局信息,获得用户全部上下文,从而实现主动式的AI助手。

这款巴掌大的硬件想当你的主动式AI助手

据极客公园了解,Violoop在半年内完成了亿元级天使轮及Pre-A轮融资,投资方包括联想创投、中金保时捷、蓝驰创投、元生资本、启赋资本和Zero2IPO Ventures。公司CEO何佳霖是连续创业者,毕业于UC San Diego计算机专业,曾入选YC创业营;CTO King Zhu在MIT的EECS专业用3.5年完成本硕,曾在微软的Xbox、HoloLens、Surface等业务线担任核心工程师。

主动式AI如何工作

以微信中同事索要简历为例:用户不需要切换桌面翻文件夹,屏幕角落会自动弹出一个小框,询问是否帮忙发送某人的简历。用户按一下键盘上的1,AI便会打开文件夹、找到文件、把简历贴进对话框。整个过程无需写提示词,也不用打开任何AI软件。这个硬件的工作方式分为三步:第一步“看”,通过内置的端侧模型实时读取屏幕画面,理解用户正在做什么;第二步“判断”,在合适的时机主动弹出选项;第三步“动手”,通过模拟键盘和鼠标操作电脑软件。由于微信、剪映这类软件没有开放API,这种外接硬件的方式能做到应用层零检测。

何佳霖还演示了其他场景:有人让用户补充地址,AI从记忆中翻出地址送到手边;有人约线上会议,AI查看日历并生成会议链接;处理邮件里的报价单时,AI直接控制软件做完整套工作,把回复内容和报价单贴进对话框,但“发送”动作会留给用户自己按。还有一些用户自己探索出的用法:当AI发现用户在浏览商品时,会主动询问是否要帮忙比价,征得同意后默默比完并返回结果。

为什么做成独立硬件

这些功能能否用纯AI软件实现?何佳霖认为,除了部分软件没有API、只能靠外接硬件读屏获取信息之外,速度是关键因素。主动式AI需要在用户读完成一句话的当口就把准备工作送到手边,慢一秒体验就会受到影响。何佳霖测算,用云端最强的模型,即使网络稳定,信息上传再返回也要3.5秒以上。他个人的体感是:AI反馈时间在1.5秒以内可用,1秒以内体验完善,超过3秒就会失去意义。