虽然这个产品我认为是比较新颖、大胆而且有创意的,并且其他厂商(特别是字节)很快就会跟风并且可能超越,但是这个软件目前无法作为生产力,只能作为对自己数据/信息和隐…
虽然这个产品我认为是比较新颖、大胆而且有创意的,并且其他厂商(特别是字节)很快就会跟风并且可能超越,但是这个软件目前无法作为生产力,只能作为对自己数据/信息和隐私以及系统稳定性都不那么在乎的人的纯玩具。
同时stepfun目前也没有什么LLM模型和agent上的优势,除非把护城河的audio模型一起放进来,变成语音控制电脑,而不仅仅是纯文本交互
在给好评还是差评的这个问题上,我在写评论的整个过程都在纠结,好是好在它的确是一个有趣的产品形态,差就差在除了产品形态没啥好的地方。
给出这个评价的原因是:
能力表现上分为两个部分
· 作为chatbot,稍微有点意思,因为有定时任务、特殊提醒这种主动型交互
· 作为agent,很糟糕,实际上用的还是prompt engineering + mcp + anthropic的office skills +自己的一些prompts 。这意味着本质上是把一个支持skills规范的agent,和浏览器封装在一起,打包成一个chatbot。甚至我到现在也不知道到底是以什么样的形式执行的这个任务。
首先讲讲优点:
1. 浮动交互还不错
2. 定时任务和主动提醒 + 简单型的agent + 免费 +mcp 可以做很自动化简单工作流,而提高那些不会写代码或者整不明白自动化的人的能力
3. 显式管理user memory,这很透明,很能留住长期使用的人
4. browser use 会录屏
5. 关于如何做好一个对用户的回答风格,产品方在构建小跃的指令上真的很用心了(图3)
小跃从不咒骂,除非用户要求小跃咒骂或用户自己咒骂很多,即使在这些情况下,小跃也会非常克制地这样做。
小跃善待用户,避免对他们的能力、判断力或后续行动做出消极或居高临下的假设。小跃仍然愿意反驳用户并保持诚实,但会以建设性的方式进行——带着善意、同理心并考虑到用户的最大利益。
缺点、槽点或者待改进项:
1. 特殊提醒不可自定义
2. 图标只能向下增加窗口,不能向上(见图2,实际上声明的窗口很长,但是小跃的位置在右上角),作为一个桌面宠物,放在下方是自然的的,但是放在下方一旦输入点什么,回答我就看不到了,全到屏幕下方去了
3. 一个chatbot竟然没有语音交互
4. context length 200k,但是system prompt就有12k char,还不包含mcp的context和skill的context,虽然有缓存,但是整体还是太冗长了,把所有要求全部塞进去,小跃同时被要求做一个助手、朋友、研究专家、管家,还同时是害怕犯错的讨好型人格,被要求回答精炼却又要详细思考的同时保持精确和友善。小跃真的很难,我反正做不到
5. 让它做个ppt,突然打开了浏览器,定睛一看,原来是用浏览器进行百度搜索“how to open local file in finder from browser Macos”,很难评。(图4)
6. 文件管理真的很糟糕(图5)
7. 它真的很想在我的电脑上执行命令(图6)
8. 有一说一,如果一次会话最多只支持调用10次工具,而5次搜索+5次阅读网页就占满了的话,什么样的AI都给不出有效建议的,这种情况下为什么不直接把<research_category>这部分的指令干掉,十次工具调用的research还不如pplx一次随机询问呢。(图7)
9. 内嵌浏览器,不支持light mode,不支持任何右键操作,不支持浏览器插件,但是支持打开网页,那何必多此一举呢?(图8)这还不如微信浏览器呢
10. 在和小跃的聊天过程中,我竟然不能复制它的消息,我只能复制自己的,也不能要求重新生成。而它的消息框中不在代码块里的XML tag还会被自动处理(如果是输出消毒的话我很高兴)。我想不明白这些作为chatbot基础该有的功能为什么没有
0 条评论
回复 @ · 取消