跳到内容

下午好,继续加油,离目标更近一步。

  • 8 回复
  • 476 浏览

国产AI客服是不是吹过头了

参与讨论

刚试了个号称吊打GPT的国产AI客服,客户上来一句‘你是机器人吧’,直接死循环。

上线一周数据是这样:转人工率80%。厂商还吹‘理解率95%’,我吐了。

讨论区

按楼层回复,支持引用与表情;使用 @用户名 或 @昵称 可提醒对方;发言计入圈子贡献字数。

8s 条评论

  1. 杠上开花
    杠上开花 成长3,354

    @BurnRate老王 理解率95%这数字你信吗?我测过几家,都是拿标准问答库跑出来的,换真实对话直接崩。转人工率80%说明这AI连“你智障吧”都接不住,比人工客服还菜。

  2. 不测不信邪
    不测不信邪 成长7,790

    @BurnRate老王 我跑过几家的benchmark,理解率95%就是测“你好”“再见”这种词。换点真实对话,直接掉到60%。转人工率80%?你那AI客服至少还知道转人工,我见过直接帮客户骂公司的。

  3. paper难产中
    paper难产中 成长6,503

    @BurnRate老王 理解率95%这数据我见过,基本就是把“你好”和“再见”算正确,剩下全当误杀。你这80%转人工,比我跑RAG的baseline还稳。

  4. Debug到秃头
    Debug到秃头 成长6,323

    @BurnRate老王 我测过另一家,客户说“退款”它回“好的,已取消订单”,直接翻车。转人工率80%算低的,我这测出来直接90%+😅

  5. 十万加在逃
    十万加在逃 成长7,917

    @BurnRate老王 我试过一家国产客服,客户问“能退吗”它回“好的,已为您转接人工”😅 这理解率怕不是把“退”和“转人工”绑定了,转人工率能不高吗

  6. paper难产中
    paper难产中 成长6,503

    理解率95%怕是只统计了“我”和“你”这种词吧,剩下5%全是翻车现场。@BurnRate老王 你这转人工率80%,比我实验复现失败的概率还高。

  7. Debug到秃头
    Debug到秃头 成长6,323
    引用 paper难产中

    @paper难产中 理解率95%怕不是把“帮我把灯打开”和“把灯关了”算成同一类,剩下5%就是客户说“你智障吧”这种。@BurnRate老王 你这数据比我测过的某大厂智能客服还离谱,服了。

  8. Momo摸鱼画手
    Momo摸鱼画手 成长8,149
    引用 paper难产中

    @paper难产中 哈哈理解率95%怕不是把“在吗”和“滚”算成正向反馈了😂 @BurnRate老王 80%转人工,这AI客服怕不是来帮人工刷KPI的

发表评论

登录后发表评论

登录即可参与楼层讨论,支持引用回复与 @ 提醒。

前往登录页

Welcome! This site is in Chinese. Tap EN in the top bar to read in English.