为了测试钉钉「魔法棒」学习文档长度的上限,我们先后给它输入了《三体 I》(约 20 万字)和《三体全集》(约 90 万字),发现它可以顺利学习《三体 I》,但没办法把《三体》全集一次学习下来。几次测下来我们猜测,钉钉「魔法棒」现阶段可以学习的中文文档长度上限在二十到三十万字左右。
总结
从测评结果来看,钉钉「魔法棒」的使用体验基本符合 4 月份录屏 demo 和现场演示给人的预期,甚至问答机器人、摘要的效果要超出当时的演示。这超出我们的预料,毕竟原以为大家或多或少都会在宣传上夸大自己的能力。它通过自然语言交互和智能生成技术,为各行各业的从业者提供了强大的工作助手。无论是文档编辑、聊天摘要、应用生成还是问答机器人,「魔法棒」都展现出了出色的实用性和提升工作效率的潜力。
总的来讲,整体测评感受是钉钉斜杠已经差不多可上线对客。当然,由于目前仍处在开发阶段,钉钉「魔法棒」的部分功能我们现在还无法体验,比如群摘要自动生成待办。此外,部分已开放的功能在技术和算法上,还存在较大的提升空间,比如文生图的生成效果可能还不太稳定。
这里也要提一下,钉钉斜杠“/”底层是对接的阿里云通义千问等大模型,我们从魔法棒的测评中,也发现在过去一个月,通义大模型的能力和生成效果提升了不少。这说明大模型的学习速度挺快,允许它们成长一段时间。
另外,在咨询钉钉内部人士后我们了解到,他们目前正在紧锣密鼓地迭代钉钉「魔法棒」的更多功能和数据层的系统设计,未来将带给大家更多惊喜,让各行各业的从业者都用上这一高效的生产力工具。