钉钉“魔法棒”实测来了!生成文案、拍照生成程序、打工人不需再“爬楼”

作者 | 邓咏仪

编辑 | 苏建勋

ChatGPTAI技术再度回到全球焦点中心,引起人们对技术进展的又一波关注——这固然非常意义深远,但对无数坐在电脑面前的打工人而言,大家的诉求其实很简单:什么时候word/ppt能懂事一些,自己就把工作完成了?

这也是3月中旬,微软重磅推出全新Copilot后,真正引起巨大关注原因所在——Copilot穿梭在文档、PPT、数据库中,自动生成营销文案、优化PPT格式、连通企业内部系统,展现出AI的强大潜力。

不过,微软Copilot现在还没有在Office中正式上线这些能力。但国内用户很快就可以从国内应用中尝试到类似功能了——5月31日,钉钉“魔法棒”的阶段性成果逐步亮相,斜杠“/”功能已开始邀请用户测试体验。

钉钉“魔法棒”是钉钉在今年4月18日发布的AI智能助手。在发布会上,当时钉钉就以“魔法棒”为例,实景演示了四个具备大模型能力的应用层场景,包括群聊、文档、视频会议和应用开发四个应用场景。此后,多项能力已在钉钉和阿里巴巴内部进行测试。

借程序员的那句老话:\”Talk is cheap, show me the code. \”接入AI后的实际效果到底如何?智能涌现也成为智能钉钉的首批共创伙伴,获得了内测资格,为大家提前一探究竟。

本次钉钉面向企业用户定向邀测的产品,内测了多个场景的AI能力,如钉钉群聊、文档及应用开发等,所涉及能力包含文生文、文生图、摘要提取和应用生成等生成式 AI 能力:

  • IM:群消息摘要、答疑机器人
  • 文档:文生文、文生图、文生表格(PC端)
  • 应用开发:对话生成投票酷应用、拍照生成应用
  • 视频会议:会议闪记摘要(PC端)

一键生成投票、群消息摘要,打工人无需爬楼

在钉钉中调用AI能力,操作很简单,只需输入“/”,聊天框中就会自动弹出调用框,内置多种指令。

钉钉“魔法棒”实测来了!生成文案、拍照生成程序、打工人不需再“爬楼”

用/调用功能

钉钉已经内置了一些常用的指令,用户可以用指令进行简单的设置,比如用“/”直接拉新人进群、将本对话框置顶、消息免打扰等等。

从交互角度,这对用户十分友好。对不善操作app的人来说,再也不需要摸索各类按钮在什么位置了,一个“/”解决所有问题。

另一个实实在在提升团队沟通效率的功能,是自动摘要。

若是团队规模稍微大一点,工作群中动辄99 的信息想必会让不少人感到心累——不知道要下拉多久才能看完,从大量对话中找出真正重要的信息。

但在钉钉魔法棒搭载自动摘要功能后,用户同样只需在对话框中用“/”唤起摘要功能,AI助手即可对群聊中的内容快速总结中心思想。

钉钉“魔法棒”实测来了!生成文案、拍照生成程序、打工人不需再“爬楼”

对群聊中关于功能相关的对话,钉钉智能助手做如下总结

从总结质量来看,如果是纯文字类对话,AI助手总结的中心意思还算比较准确。但智能涌现尝试在一个数十人大群中再次生成摘要,由于对话夹杂着图片、文件等文档,AI助手生成的摘要,就只有群中对话的一部分,无法生成完整摘要——多模态内容理解能力还需加强。

在自动摘要的基础上,钉钉AI助手甚至可以在钉钉群聊中创建一个答疑机器人,具备自动学习能力,在群里充当“客服”角色。

用户只需喂给它多篇文档,让它自动新增、更新问答内容,它就可以自动学习,生成相对应的问题和答案。创建完答疑机器人之后,每一位群成员在群里都可以@机器人,向它提问,得到智能回复。

一个草图就可生成应用,不再求开发

此次内测上线的一个重要功能是——用文字或者图片生成应用!

在过去,公司里的一个业务人员如果需要开发一个应用或者提需求,往往需要找开发团队,协作很长一段时间,才能完成一个功能或者应用的开发。

后来,低代码/无代码的出现解决了部分问题——通过托拉拽,内置应用模板等,让不懂代码或是基础较弱的业务人员,也能开发简单应用。但总体而言,用低代码生成应用,还是会有不少操作步骤。

但现在,集成了AI大模型能力的“/”,把开发应用的门槛继续拉到最低。用户只需要在AI助手对话框中,用文字或者拍照描述自己想要生成的统计表单、应用等,AI助手就会调用钉钉低代码平台“宜搭”的能力,识别图案/文字,并且生成相应的应用。

钉钉“魔法棒”实测来了!生成文案、拍照生成程序、打工人不需再“爬楼”

拍照生成应用

在实测中,对简单的投票统计、调查问卷的文字生成指令,钉钉“魔法棒”都在数秒内就生成完毕,若是拍照识别则需要十余秒,且识别结果都算比较准确。

不过,目前这项功能对Prompt(提示词)的格式和描述还是有一定要求,用户如果需要对生成出来的程序进行某个部分的修改,就必须描述准确(比如,需要说明对表格“某一栏”,而不是“某一列”进行删除,输入准确的名称和符号),要不然“魔法棒”可能会有点难以识别,或是丢掉某些信息点。

钉钉“魔法棒”实测来了!生成文案、拍照生成程序、打工人不需再“爬楼”

可能要对指令进行一些调整,才能完成修改动作

目前,用户能够用钉钉生成简易的表单应用,如NPS满意度调研、社团招新报名、付费活动报名、故障登记表等等。

钉钉宜搭也内置了不少行业模版,用户也可以简单生成更多的复杂的行业化应用,比如售后工单系统、制造业巡检系统、电商订单管理系统等。

生成文字、表格、图片,内容能力进一步加强

对无数打工人而言,对AI大模型最直接的需求,就是找到创作类工作的灵感。

钉钉同样将魔法棒“/”内置到钉钉文档中,用户在协作、创作、改写、总结、润色、翻译等环节可以随时调用AI能力。

钉钉文档的AI能力基于通义大模型打造,能提供文生文、文生图、文生表、智能摘要等能功能,覆盖用户大部分文档使用场景。

在我们的实际使用过程中,钉钉智能助手的响应速度相当快,大部分都是几秒钟后就可以开始输出答案。

我们让AI助手写一段关于夏日空调的营销文案,回答是这样的:

钉钉“魔法棒”实测来了!生成文案、拍照生成程序、打工人不需再“爬楼”

夏日空调营销文案

如果单纯为了寻找灵感或者一个模版,钉钉AI助手已经表现不错。但如果继续让AI续写或者丰富内容,会出现部分重复或生搬硬套的情况:

钉钉“魔法棒”实测来了!生成文案、拍照生成程序、打工人不需再“爬楼”

丰富文案后

但这也是如今AI大模型尚未能解决的“幻觉”问题。随着技术不断迭代,上述问题应该会逐步得到改善。

如果希望改写段落的语气,效果也有待加强:

钉钉“魔法棒”实测来了!生成文案、拍照生成程序、打工人不需再“爬楼”

改写成自信语气后,前后好像区别不大?

尝试完文生文,那么生成图片呢?和文字类似,用户同样直接用/调用助手,输入对画面的描述即可——

钉钉“魔法棒”实测来了!生成文案、拍照生成程序、打工人不需再“爬楼”

生成图片

如上图,生成4张图片,钉钉智能助手约用时20秒,响应速度不错。不过如果想进一步修改图片内容,比如希望更换背景,AI助手可能会理解为两句分别的指令,再次生成新的内容。

用户也可以询问AI助手各类问题。此前,大家用各类数学题考验AI助手,会有理解不对的时候,如今AI助手对一些会有歧义的中文问题,也能理解得相对准确。

钉钉“魔法棒”实测来了!生成文案、拍照生成程序、打工人不需再“爬楼”

用AI助手自动生成新能源汽车和传统汽车的对比表格

至于表格,目前钉钉助手可以根据文字描述简单生成表格,如让智能助手用表格列出想要对比的信息——竞品表格、功能一览等等,但更为复杂的分析数据和自动生成表格,暂时还无法做到。

总而言之,仅仅是在4月挥动“魔法棒”后的短短一个多月后——钉钉助手就能将演示的几大功能真正落地到应用中,速度已经算很快。

在具体使用体验上,当前的AI助手在问题理解方面,已经能顺利地识别简单的基础性问题,完成步骤不复杂的基础指令,打通钉钉中的部分应用。但提示词需要采用一定的格式和标准化表述。

另外,据钉钉表示,魔法棒目前也已经在在线会议中内测。当在会议结束后,与会者会马上收到钉钉闪记推送,自动生成及整理完整会议内容纪要。

但毫无疑问,用了AI助手之后,在钉钉的交互上,最大的感受是无需再到处找按钮,看入口在哪。而生成文字、图片、程序等等,速度也加快了不少。随着技术不断迭代,这会大大降低软件开发的难度和门槛。

钉钉也展现出“用AI重做一遍”的决心。钉钉CEO叶军在近期的不少公开报道中,就表示“未来人和软件的交互将变得非常简单,产品会走向极简。”钉钉未来将会变得功能越来越多,但界面越来越简洁——AI助手正是承载着这些功能的入口。

AI对软件的改革,正在持续加速中。

欢迎关注

欢迎交流

相关新闻

联系我们
联系我们
公众号
公众号
在线咨询
分享本页
返回顶部