Redian新闻
>
你只管提需求,大模型解决问题:图表处理神器SheetCopilot上线

你只管提需求,大模型解决问题:图表处理神器SheetCopilot上线

公众号新闻

机器之心专栏

机器之心编辑部

各位表格大师终于可以跟那些繁琐的手动操作说再见了!近日,一款名叫 SheetCopilot 的智能体横空出世,让每个人只需要发号施令就可实现流畅的表格操控。

这种丝滑的操作流程简直是职场人的福音!



近日,来自中科院自动化所、港理工等机构的研究者们造出了一个「表格 AI 助手」SheetCopilot,该智能体能根据用户指令生成操纵表格的解决方案并在特定软件(如:Excel、GoogleSheets 等)上执行。SheetCopilot 可以快速连接多款表格处理软件,且支持多表操作、图表绘制和数据透视表生成,有望赋能多个领域的表格数据处理和可视化,并向实现通才智能助手迈出关键一步。



网站:https://sheetcopilot-demo.github.io/

论文:https://arxiv.org/abs/2305.19308


让我们首先通过以下示例来感受 SheetCopilot 如何显著提升工作效率。


假如你是一个刚入职小白,有一天老板要求你帮他分析销售数据。你拿到表格一看,上千行的数据眼花缭乱,一时不知从何下手,于是你边查边做。


首先,你尝试采用把各 Product 名称提取出来,然后用公式对各 Product 的收入求和。



搞了二十多分钟,SUMIF 一直报”#NAME?”的错误,遂放弃。


继续上网搜索,发现还有数据透视表(Pivot table)这么方便的工具,于是开始第二次挑战。



又花了二十多分钟,终于搞定。整个过程将近一个小时,效率不如人意。以后每次老板交个你新的表格处理任务,你之前的经验派不上用场,又得从头开始边查网站边做: (。


你的同事则使用 SheetCopilot,伸个懒腰的工夫就把各种奇怪的要求都完成了: )。



看到 SheetCopilot 如此丝滑,你也简单尝试了一下,画个图不在话下。



有了 SheetCopilot,你再也不用把鼠标滑过半张桌子的距离来选中超出屏幕的数据了,轻松让上千行数据在多张表之间辗转腾挪。



为什么提出 SheetCopilot


长久以来,人们一直渴望拥有即使没有专业经验也能熟练掌握复杂软件的能力。许多人都曾遇到过这样的情况:不知如何操作 PhotoShop 的繁琐界面,想要分析数据却不知道数据透视表这一高级功能,想要绘制齿轮却对 Solidworks 一无所知。


随着具有强大语言理解和生成能力的大型语言模型(LLM)的出现,这个愿景比以往任何时候都更接近现实。如果能够引导 LLM 掌握各种软件,就能够释放出 LLM 几乎无限的潜能,进而让人类的生产力达到前所未有的高度。


这篇文章指出电子表格(Spreadsheet)是进行这项研究的理想基础,因为它是一种常见的多功能生产工具。然而,表格操控面临着多样化的挑战,用户难以掌握足够的表格处理和编程技巧以应对变化多端的任务需求。


如果有一种通才 AI 智能体,它掌握丰富的软件操控技能,那么不仅办公效率能得到极大提升,企业产出也会大大加快。SheetCopilot 的出现正好契合了人们这样的远景。


SheetCopilot 有哪些亮点


1. 覆盖表格处理的典型需求


SheetCopilot 涵盖了表格操作的几乎所有典型任务,可以出色地完成各式图表生成任务。


销售数据分析


实验图表绘制

复杂公式计算


应用条件格式


2. 超越基于 VBA 的方法


SheetCopilot 优于用GPT-3.5 生成 VBA 代码并执行的方法,生成的解决方案的显著优于后者(见下图),这使得 SheetCopilot 有望成为数据处理人员未来强大的 AI 辅助工具。



不仅如此,相比于晦涩的 VBA 代码,SheetCopilot生成的解决方案包含通俗易懂的步骤,这免去了学习新编程语言并艰难调试的痛苦。


左图:冗长的 VBA 代码;右图:SheetCopilot简单易懂的解决方案。


3. 舒适的使用体验


SheetCopilot 在网络连接稳定的情况下,仅需约 10 步多表组合操作,即可在上千行数十列的表格中快速完成任务。这不仅解放了用户疲惫的双眼,还节省了查找网站并逐个尝试操作步骤所浪费的时间,同时也避免了学习 VBA 的成本。



方法原理


这篇文章将表格操控所需的核心功能抽象为一组虚拟 API(称为原子操作,见下图),用于生成解决方案,作为 LLM 与应用软件之间交互的桥梁。



最简单的方法是对 LLM 的一次查询(query)生成一个任务的所有步骤。然而,随着任务复杂度的增加,后序步骤更加依赖前序步骤的执行结果,导致这种开环控制难以得到正确结果。例如,如果无法确定筛选后可见数据的位置,LLM 就难以确定操作范围。


为了实现高效的闭环控制,SheetCopilot 根据软件状态反馈和外置原子操作知识库优化解决方案,提升了成功率和效率。


如何评测


该文提出了一个高质量评测基准。该基准的任务具有多样化的表述,并涉及丰富的原子操作,如下面词云所示:



此基准采用了如下有关成功率的指标(越高越好):


  • Exec@1:生成的任务解决方案的执行成功率。

  • Pass@1:任务通过率,即执行后能匹配上任意参考答案的解决方案的占比。


此基准还考虑如下效率指标(越低越好):


  • A50:将符合任务要求的解决方案的步数除以参考答案最少步数,然后对所有计算结果取中位数。

  • A90:计算方式同上,但取所有计算结果的 90 分位数。该指标反映动作数的极值分布。


实验结果


表 1:在 SheetCopilot 数据集上对比 GPT-3.5-Turbo、GPT-4、Claude 以及生成 VBA 的方法。


不出意料,GPT-4 符合任务要求的解决方案占比最高且效率最优,而 GPT-3.5-Turbo 则紧随其后,Claude 最次但也接近 GPT-3.5-Turbo。


一个值得关注的结果是,与将用户指令翻译成 VBA 代码并在 Excel 上执行的方法对比,SheetCopilot 取得了非常出色的成功率。这意味着 SheetCopilot 让软件智能控制离我们又近了一大步,让不会编程的用户能以日常交流的方式指挥计算机完成繁杂的工作。


我们再通过下面各个细分类别上的指标来看一看这三个 LLM 各自的优缺点。



GPT-3.5 和 GPT-4 轻而易举地解决了 Management(排序、筛选等表格管理操作)和 Entry & manipulation(数据输入与操纵)这两类任务,均取得了 100% 可执行率。此外,三个 LLM 在不同任务类别中各自表现出最佳效率,这一有趣的发现表明每个 LLM 都有其独特的优势,GPT-4 也难以完胜其它模型。


结语


SheetCopilot 借助 LLM成功地将感知、推理和决策通过文字接口构成了一个闭环,实现高效的电子表格操控,促进智能软件控制更上一层楼,也为对通才智能体感兴趣的研究者带来了新的灵感。



© THE END 

转载请联系本公众号获得授权

投稿或寻求报道:[email protected]

微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
相关阅读
从夫妻四不讲说起只给大模型LeetCode编号,也能解题!大模型表现好是源于对训练数据的记忆吗?请不要迷信大模型丘成桐:很少中国小孩有解决问题的狂热,大多考虑的是要出国赚钱新进展!这家券商申请资管牌照获反馈,监管提出这六大问题...靠舆论解决问题,本身就有问题瞄准B端!腾讯云推多款行业大模型解决方案,打造模型应用商店大模型思维链经典论文阅读之——Zero-shot CoT, Manual CoT, AutoCoT上万张照片怎么找?百度网盘:你只管说,我们帮你找回国之旅,摄像头,投诉电话与点评谷歌联合创始人回归做AI;ChatGPT上线自定义指令功能;DeepMind迭代AI设计芯片方法丨AIGC大事日报瞄准 B 端!腾讯云推多款行业大模型解决方案,打造模型应用商店618来了!你只管买买买,国际物流现金我们送送送!Linux Shell 介绍:Bash、Zsh 和 Fish | Linux 中国智源连甩多个开源王炸!悟道3.0大模型数弹齐发,大模型评测体系上线空船微软 Office copilot 定价每月 30 美元;腾讯否认推公务员版微信;Meta 发布新一代开源大模型 | 极客早知道Jiangsu City Punishes Property Developers For Selling Cheaply新AirPods Pro或采用USB-C接口/特斯拉第二季度交付超预期/周鸿祎:别想用一个大模型解决所有问题通信大厂“裁员潮”来袭!安卓版ChatGPT上线;LoRaWAN+Sigfox时代来了|AIoT情报5小时get大模型时代提效神器:写出高价值大模型Prompt!丁辰灵:图表解析美股风险,大风暴何时来临?IEEE高级会员,IEEE中国联合会前任主席,IEEE北京分会前任主席冯进军当选北京“最美科技工作者”新功能上线!ChatGPT上线应用“代码解释器”有人问我:美国有什么好?The Shanghai Museum Keeping Memories Of Jewish Refugees Alive《大爱如歌》&《如梦令》秒杀自动编码Copilot!「动嘴编程」神器StarChat开源,码农狂喜@学生,你只管加油,剩下的交给国家!原来一口好牙,才是变相攒钱!效果堪比洗牙的护理神器,用过就离不开!腾讯云发布多个行业大模型解决方案,提供MaaS服务|最前线六句自律口诀,你只管记住,上天自有奖赏80亿估值独角兽突然倒闭:2000万用户95%是机器人;周鸿祎:不要试图用一个大模型解决所有问题;美国家地理回应裁员停刊|邦早报帮助员工解决问题,而不是成为员工的问题安卓版ChatGPT上线;妙鸭相机回应涉嫌侵害用户权益;网易有道发布子曰大模型丨AIGC大事日报十亿参数,一键瘦身!「模型减重」神器让大模型狂掉3/4 | 最“in”大模型
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。