ChatGPT的破圈程度几乎激发了所有行业对生成式 AI的兴趣,物联网领域也不例外。虽然还处于非常早期的阶段,但国内外已经有不少企业、专家和研究机构正在探索生成式 AI和物联网IoT的结合点,本文对这些思考和实例进行部分汇总和介绍。在刚刚过去的一周内,以ChatGPT为代表的生成式AI领域又改换了一番新天地,速度之快超出所有人的想象。3月15日,距离ChatGPT发布仅仅过去四个多月后,OpenAI 正式推出 GPT-4,加入图片识别功能,支持更长的输入和输出,具备超强的推理能力,甚至已经可以靠自己考上斯坦福大学;同样是在3月15日,清华大学唐杰团队在微博宣布,基于千亿基座模型的 ChatGLM 同期推出,初具问答和对话功能,已开启邀请制内测;3月16日,百度在北京总部举行了新闻发布会展示“文心一言”,成为国内巨头中首家发布“类ChatGPT”产品的企业,首日邀测超60万人申请;3月16日晚,微软正式把OpenAI的聊天机器人技术引入到Office办公套件当中,展示了“动嘴”就可以生成Word、Excel和PPT的场景,震撼无数打工人,将Office变成“地球上最强大的生产力工具”……
ChatGPT的破圈程度几乎激发了所有行业对生成式 AI的兴趣,物联网领域也不例外。虽然还处于非常早期的阶段,但国内外已经有不少企业、专家和研究机构正在探索生成式 AI和物联网IoT的结合点,本文对这些思考和实例进行部分汇总和介绍。在当前的智能家居场景中,人们习惯于通过智能音箱等内置的语音助手来控制家中的智能设备,比如“放大音量”、“关上窗帘”、“调低温度”等,但这种交互是命令式的,过于程序化。有时候会出现这样的场景——假如你的家中有15个名为灯的设备,当你让语音助手打开灯的时候,它会陷入混淆。在对一些信息的反复确认中,你会发现还不如手动操纵来得便捷一些。至于一些模糊的话语,比如“我今天过得很糟糕,有没有什么好的方式可以放松一下?”语音助手恐怕只会“装傻充愣”了。现在,ChatGPT可以通过使语音助手更加智能和自然地与用户交互,从而颠覆智能家居的使用方式。首先,ChatGPT 可以让语音助手更加准确地理解用户的语音指令。这意味着用户不需要记住特定的语音指令或格式,只需要用自然的语言与语音助手交流,就可以轻松地控制智能家居设备,这也使得用户更容易上手和使用智能家居系统。其次,ChatGPT 还可以使语音助手更加智能化。语音助手可以通过学习用户的偏好和行为模式,自动调整智能家居设备的设置,并为用户提供更加个性化的建议和服务。例如,当用户说“我想要一个安静的晚上”时,语音助手可以自动将音量调低,调暗灯光,并推荐适合放松的音乐或电影。最后,ChatGPT 还可以使语音助手更加人性化和亲切。语音助手可以通过模拟自然语言的回答和语气,使用户感觉像在和一个真正的人交流一样。这可以增加用户对智能家居的亲近感和信任度,并提高用户的满意度和使用率。有观点认为,Matter+ ChatGPT将会成为智能产业爆发的“助推剂”。此前,Matter 协议的发布打破了不同品牌智能家居产品的兼容问题,解决了设备之间互联互通的问题,降低了用户体验的成本,但智能的基因还有所欠缺。如今,ChatGPT 的出现则弥补了这一短板。新通路已找到,ChatGPT 加上 Matter 协议,生态+技术融合,或许将会给整个智能家居市场带来新变革。Josh.ai是一家成立于2015年的智能家居公司,总部位于美国科罗拉多州的丹佛市,其主打产品是一款智能家居语音助手,可以通过语音指令来控制家庭的各种设备和系统,例如灯光、音响、电视、窗帘、空调等。与其他智能家居语音助手相比,Josh.ai注重用户的隐私和安全,采用了端到端的加密技术,保护用户的语音数据不被窃取或滥用。此外,Josh.ai还提供了一整套智能家居解决方案,包括自适应照明、自动化窗帘、音乐、安全系统、摄像头等,通过人工智能和自学习算法,为用户提供更加智能、便捷和舒适的居住体验。
近日,Josh.ai公司联合创始人Alex Capecelatro在接受访谈时表示,其已经开始通过将OpenAI的ChatGPT集成到自家产品中来迭代语音助手的体验,这是一段演示视频:
在视频里我们可以看到,Capecelatro 要求 Josh 助手打开遮阳板,关掉音乐,并告诉他天气(同时控制三件事)。然后他继续使用更自然的语音命令控制智能家居,比如“我正在拍视频;这里有点暗”,语音助手略微笨拙地将房间里的灯光调亮了。
今年2月,全球化IoT开发平台服务商涂鸦智能宣布推出智能家居和智慧商业场景下,通过整合类ChatGPT技术而成的智能应用Demo。该应用Demo采取Prompt Engineering方法,通过引入ChatGPT强大的语言处理能力,结合涂鸦自身的AI模型,将为用户带来更加高效和智能的体验,并进一步提升智慧家庭和垂直行业的数字化水平。同期,涂鸦还发布了两支视频Demo,展示了类ChatGPT应用Demo在智能家居以及智慧酒店场景下的智慧理解能力和高超对话水平。
在智慧酒店场景下,涂鸦类ChatGPT应用Demo能够打造出自动联动的智能场景,实现刷脸开锁、灯光亮度调节及节能控制,再加上智能窗帘、智能电视、智能淋浴等设备的互联互通,不仅为酒店及相关行业带来更高效的管理模式,也为用户提供更智能化的入住体验。
物联网流程自动化是指利用物联网技术和自动化技术来实现物理世界中的流程自动化。它通过将物联网设备、传感器和其他智能设备与自动化系统集成,使得物联网设备可以收集数据并将其传输到自动化系统中进行处理,从而自动控制物理世界中的各种流程。例如,在制造业中,物联网流程自动化可以通过将传感器和智能设备集成到生产线上来实现自动化控制。通过收集和分析传感器数据,可以实时监测生产线的运行状态,及时检测和处理故障,并自动调整生产线的生产速度和产量。在物流和供应链管理领域,物联网流程自动化可以通过将物联网设备集成到仓库、货车和其他运输设备中,实时追踪货物的位置和状态,并通过自动化系统管理和优化物流流程。在实施物联网流程自动化的过程中,最关键的部分在于设置自动化规则——过去,人们需要通过复杂的代码来实现这一流程;随后,低代码平台的出现大大简化了工作量;如今,ChatGPT可以让这个过程变得更加简单,甚至“动动嘴”就能设置规则。
Waylay是一款低代码平台,旨在帮助企业快速构建和部署物联网应用程序和自动化工作流程,以提高业务效率和降低成本。该平台提供了一套完整的工具和功能,使用户能够快速集成各种物联网设备、应用程序和数据源,并自动化执行各种任务和流程。
自动化规则是Waylay平台的核心,开发人员可以使用现有的代码片段或者编写小代码片段,并用逻辑运算符将它们串起来以定义自动化规则。这个规则可以是“允许在没有下雨的3天后打开洒水器”,或是“如果检测到工业机器的某个传感器上出现异常,则安排对其进行巡检”——通过将规则组合在一起,用户可以创建任意复杂的自动化程序。如今,据一位国外博主介绍,我们可以基于GPT-3,将口头规则解析并转化为Waylay自动化规则,在这传统的训练模式中是难以想象的。
和智能家居相比,智慧工业对生成式AI的应用并没有那么积极,这和工业本身追求稳定可靠的“天性”有关,但即便如此,也有专家对ChatGPT在工业领域的应用寄予了厚望。数据追踪和分析:对制造业管理者而言,实时了解生产进度是重中之重。在一些比较传统的中小制造企业车间里,生产流程的记录往往依靠纸质单据或者简单的Excel表格,生产信息整体传递滞后。为了解决这类问题,不少企业开始部署数字化系统,但却存在周期长、成本高等痛点。而以ChatGPT为代表的生成式AI可以使用自然语言处理和机器学习技术从工业现场的仪表板上,甚至纸质数据和表格中读取数据(GPT-4已经具备了识图能力),并快速提取有用的特征和信息,这或许能够大大降低未来企业部署数字化系统的门槛和成本。实时监控和故障诊断:ChatGPT可以结合传感器技术和实时数据,实时监控工业现场设备的状态和运行情况,并发现异常情况。如果设备出现故障,ChatGPT还可以分析设备数据和维修记录,识别潜在的根本原因,并提供相关建议。这可以帮助维修人员高效地解决问题,减少停机时间。预测性维护:生成式AI可以帮助优化生产流程和资源管理。例如,它可以分析大量传感器数据,识别潜在的故障和瓶颈,并提出改进建议。更进一步,ChatGPT还可以使用人工智能技术来推荐设备维护的最佳时间和方式。优化管理和员工培训:ChatGPT可以自动生成操作指南和维护计划,帮助工人更好地管理设备和工作流程。在对新员工的培训中,员工可以直接和培训系统进行自然对话,清楚的知道详细的操作流程,遇到什么问题时也能通过询问快速解决,再结合工业AR设备,让新员工秒变“老司机”不是梦。国外的一位博主进行了这样的尝试,他为ChatGPT提供了Zerynth 仪表板的链接,如下所示:
生成式AI立即就读取了仪表板中的数据和图表,实时提供了正在发生的事情的概览。
该博主表示:信息的准确性和精确性取决于提供给人工智能的数据类型以及仪表板本身,虽然分析结果很肤浅,但这的确有助于初步分析和了解工厂的运行情况,包括哪些机器运行情况较好,哪些指标值得关注等等。
当前,随着人工智能技术和机器人技术不断进步,人形机器人产业得到迅速发展,小米、特斯拉相继推出人形机器人原型机。人形机器人产业主要分为两个方向:一是面向消费者市场的娱乐和服务型机器人;二是面向工业制造、医疗护理等领域的专业型机器人。在消费者市场方面,人形机器人已经开始广泛应用于娱乐、教育和家庭服务等领域。例如,可爱的机器人宠物、智能家居助手等。这些机器人不仅可以提供便捷的服务,还可以帮助人们减轻日常生活的负担。在专业领域方面,人形机器人已广泛应用于工业制造、医疗护理、教育、公共安全等领域。例如,在工业制造领域,人形机器人可以用于生产线上的物料搬运和加工等任务;在医疗护理领域,人形机器人可以辅助医生进行手术、照顾病人等任务。生成式AI技术可以为人形机器人产业带来许多优势和提升,包括:提升人形机器人的语音交互能力:生成式AI技术可以使人形机器人更加智能化和自然化,能够更好地理解人类语言,并产生符合人类思维习惯的回复。提升人形机器人的视觉识别能力:生成式AI技术可以帮助人形机器人实现高效准确的视觉识别和分析,包括人脸识别、语义分割、目标检测等。这些能力可以为人形机器人提供更多的应用场景和服务领域,如家庭安保、自动驾驶等。提升人形机器人的自主决策能力和智能学习能力:生成式AI技术可以赋予人形机器人更强的自主决策和学习推理能力,使其能够根据环境变化和任务需求做出相应的行为和决策。比如,当人们发出“用果汁装满玻璃杯”的指令时,机器人可以自动生成中间任务“打开冰箱”—“找到果汁”-“找到桌上的玻璃杯”,最后完成“用果汁装满玻璃杯”的目标。2022年8月,Alphabet的Deepmind展示了一个框架,通过学习人类或动物的运动,使机器人能够更“自然”地移动和执行任务。开发通过机械臂操纵物体的能力是一个具有挑战性的控制难题,但使机器人的动作看起来更像真实生物的运动带来了许多优势。例如,在穿越不平坦的地形或处理易碎物品时,确立稳定和一致的行为是至关重要的。不一致的运动可能导致机器人或其周围环境的损坏,并耗尽其电源。因此,通常会投入相当多的资源来设计学习目标,以使机器人能够安全高效地执行特定任务。
在当今信息时代,物联网(IoT)技术已经深入到我们生活的方方面面。我们的家庭、汽车、医疗设备、工业控制系统等都网络相连,带来了前所未有的便利。然而,这种高度连接的环境也带来了潜在的安全威胁。网络攻击者可以通过物联网设备获取敏感数据、操纵系统,造成严重的经济和安全损失。因此,保护物联网的安全是至关重要的。物联网的安全问题是非常复杂和广泛的,涉及到硬件、软件、通信等多个层面。对于消费者而言,他们需要注意购买可信的设备,使用强密码和多因素认证保护自己的账户。对于企业而言,他们需要确保设备和系统的完整性和可用性,并定期更新和测试安全措施。同时,政府和相关机构也需要加强监管和合作,共同应对物联网的安全挑战。最近,研究人员利用先进的自然语言处理工具GPT-4增强了物联网安全。GPT-4能够理解和解释自然语言,这使它成为识别和应对网络威胁的理想工具。在发表于IEEE物联网杂志的一项研究中,研究人员展示了如何利用GPT-4来检测和应对物联网设备上的恶意流量。研究人员发现,GPT-4能够高度准确地识别恶意流量。这种自动化安全系统将成为物联网设备所有者的宝贵资产,因为它将使他们能够快速识别和应对网络威胁。此外,GPT-4还可以用于创建自动补丁系统,使物联网设备所有者能够将其设备保持更新,使用最新的安全补丁。