AI多模态浪潮来了!ChatGPT迎重磅升级,算力需求喷发可期

​《科创板日报》9月26日讯

当地时间25日,OpenAI宣布ChatGPT迎来重磅更新:这个聊天机器人如今“会看、会说、会听”——换言之,ChatGPT加入了语音与图像功能。未来两周内,Plus用户与企业用户便能体验新功能,开发人员等其他用户群体也有望在不久的将来体验。

其中,最受外界关注的是ChatGPT的图像理解能力。据介绍,用户可以向ChatGPT展示一张或多张图片,排查为何烧烤炉无法启动,检查冰箱里的菜能做什么美食,或分析复杂图表得出数据。若想让ChatGPT关注图片中的特定部分,还可以使用APP中的绘图工具高亮标注。

在OpenAI给出的示例视频中可以看到,当用户向ChatGPT发送一张自行车照片、询问如何调低车垫时,ChatGPT不仅会自发观察自行车型号、辨认零部件、给出详细步骤,还会看说明书,并分辨用户现有工具能否完成这项工作。

AI多模态浪潮来了!ChatGPT迎重磅升级,算力需求喷发可期

值得注意的是,同日发布的一篇论文中,OpenAI将这一能看图的模型称作GPT-4V(ision)。该模型在2022年已完成训练,之后在2023年早些时候开始早期测试访问。

借助GPT-4V,今年3月OpenAI与Be My Eyes组织合作开发Be My AI,可为盲人与视力障碍人士描述外界世界。测试表明,Be My AI可为50万盲人和视力障碍用户提供工具,满足他们在信息、文化和就业方面的需求。

另外,OpenAI还测试了GPT-4V的验证码破解及地理定位能力,前者表明模型具备解决谜题与执行复杂视觉推理任务的能力,后者则展现出了模型在搜索物品/地点的用处。但这两项功能将涉及网络安全及隐私问题。

至于本次更新的另一语音识别与生成功能,OpenAI表示,用户可以用这一功能为孩子讲述睡前故事,还可以在吵架时作为帮手。

OpenAI与专业配音演员合作,提供了5种不同的声音。另外,公司还与Spotify展开合作,通过这一功能将播客翻译为其他语言,同时保留播客主持人的声音。

AI多模态浪潮来了!ChatGPT迎重磅升级,算力需求喷发可期

值得一提的是,数据显示,近期ChatGPT流量回升。SimilarWeb数据显示,9月11日那一周,ChatGPT流量较前一周增长约12%。另一家分析公司Sensor Tower报告称,8月最后两周全球ChatGPT应用程序用户每周增长超过10%。据悉,流量增长的主要原因为学生开始返校,且印度及巴西市场迎来增长。

多模态大模型成兵家必争之地 算力需求显著提升 

如今,多模态功能已成为各家AI大模型的必争之地。Meta最近推出AudioCraft,通过AI生成音乐;谷歌Bard及必应机器人均已部署多模式功能;苹果也在试验AI生成语音Personal Voice。

随着AI感知、交互与生成能力快速发展,应用场景与生态也有望进一步丰富。而语音与图像数据大小显著高于文本,券商指出,多模态大模型的训练推理算力需求将大幅攀升

例如被谷歌寄予厚望的多模态大模型Gemini,据SemiAnalysi分析师Dylan Patel和Daniel Nishball透露,其已开始在TPUv5 Pod上进行训练,算力高达~1e26 FLOPS,是训练GPT-4所需算力的5倍。

华为副董事长、轮值董事长、CFO孟晚舟日前也表示,“人工智能的发展,算力是核心驱动力。大模型需要大算力,算力大小决定着AI迭代与创新的速度,也影响着经济发展的速度。算力的稀缺和昂贵,已经成为制约AI发展的核心因素。”

国信证券指出,AI三元素(大模型、算力、应用)呈螺旋式促进关系AI三元素以“模型更新-算力芯片迭代、单位tokens成本降低-应用增加”循环往复,当三者中有一个要素喷发,就是强刺激期;三者同时没有更新,就会进入停滞期,等待下次爆发。

AI多模态浪潮来了!ChatGPT迎重磅升级,算力需求喷发可期

多模态大模型是未来发展趋势。通过将不同数据类型相互关联结合,可以大幅提高模型准确性和鲁棒性,应用场景进一步拓展。

同时,3月谷歌发布多模态具身视觉语言模型(VLM)PaLM-E,其可用于机器人领域;7月谷歌发布新一代视觉-语言-动作(VLA)模型Robotics Transformer 2(RT-2),专用于机器人领域,看好大模型赋能机器人趋势,分析师看好大模型赋能机器人

阅读剩余 74%

该文观点仅代表作者,本站仅提供信息存储空间服务,转载请注明出处。若需了解详细的安防行业方案,或有其它建议反馈,欢迎联系我们

(0)
小安小安

相关推荐

  • 第六届中国-亚欧安防博览会在乌鲁木齐开幕

    15日,为期三天,主题为“紧抓‘一带一路’新机遇,智慧安防助推城市发展”的第六届中国-亚欧安防博览会在乌鲁木齐开幕,该博览会集产品展示、行业论坛、技术交流、科技普及等活动于一体。

    2024年1月29日
  • 【河南铠达机器人有限公司】- 电子_数码_智能硬件服务机器人_消毒机器人

    公司名称 河南铠达机器人有限公司 主营产品 应用场景 电子/数码|智能硬件服务机器人|消毒机器人 公司简介 我公司专业做消毒机器人,服务机器人,商用机器人,智能产品解决方案供应商 …

    2024年2月28日
  • 毫米级折纸机器人 可水陆两用多环境执行任务

    施普林格・自然旗下学术期刊《自然-通讯》最新发表一篇机器人学论文,研究人员展示了一个毫米级的折纸机器人,可利用磁铁和折纸折叠方式进行多方向基于旋转的移动。这个机器人可以水陆两用,能够在多种环境中移动并执行任务,包括受控的液体药物递送和定向固体货物运输。

    2024年2月10日
  • 天津公交专用车道启用 50个电子警察摄录

    从天津市交通港口局获悉,为进一步发展公共交通,加快建设“公交都市”步伐,倡导市民绿色出行,市交通港口局正在对公交专用车道进行规划,近期将启用41公里公交专用车道,并安装50个固定电子警察,对占道车辆予以处罚。

    2024年4月25日
  • 福州交警:信号灯100%中心联网联控

    日前,福州市公安局在函复市人大代表关于交通管理智能化工作的提案时表示,福州已经在全国率先实现信号灯100%中心联网联控,城区784个信号灯全部联网到统一的信控平台。函复如下: 【安…

    2024年2月25日
  • 北京科技周今开幕 北京一号小卫星亮相

    今天上午9点,由市政府主办的2007年北京科技周将在奥体中心训练场开幕,随后大型主题展也将向市民开放。

    2024年1月29日