商汤王晓刚:通用人工智能能完成从人到车、到模型的闭环互动

2023伊始,ChatGPT掀起了通用人工智能的热潮。商汤科技联合创始人王晓刚就“通用人工智能和多模态的大模型给智能汽车带来的机遇和挑战“发表了观点。

商汤王晓刚:通用人工智能能完成从人到车、到模型的闭环互动

首先,什么是通用人工智能?与现有的人工智能系统相比,现有的人工智能也能够接收多模态的数据,但是它输出的任务都是事先定义好的。如果给系统增加一个新的任务,就要对系统进行重新的设计、采集大量的样本。而在在通用人工智能时代,只要输入提示词和多模态的数据,它可以去生成多模态的数据,更重要的它可以用自然语言去生成对任务的描述,自然语言可以以非常灵活的方式去覆盖大量的长尾的问题和开放性的任务,甚至是一些主观描述。

在自动驾驶领域,通用人工智能可以帮助训练模型,比如给系统规定图片,决定是否需要减速。在现有的AI系统中,首先要做物体的检测,再做文字的识别,最后做这样决策,所有过程里面的每一个模块都是事先定义好的任务。

在通用人工智能下,给定图像,只需要用自然语言去问这个图像问题,比如这个图标是什么意思,我们应该做什么?它的输出就会通过自然语言的方式,还能够给一系列的逻辑推理,最后得出结论。比如说,它可以告诉我们这里面的限速是30公里,前面100米是学校的区域,应该小心,需要将车速降速到30公里以下等等这一些。这都是一些开放式的新的任务,可以对人工智能系统进行非常大的变革。

另外,通用人工智能还能够产生内容,而且是有智慧的内容。自动汽车有“数据飞轮”的说法,模型能够从驾驶终端采取高质量的数据,对模型进行更新,然后再去从终端提升数据的量和质。

在通用人工智能时代,它会有智慧的飞轮,这里面人和模型会产生互动,通过人的反馈,它能更好地理解人需要它展示什么样的能力,而去解锁这个模型更多的技能。同时,这个模型给人输出的是有智慧的内容,这些内容会激发人的各种创作和智慧的产生,这里面又会产生智慧的飞轮。

不过,AGI(通用人工智能)对算力的需求非常大,ChatGPT一次训练的成本是上千万的美金,每天的推理成本也有几百万美金高昂的成本在。

王晓刚介绍,商汤在这个领域有一些布局。2021年,商汤在上海的临港建立了AIDC的超算中心,有5000P的算力,1万块的A100,而且可以实行数千卡的大规模的并行的训练。并且,商汤到今天已经有320亿最大规模的视觉的模型。

在NLP领域,商汤也有SenseChat 1800亿参数的模型,有能力训练1800亿参数的多模态的模型。基于这个多模态的模型,可以做内容的生成和决策。

商汤绝影是商汤下面做汽车的业务板块,其坚持驾舱云三位一体的这样的一个发展的策略。自动驾驶领域,BEV是主流的技术路线,未来可以朝多模态、通用智能的方向发展。商汤AIGC可以去生成困难的样本,以及输入多模态数据。在这里面,自动驾驶多模态的大模型可以做到感知和决策的一体化。输出对3D的环境进行重建,行为解码可以生成完整的路径的规划。同时,动机的解码器可以用自然语言去描述推理的过程,使自动驾驶的系统变得可以解释。

基于这些多模态的大模型,商汤可以做到数据感知的闭环和决策的闭环,从前端自动的去采集高质量的数据,利用大模型自动的数据的标注,包括检测,是产品的检测,是能够几百倍的去提升我们模型迭代的效率和降低它的成本。

在智能座舱里面,通用人工智能使我们AGI模型具备空间环境的理解、用户状态的感知,多模态的指令,还有多轮对话,内容生成等一系列的能力,其可以去赋能,作为我们情绪的感知,智能助手,完成基于情感的对话、创意、内容的生成,以及个性的交互等等,使场景从上车、行车、停车、离车拓展到娱乐、办公、购物、休息。

总而言之,王晓刚认为,智能汽车是通用人工智能实现闭环的非常好的场景。目前我们已经有人机共驾,未来车和模型之间可能会产生更有效的互动,这样便完成了从人到车、到模型的闭环的互动。

免责声明:本文由用户上传,如有错误请指正,如有侵权,请联系删除!

(0)
上一篇 2023年4月16日 14:24
下一篇 2023年4月16日 14:24

相关推荐

  • 加速布局“软件定义汽车”,金脉推出两款高端区域控制器(ZCU)解决方案

    2023年5月5日,上海金脉电子科技有限公司(“金脉”)正式推出两款面向智能汽车领域的高端前后区域控制器解决方案,其中后区域控制器近期已在第二十届上海国际汽车工业展览会博世集团全资子公司 – 易特驰(ETAS)展台上首次公开亮相。 区域控制器作为未来智能汽车的核心,具有举足轻重的地位。它颠覆了目前行业主流的以功能域划分、中央网关为中心的架构,而是…

    2023年5月8日
    0
  • 轻舟智航首发基于环视相机的6V1R高速NOA并开放体验

    作为世界前沿的自动驾驶通用解决方案公司,轻舟智航在上海车展上业界首发了基于环视相机的6V1R视觉方案的高速NOA版“轻舟乘风”高阶辅助驾驶解决方案并开放体验,以极致的性价比实现高速NOA+L2全功能,打造更好用、消费者更爱用的高速领航辅助驾驶体验。 作为轻舟智航目前性价比最高的高速NOA方案,基于环视相机的6V1R视觉方案的高速NOA版“轻舟乘风”仅通过小幅…

    2023年4月28日
    0
  • 特斯拉带火4D毫米波雷达,上市公司争相“蹭热点”

    自动驾驶的发展,多传感器融合已经是大势所趋。 即便是此前一直坚持纯视觉路线的特斯拉,也被曝考虑重新加入雷达,据猜测这款雷达还是一款高分辨的4D雷达。而国内其他大部分智能化发展相对靠前的企业,则纷纷选择了通过激光雷达来为智驾系统的感知安全加分。 这就衍生出了一个问题,在视觉继续稳坐“老大”位置的基础上,接下来老二究竟会是4D成像雷达还是激光雷达? 玩家密集入局…

    2023年3月31日
    0
  • 奔驰即将配备宁德时代电池,并将一起深入探讨电池回收技术!

    据报道,宁德时代将为梅赛德斯-奔驰电动汽车生产新电池。 该交易突显出,随着汽车行业从化石燃料向新能源过渡,汽车制造商和供应商正在竞相获得用于电动汽车电池的原材料。近年来,镍、钴和锂的价格在全球范围内飙升,原因是市场预期电动汽车及其电池的需求不断增长。 此次合作还将围绕电池回收技术和商业模式进行广泛而深入的探索与合作。 梅赛德斯-奔驰与其合资伙伴北汽股份有限公…

    汽车资讯 2023年3月25日
    0
  • 小车交强险一般是多少钱一年

    很多司机买了车就去买交强险,这是一种强制保险,必须由车主进行投保,否则车辆不能在道路上行驶。那么小车交强险一般是多少钱一年呢? 以上就是给各位带来的关于小车交强险一般是多少钱一年的全部内容了。

    2023年4月22日
    0