商汤王晓刚:通用人工智能能完成从人到车、到模型的闭环互动

2023伊始,ChatGPT掀起了通用人工智能的热潮。商汤科技联合创始人王晓刚就“通用人工智能和多模态的大模型给智能汽车带来的机遇和挑战“发表了观点。

商汤王晓刚:通用人工智能能完成从人到车、到模型的闭环互动

首先,什么是通用人工智能?与现有的人工智能系统相比,现有的人工智能也能够接收多模态的数据,但是它输出的任务都是事先定义好的。如果给系统增加一个新的任务,就要对系统进行重新的设计、采集大量的样本。而在在通用人工智能时代,只要输入提示词和多模态的数据,它可以去生成多模态的数据,更重要的它可以用自然语言去生成对任务的描述,自然语言可以以非常灵活的方式去覆盖大量的长尾的问题和开放性的任务,甚至是一些主观描述。

在自动驾驶领域,通用人工智能可以帮助训练模型,比如给系统规定图片,决定是否需要减速。在现有的AI系统中,首先要做物体的检测,再做文字的识别,最后做这样决策,所有过程里面的每一个模块都是事先定义好的任务。

在通用人工智能下,给定图像,只需要用自然语言去问这个图像问题,比如这个图标是什么意思,我们应该做什么?它的输出就会通过自然语言的方式,还能够给一系列的逻辑推理,最后得出结论。比如说,它可以告诉我们这里面的限速是30公里,前面100米是学校的区域,应该小心,需要将车速降速到30公里以下等等这一些。这都是一些开放式的新的任务,可以对人工智能系统进行非常大的变革。

另外,通用人工智能还能够产生内容,而且是有智慧的内容。自动汽车有“数据飞轮”的说法,模型能够从驾驶终端采取高质量的数据,对模型进行更新,然后再去从终端提升数据的量和质。

在通用人工智能时代,它会有智慧的飞轮,这里面人和模型会产生互动,通过人的反馈,它能更好地理解人需要它展示什么样的能力,而去解锁这个模型更多的技能。同时,这个模型给人输出的是有智慧的内容,这些内容会激发人的各种创作和智慧的产生,这里面又会产生智慧的飞轮。

不过,AGI(通用人工智能)对算力的需求非常大,ChatGPT一次训练的成本是上千万的美金,每天的推理成本也有几百万美金高昂的成本在。

王晓刚介绍,商汤在这个领域有一些布局。2021年,商汤在上海的临港建立了AIDC的超算中心,有5000P的算力,1万块的A100,而且可以实行数千卡的大规模的并行的训练。并且,商汤到今天已经有320亿最大规模的视觉的模型。

在NLP领域,商汤也有SenseChat 1800亿参数的模型,有能力训练1800亿参数的多模态的模型。基于这个多模态的模型,可以做内容的生成和决策。

商汤绝影是商汤下面做汽车的业务板块,其坚持驾舱云三位一体的这样的一个发展的策略。自动驾驶领域,BEV是主流的技术路线,未来可以朝多模态、通用智能的方向发展。商汤AIGC可以去生成困难的样本,以及输入多模态数据。在这里面,自动驾驶多模态的大模型可以做到感知和决策的一体化。输出对3D的环境进行重建,行为解码可以生成完整的路径的规划。同时,动机的解码器可以用自然语言去描述推理的过程,使自动驾驶的系统变得可以解释。

基于这些多模态的大模型,商汤可以做到数据感知的闭环和决策的闭环,从前端自动的去采集高质量的数据,利用大模型自动的数据的标注,包括检测,是产品的检测,是能够几百倍的去提升我们模型迭代的效率和降低它的成本。

在智能座舱里面,通用人工智能使我们AGI模型具备空间环境的理解、用户状态的感知,多模态的指令,还有多轮对话,内容生成等一系列的能力,其可以去赋能,作为我们情绪的感知,智能助手,完成基于情感的对话、创意、内容的生成,以及个性的交互等等,使场景从上车、行车、停车、离车拓展到娱乐、办公、购物、休息。

总而言之,王晓刚认为,智能汽车是通用人工智能实现闭环的非常好的场景。目前我们已经有人机共驾,未来车和模型之间可能会产生更有效的互动,这样便完成了从人到车、到模型的闭环的互动。

免责声明:本文由用户上传,如有错误请指正,如有侵权,请联系删除!

赞 (0)
上一篇 2023年4月16日 14:24
下一篇 2023年4月16日 14:24

相关推荐

  • 缺芯两年全球减产1,494万辆车 福特CEO:有钱也买不到芯片

    全球半导体短缺始于2020年上半年,主要是由于新冠疫情导致消费电子产品和汽车的需求飙升。2021年,芯片短缺迅速席卷全球汽车市场,“芯片危机”、“芯片荒”、“一芯难求”也迅速成为汽车行业的年度热词。 芯片短缺使车企苦不堪言,全球已减产1,494万辆汽车 自2021年以来,全球汽车制造商备受芯片短缺的困扰。长安汽车董事长朱华荣也在去年11月9日的中国汽车论坛上…

    2023年4月9日
    0
  • 毫米波雷达,向高分辨率成像发起进攻

    随着智能驾驶时代的到来,车用传感器进入高速发展期,其中车载毫米波雷达几乎成为L2及以上智能驾驶的标配。统计数据显示,2020 年中国市场前装角雷达搭载量为414.28 万个,同比增长72.53%;前向毫米波雷达上线量535.72 万颗,同比增长38.43%。 从物理属性来看,相对于激光雷达和摄像头等光学传感器,毫米波雷达不受光线的制约,在雨雾雪等恶劣天气下均…

    2023年4月7日
    0
  • 通用汽车因供应链问题延长了墨西哥卡车工厂的停产时间

    通用汽车因供应链问题延长了墨西哥卡车工厂的停产时间 全球汽贸网资讯,据路透社报道,通用汽车于周二表示,由于未披露的临时供应链问题,其在墨西哥生产雪佛兰和通用皮卡的Silao装配厂将把停产延长至3月20日。 这家美国最大的汽车制造商此前宣布,由于供应链问题,将于3月4日至12日在墨西哥中部工厂停产。该汽车制造商表示,正在与供应商合作解决供应链问题,并计划于下周…

    汽车资讯 2023年3月25日
    0
  • 特斯拉Model S及Model X将于1月6日公布售价

    特斯拉Model S及Model X终于快要交付了。 2022年12月30日,广州国际车展盛大开幕。众多车企带来了旗舰车型,让观众直呼太过瘾,其中,人流量爆火的莫过于特斯拉展台。此次,特斯拉携旗下S3XY家族重磅出击,全新车型Model S Plaid与Model X Plaid更是成为全场焦点,不少观众驻足体验。 当天,特斯拉举办媒体交流会,活动现场特斯拉…

    2023年3月23日
    0
  • 2024款丰田陆地巡洋舰第一眼:回归基础的标志

    2024年将推出一款全新陆地巡洋舰。它比上一代小。标准4WD混合动力系统的功率为326马力。我们预计起价在50000美元左右。 这在某种程度上是对陆地巡洋舰根源的回归。在它成为一款大型豪华越野车之前,它的外形要小得多,物质享受也少得多。这款中型SUV可容纳5名乘客,将取代丰田卡车SUV系列中较小的4Runner和较大的三排Sequoia之间的位置。新款陆地巡…

    2023年9月20日
    0