大模型重塑车载语音交互:赛道巨头如何引领新周期?

车载语音交互赛道正进入新一轮竞争周期。

高工智能汽车注意到,传统车载语音交互赛道当前基本已进入成熟期,主要为任务型助手,包括从单轮对话到多轮对话,单音区到多音区,从单一的导航、多媒体娱乐等座舱功能扩展智能驾驶、车身控制等,用户体验逐步面临天花板,缺乏实质性突破。

2023年,经由ChatGPT引爆后,大模型技术崛起(深度学习从原来基于规则驱动的专家模型,转为基于数据驱动),本身即位于深度学习赛道的车载语音交互,迎来新一轮发展周期,向AI虚拟副驾驶/沉浸式驾驶伴侣迈进。且,车载语音交互,被认为是大模型上车的首选赛道。

赛轮思正加码布局。一般而言,算力、数据是大模型竞争的底层基座,具体应用和产生的价值是实现商业化破局的核心,作为全球车载语音交互赛道的巨头,赛轮思正给出自己的赛道突围方式。

2023年12月19日,赛轮思宣布推出由英伟达技术驱动、具有开创性的汽车级大型语言模型CaLLM™(Cerence Automotive Large Language Model),为主机厂当前面临的多个关键挑战提供解决方案:通过与现有嵌入式系统和新生成式AI功能的云集成,部署新的用户体验,加速产品上市周期。

此次合作,英伟达无疑可解决算力的问题,CaLLM™可解决应用与算法的问题。在赛轮思看来,作为全球第一个车载级、专注于车与人机交互的LLM,其核心优势为依赖赛轮思车载智能助手广泛部署以及在车载人机交互领域深入的经验,打造的可深度定制的跨语言跨平台的端云一体的车载智能助手解决方案。

“通过NVIDIA 业界领先的AI框架和平台相配合,结合我们独有的数据集、与汽车制造商的深厚关系以及广泛的市场渗透率,使我们处于领先的位置,更好的发挥开创性、汽车级的LLM、CaLLM™和自研的车载计算平台的优势。” 赛轮思首席技术官 Iqbal Arshad表示。

图片

01

联手英伟达打造汽车级LLM平台

赛道发生剧变之时,往往也意味着巨大的机会窗口。

在赛轮思看来,车载语音交互赛道正面临“从以性能指标为优先,提升为是否可深度定制、是否能快速部署、是否能提供极致的人机交互体验全方位的竞争。大模型(特别是适用于车载领域的大模型),是未来人车交互系统的核心竞争力,这也是赛轮思聚焦的方向”。

“CaLLM™是赛轮思全新车载计算平台的基础,该平台是车载交互的未来”,赛轮思称。

据介绍,传统车载语音解决方案需要多步骤交互作为不同的独立步骤进行,从而导致过多的手动交互并给驾驶者带来很高的认知负担,赛轮思的新平台将用户所有种类的交互整合到一个无缝、直观的对话界面中,帮助主机厂将现有的应用平稳过渡到一个更直接的对话界面,并为用户提供生成式AI驱动的新服务。

其进一步表示,CaLLM™能够支持汽车功能、特性和要求,并可以通过训练、微调和专属的应用,为汽车制造商进行深度定制。此外,它还可以为用户提供个性化以及本地信息检索,例如Cerence Car Knowledge生成式AI应用。

在NVIDIA DRIVE 上运行的CaLLM™,是赛轮思新一代车载计算平台的基础。随着汽车制造商和移动出行OEM应用生成式AI和 LLM以提升用户体验,CaLLM™满足了用户多项关键需求,并拥有独特的汽车级智能答问能力。

一般而言,算力、数据是大模型竞争的核心竞争要素,赛轮思如何破局?

具体来看,CaLLM™尝试集合赛轮思和英伟达两大细分赛道巨头的优势。在算力平台方面,赛轮思利用NVIDIA AI Foundation构建CaLLM™,其中包括NVIDIA AI Foundation Models、 NVIDIA AI Enterprise软件和NVIDIA加速计算。

操作上,其一,赛轮思将首先利用NVIDA DGX Cloud和 NVIDIA DGX系统在其广泛的数据集上训练CaLLM™,然后开发车载用户体验所需的功能;

其二,为了实现响应极快的用户体验,赛轮思将通过NVIDIA AI Enterprise在NVIDIA加速基础设施中部署 CaLLM™,这是一个端到端、云原生、安全的软件平台,可通过NVIDIA NeMo 框架和NVIDIA TensorRT-LLM 优化库,加速对LLM 的训练、微调和推理。

“通过英伟达在云计算和边缘技术方面的核心专长,赛轮思可以在其车载用户体验平台中更快速地训练、扩展和部署这些模型,从而实现更安全、更智能、更愉悦的驾乘体验。” NVIDIA汽车事业部副总裁Ali Kani表示。

数据方面,得益于近25年在汽车行业的深厚积累,赛轮思拥有经过微调、不断增长的、包含数十亿个token的汽车数据集。据悉,其提供的集成车载用户体验,远远超越一般通用LLM。

02

迈向车载语音交互2.0

事实上,赛轮思探索下一代车载语音交互已久。

回溯来看,作为细分赛道的巨头,赛轮思始终致力于车载语音交互的创新和落地。从结果层面,根据赛轮思对外释放的信息,凭借先进的AI技术和全球语言支持,其与全球80多个汽车制造商和一级供应商合作。近5亿辆在道路上行驶的汽车使用了Cerence技术,占全球汽车产量约53%。

产品层面,基于Cerence Assistant,2021年11月,赛轮思即推出Cerence Co-Pilot,核心是主动AI,突破传统基于唤醒词的被动式交互,利用实时数据、内置智能、用户偏好和车辆传感器信息实现一系列创新功能;下一代Cerence Companion,则将实现人机交互新突破,实现多模态、多感官交互。

2022年11月,Open AI发布ChatGPT3.5,2个月时间月活用户突破1亿,引发了贯穿2023年的大模型热潮,车载语音交互赛道玩家纷纷入局。同样在2022年11月,赛轮思发布了“Destination Next” 新战略,欲通过AI驱动的产品,为驾驶者带来更多创新的沉浸式多模态交互体验。

赛轮思首席执行官Stefan Ortmanns 博士在2023年中发表观点称,车载语音正处在“从典型的出行助理解决方案到沉浸式伴侣体验”的过程中,其中离不开 AI 的驱动,而这个过程中间阶段就是虚拟副驾驶 (Co-Pilot)阶段。显然,此次CaLLM™的发布,意味着赛轮思在赛道探索上又迈出实质性一步。

高工智能汽车注意到,作为细分赛道的国际巨头,本地化布局至关重要。

具体来看,赛轮思在持续就加强中国市场的布局。根据赛轮思披露的信息,其全球员工超过1700名,中国总部设于上海,有近500名员工,其中技术研发的占大部分,3个主要的研发基地分别设于上海、成都和北京,包括设于上海的世界级别设计和研发中心,还有6个主要的工程服务中心。

根据介绍,赛轮思在华市场拥有完整的产品、研发、工程、销售和专业服务能力。值得一提的是,Cerence Assistant以及Cerence Co-Pilot都是由中国研发团队负责开发,成果与全球共享,同时参与声学模型和语言模型的建模等,包括策略地利用生成式人工智能和大型语言模型LLMs以及类似ChatGPT的技术。

“中国是赛轮思最重要的战略市场之一,对中国市场的重视、以及对高速增长的中国汽车市场充满信心。未来我们将继续加大对本地客户的支持力度,竭诚为我们的客户提供更好的服务。” 2023年6月,赛轮思首席执行官Stefan Ortmanns 博士再度访华时称。

尤为值得注意的是,赛轮思在赋能车企出海方面的突出优势。

事实上,伴随电动化、智能化浪潮,国内车企正强势突围,出海成为横亘在进一步发展面前的一道必答题,由于世界各地的驾驶者的语言、用车理念各异,车企出海的长期战略,也需要针对不同市场需求开发符合当地用户使用习惯的车载功能和应用。

赛轮思可帮助车企解决这一痛点。作为细分赛道的国际巨头,赛轮思在全球有24个办事处, 在中国、加拿大、欧洲和印度设立了主要的研发中心。具体业务上,在全球语言方面,赛轮思的优势更为明显,目前可以提供34种 “全栈式”语言 、65 种TTS和110种文本IO支持,。

对于车企客户而言,赛轮思拥有丰富的经验、强大的专业服务团队和第三方整合资源,只需要较短的开发周期,通过可扩展的AI核心产品架构,全面满足OEM在集成最新的AI技术、升级嵌入式和云技术的需求,打造品牌的差异化,并大大缩短新产品上市时间。

值得一提的是,基于遍布全球的业务,赛轮思在提供跨越语言、文化和地域的解决方案同时, 还为车企的出口市场提供深入的本地化专业知识,对于国内车企制定扩展海外市场的策略上别具意义,其产品和解决方案均符合欧洲GDPR《通用数据保护条例》标准,并在全球范围内密切关注政府法规。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/248431.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

正则表达式(RE)

什么是正则表达式 正则表达式,又称规则表达式(Regular Expression)。正则表达式通常被用来检索、替换那些符合某个规则的文本 正则表达式的作用 验证数据的有效性替换文本内容从字符串中提取子字符串 匹配单个字符 字符功能.匹配任意1个…

在centos 7 中 安装 配置 并 远程连接 MySQL5.7

目录 安装MySQL 1.卸载CentOS7系统自带的mariadb 2.安装依赖库 3.上传MySQL并解压 4.安装MySQL 配置MySQL 1.修改登录密码 2.修改字符集 3.配置远程连接 前言: 安装MySQL版本:mysql-5.7.30-1.el7.x86_64.rpm-bundle 文件需求后台私信 以下7条为…

(蓝桥杯每日一题)求最长回文串

问题描述 给出一个长度为 n 的小写字符串,求一个最长的子串 S,满足SXY,X,Y>1,且X,Y 均为回文串。 输入格式 输入包括一行: 第一行是一个长度为 n 的小写字符串。 输出格式 输出包括一行: 一行一个整数,表…

STM32连接阿里云物联网平台

文章目录 引言一、STM32连接阿里云物联网平台思路二、ESP8266烧录固件三、使用AT指令连接阿里云物联网平台四、STM32环形串口缓冲区驱动程序五、STM32连接阿里云驱动程序 引言 连续写了两篇关于阿里云连接的文章,都是使用Arduino ESP8266 & Arduino ESP32的方式…

关于如何将Win幻兽帕鲁服务端存档转化为单人本地存档的一种方法(无损转移)

本文转自博主的个人博客:https://blog.zhumengmeng.work,欢迎大家前往查看。 原文链接:点我访问 **起因:**最近大火的开放世界缝合体游戏幻兽帕鲁的大火也是引起了博主的注意,然后博主和周边小伙伴纷纷入手,博主也是利…

安装好IntelliJ IDEA点击无反应,如何解决配置文件不一致导致的启动问题

在我们的开发生涯中,遇到IDE工具出现问题是在所难免的。最令人头疼的莫过于,你的IDEA(IntelliJ IDEA)无法启动,而且没有任何错误提示。这篇文章将详细讲解如何解决IntelliJ IDEA 2023.3.3版本启动失败的问题,这个问题可能也适用于…

LeetCode.2808. 使循环数组所有元素相等的最少秒数

题目 题目链接 分析 我们最终形成的数组一定是当前数组nums 中的一个数字。 所以我们的想法就是枚举数组 nums 中的所有数字,取最小值。 题目告诉我们每一秒都可以向左右扩散一位,那么多个相同的 x 同时扩散,扩散完整个数组耗时就取决于两…

使用.NET6 Avalonia开发跨平台三维应用

本文介绍在Vistual Studio 2022中使用Avalonia和集成AnyCAD Rapid AvaloniaUI三维控件的过程。 0 初始化环境 安装Avalonia.Templates dotnet new install Avalonia.Templates若之前安装过可忽略此步骤。 1 创建项目 选择创建AvaloniaUI项目 选一下.NET6版本和Avalonia版…

文件上传之大文件分块上传进度控制处理

在分块上传内容结束以后的事件监听,我们会实现 unlinkSync 删除临时文件操作,那么试想一下,在这个事件监听中,我们是否可以通过totalChunks以及currentChunk获取当前上传的进度情况呢? 后端 upload上传接口&#xff…

学习嵌入式的第十二天-------二维数组函数的调用和指针的运算

二维数组函数调用 输入设备-------cpu------输出设备 | V 存储器 总线: 总线宽度:32位或64位 (1.数据总线2.控制总线3.地址总线) 练习: 定义一个二维整型数组,实现一个函数…

KAFKA高可用架构涉及常用功能整理

KAFKA高可用架构涉及常用功能整理 1. kafka的高可用系统架构和相关组件2. kafka的核心参数2.1 常规配置2.2 特殊优化配置 3. kafka常用命令3.1 常用基础命令3.1.1 创建topic3.1.2 获取集群的topic列表3.1.3 获取集群的topic详情3.1.4 删除集群的topic3.1.5 获取集群的消费组列表…

尝试搭建域

使用window 7 作为dmz 主机 server_2008 作为 预控 前提两台主机都在同一个LAN 下(设置一个LAN 区域),同样防火墙关闭状态 首先搞定server 2008 中的域 1. 在计算机属性中选择更改设置中将主机名修改一下: 2. 在server 2008 中…

代码随想录 Leetcode222.完全二叉树的节点个数

题目&#xff1a; 代码&#xff08;首刷自解 2024年1月30日&#xff09;&#xff1a; class Solution { public:int countNodes(TreeNode* root) {int res 0;if (root nullptr) return res;queue<TreeNode*> deque;TreeNode* cur root;deque.push(cur);int size 0;w…

编译opencv4.6问题汇总,第三方软件包见我发的资源

win10系统 python3.8.2&#xff0c;cmake-3.15.5-win64-x64&#xff0c;opencv4.6 编译方式见&#xff1a;OpenCV的编译 - 知乎 本文主要总结问题。赠人玫瑰手留余香。 问题1 Problem with installing OpenCV using Visual Studio and CMake (error code: MSB3073) 解决方法…

Java 字符串 07 练习-手机号屏蔽、身份证号信息查看,游戏骂人敏感词替换

注意点&#xff1a;只有返回值才是被截取的小串&#xff0c;所以需要有一个变量去承接它&#xff1b; 自己写的代码&#xff1a; import java.util.Scanner; public class practice {public static void main(String[] args) {Scanner input new Scanner(System.in);String …

Walrus 实用教程|Walrus + Gitlab,打通CI/CD 自动化交付!

Walrus file 是 Walrus 0.5 版本推出的新功能&#xff0c;用户可以通过一个非常简洁的 YAML 描述应用或基础设施资源的部署配置&#xff0c;然后通过 Walrus CLI 执行 walrus apply或在 Walrus UI 上进行import&#xff0c;将 Walrus file 提交给 Walrus server&#xff0c;由 …

【Python笔记-设计模式】单例模式

一、说明 单例是一种创建型设计模式&#xff0c;能够保证一个类只有一个实例&#xff0c; 并提供一个访问该实例的全局节点。 (一) 解决问题 维护共享资源&#xff08;数据库或文件&#xff09;的访问权限&#xff0c;避免多个实例覆盖同一变量&#xff0c;引发程序崩溃。 …

多线程c++

目录 1.join和detach区别 2.lock_guard和unique_lock 3.原子操作 4.条件变量condition_variable 5.future 和 promise 1.join和detach区别 ①不使用join和detach #include <iostream> #include <thread> #include <windows.h>using namespace std;v…

docker由浅入深

一、什么是docker docker 顾名思义就是轮船的意思&#xff0c;轮船我们知道是通过集装箱运载货物的东西&#xff0c;那么docker其实也是类似的东西&#xff0c;只是装载的是虚拟的运行程序罢了。其中集装箱在docker里面被称为container&#xff08;后面以容器称之&#xff09;…

彻底解决 MAC Android Studio gradle async 时出现 “connect timed out“ 问题

最近在编译一个比较老的项目&#xff0c;git clone 之后使用 async 之后出现一下现象&#xff1a; 首先确定是我网络本身是没有问题的&#xff0c;尝试几次重新 async 之后还是出现问题&#xff0c;网上找了一些方法解决了本问题&#xff0c;以此来记录一下问题是如何解决的。 …