随着大模型技术的不断发展,大模型的应用越来越受到行业的重视。如何在智能硬件的语音交互上快速应用和普及大模型,一直是业内热议和探索的话题。1月9日,科大讯飞AIUI人机交互开放平台推出了大模型极速超拟人交互软硬件方案,并开源了SDK接入代码,大幅降低了接入门槛。用户只需简单更换配置信息,即可体验速度快、效果优的AIUI语音交互功能。即使算力低的设备也能支持接入,为智能硬件语音交互带来全新的体验。
云端大模型赋能,交互 “快准暖”
AIUI大模型交互具备卓越的语义理解能力,无论是复杂指令的泛化表达,还是天马行空的提问,都能流畅应对。它能够精准捕捉用户的每一个问题、情感需求或创意要求,实现真正意义上的自由对话,让设备不再是简单的指令执行者,而是能够理解并满足用户深层次需求的智能伙伴。
有了科大讯飞AIUI大模型交互的全链路交互能力,智能硬件能够实现超拟人的秒级回复,多轮对话自然流畅。即使用户在交流过程中打断或插话,系统也能无延迟响应,为用户提供类似真人的对话体验。
【大模型极速超拟人交互图】
目前,科大讯飞大模型极速超拟人交互软硬件方案支持人设、方言、情感语气的自由切换,能够精准感知用户的喜怒哀乐,并结合对话情境给出拟人的情绪反应。例如,当用户感到沮丧时,设备会用温柔的语气给予安慰和鼓励;在轻松愉快的氛围中,设备则会用活泼的语调与用户互动。赋予设备更真实的情感,拉近与用户的距离。
此外,为满足用户的多样化需求,科大讯飞还为接入的设备提供海量正版儿歌、音乐、故事等多种音频资源。无论是孩子在睡前需要听故事,还是用户在休闲时想听音乐放松,都能在设备中找到丰富的内容选择,提升日常陪伴的娱乐性和教育性。
开源接入SDK,低配置要求高效能体验
面向低成本、低算力智能硬件设备大模型交互接入难、门槛高的问题,科大讯飞开放了极速超拟人交互接入的代码,极大地降低了硬件接入门槛。它能在低算力、低内存设备上稳定运行,支持ROTS、Linux、安卓、鸿蒙等多种主流操作系统,智能硬件厂商无需投入大量研发资源,即可快速实现设备的智能语音交互功能,推动极速超拟人交互技术的普及和应用。
在硬件方面,科大讯飞采用了AC7911芯片打造硬件模组,为设备厂商提供低功耗和低成本的软硬件一体化解决方案。厂商可以直接“开箱”即用,无需复杂的硬件设计和调试过程,大大缩短了项目验证与快速部署语音交互能力的时间,加速智能硬件产品的上市进程。
【大模型极速超拟人交互的AC7911硬件模组】
整体接入过程非常简单,用户下载开源的极速超拟人交互接入SDK后,可以直接修改鉴权参数调用大模型能力。如果要适配自有硬件和操作系统,可以在SDK的框架下进行二次开发。以Linux环境为例,极速超拟人交互接入SDK应用包括五步:
注册AIUI平台账号,获得开发权限。
创建语音交互应用,获得鉴权密钥。
下载SDK,填写鉴权信息,配置appid、scene、key和secret。
安装必需软件。
sudo apt install cmake libjack-jackd2-dev libasound2-dev pkg-config libpulse-dev
编译、运行,体验极速超拟人交互。
cd aiui_embedded_sdk
mkdir build
cd build
cmake ..
make
cd ../tool/deploy/bin/
./aiui_demo
在AIUI开放平台的文档中心,在目录中选择“AIUI极速超拟人交互接入”后,可下载到开源接入SDK的代码压缩包、接口文档及效果演示视频。
【大模型极速超拟人交互开发文档及SDK接入源文件获取】
多场景应用,开启智能未来
科大讯飞的大模型极速超拟人交互方案具有广泛的应用潜力,能够赋予生活中的各种设备“开口说话”的能力,尤其在陪伴、教育等场景中优势独特。
【大模型极速超拟人交互应用领域框架图】
在亲子互动场景中,传统的语音交互玩具往往只能点播固定故事,难以满足孩子天马行空的创意需求。而搭载科大讯飞大模型极速超拟人交互方案的智能玩具,能够根据孩子的想法,流畅地生成全新的故事内容。例如,当孩子要求玩具讲一个“熊大熊二与变形金刚大战哥斯拉”的故事时,玩具不仅不会因找不到相关故事而拒绝,反而会结合各种元素,创造一个充满想象力的故事场景,鼓励孩子一起参与情节的编排,激发他们的创造力和想象力。
在家庭陪伴场景里,人形机器人通过科大讯飞大模型极速超拟人交互方案,能够更好地理解用户的情感状态,并及时作出恰当的回应。它不仅能完成各种任务指令,还能在用户需要时提供安慰与鼓励。当用户感到孤独或压力大时,机器人可以用温柔的语气陪伴用户聊天。甚至复刻家人的声音与用户交流,提供更真切、更贴心的情感支持,让家庭氛围更加温馨和谐。
在教育场景中,科大讯飞大模型极速超拟人交互方案赋能学习机,重塑语言学习体验。于儿童口语启蒙而言,借聊天互动助力发音练习与表达能力提升;在学习外语时,轻松的对话互动有效扩充词汇量,显著增强听说能力,使语言学习充满趣味与成效。
在这个万物互联的时代,智能硬件正逐渐渗透到生活的每一个角落。科大讯飞大模型极速超拟人交互方案不仅提升了硬件设备的智能化程度,还拓宽了设备与用户的互动场景。接下来,随着讯飞星火大模型技术的不断进步,科大讯飞将继续引领智能硬件交互的发展潮流,携手合作伙伴共同打造更加智能的生活环境,开启智能硬件发展的新篇章。