您好!欢迎光临无锡天派电子科技有限公司,我们竭诚为您服务!

专注实验教学仪器研发制造

高校教学实验设备及解决方案供应商

服务咨询热线:

18260476976

多模态交互开发套件

产品分类: 人工智能机器人实验实训系列

AI 时代下人机交互方式发生了巨大变革,从传统的按键和触摸交互开始向语音+ 视觉的多模态交互方式转变,像人们日常生活中使用的智能音响、语音输入法、人脸考勤等等无不涉及 AI 多模态交互。

订购热线:0510-85131559 18260476976

立即咨询
产品详情

1)产品简介与定位
 AI 时代下人机交互方式发生了巨大变革,从传统的按键和触摸交互开始向语音+  视觉的多模态交互方式转变,像人们日常生活中使用的智能音响、语音输入法、人脸考勤等等无不涉及 AI 多模态交互。
  

该套件集成了科大讯飞(苏州)科技有限公司自主研发的环形麦克风阵列,奥比中光的深度相机和英伟达的 GPU 嵌入式板,学生和开发者可基于此套件轻松获取音视频相关传感器数据,并进行应用和算法实践。


 2)产品外观

 image006.png

 

3)产品规格

序号

技术参数

指标和性能

1

产品尺寸

135*135*43mm

2

产品净重

0.6kg

3

产品颜色

黑色

4

环境要求

储存温度:-25℃~60℃;工作温度:-10℃~60℃

5

核心处理器

四核 A57(主频    1.43GHz)、128CUDA、4GB LPDDR4、16GB 板 载 eMMC

6

AI 传感器 1:环形 6MIC    阵列  

6 个麦克风、360°声源定位、5 米收音范围、USB 通信、支持自定义
       唤醒词(无限次数)、板载声源定位及回声消除算法、支持实现全双工语音交互。

7

AI 传感器 2: IMU    姿态检测模块

俯仰/横滚(静态):0.05° 俯仰/横滚(动态):0.1°    相对航向(静态):2°/hr 相对航向(动态):5°/hr 角度分辨率:<    0.01 数据输出频率:200Hz
       通信接口:板载 UART(垂直参考模型,无磁力计)

8

AI 传感器 3:深度相机

工作原理:双目+结构光    深度范围:0.3-3m 深度精度:1M±1-3mm 延时;30-45ms
       深度图像分辨率:640*400@30FPS、320*200@30FPS
       彩色图像分辨率:1920*1080@30FPS、1280*720@30FPS、640*480@30FPS 视场角:水平 FOV79.7°、垂直 FOV65.5°、对角 FOV96°
       安全性:Class1 激光

9

系统

ubuntu18.04+ROS    Melodic

10

扩展接口

4 路 USB(3.0 和 2.0 兼容),1 路千兆网卡,1    路 HDMI,1 路 UART

4)产品特点

      • 语音和视觉传感器的通信方式为  USB 通信,拓展便利,位置灵活,方便开发者进行二次开发;

      • 集成了业内首款支持自定义唤醒词(离线)的环形麦克风阵列,开发者可自主定义自己的作品名称;

      • 平台基于  ROS 机器人操作系统,驱动层与应用层分离,开发者可一键发布所需要的 AI 传感器数据,避免浪费大量时间在硬件适配的工作上。

5)基于该平台可实践的学习内容
 包括但不限于以下知识点及内容:
智能语音类:麦克风阵列介绍、语音唤醒、声源定位、回声消除等语音领域的概念讲解,离线命令词识别、语音识别与合成等语音相关  AI 能力的集成,交互逻辑的构建与交互平台的接入实践;计算机视觉类:图像分类与识别,活体检测,数据标注、模型训练、模型部署与验证、TensorFlow、TensorRT  和 Deepstream 等工具的使用。

推荐产品
联系我们
无锡天派电子科技有限公司
客服QQ:2669408838
服务热线:18260476976
售后服务:0510-85131559
电子邮件:18260476976@163.com
公司地址:无锡市蠡湖新区建筑西路567号宝通大厦1605室
亚洲欧美日本国产在线观18_第九色区av天堂_午夜福利看片