移动互联网嵌入式物联网人工智能创新实验室：智能自动驾驶实训平台

1.1 AI+自动驾驶实训平台

1.1.1 图文介绍

? 基本介绍：

智能自动驾驶实训平台是全面验证各种最新自动驾驶技术的平台，集成各种边缘计算传感器，以内置深度学习框架的嵌入式平台为核心，提供环境感知功能，实现目标物体精准定位和路径规划等功能。学生使用该平台，可以掌握各种自动驾驶汽车领域的相关应用技术。

? 主要特性：

1.基于嵌入式平台实现边缘计算智能 2.基于红外+超声波的障碍物感知和避障功能 3.提供远景摄像头，模拟汽车3D视觉感知功能 4.基于激光雷达实现点云环境感知功能 5.进口轴承，适应多种地形

- 1 -

6.配备麦克纳姆轮，能向8个方向移动 7.全部源代码开放和详细的实验指导书。 ? 实训项目一：室内导航 1）基本介绍

室内导航在建筑物内，仍能利用精确的定位功能确定自己的位置并找到想去的地方的技术。首先，通过地图构建技术，根据位置估计和地图进行自身定位，同时建造增量式地图；然后通过自主导航技术，进行路径规划，根据路径前往目的地；同时在路径中根据传感器信息实现实时避障效果。

2）实训列表

实训1：基于激光雷达的SLAM地图构建 实训2：基于激光雷达的SLAM自主导航 实训3：基于三维视觉的SLAM地图构建 实训4：基于三维视觉的SLAM自主导航

实训5：基于复合3D深度环境感知自主导航实验 ? 实训项目二：智能应用 1）基本介绍

现今的人工智能是火热的浪潮，所以学习利用人工智能结合机器人实现功能，使其应用更加智能化，学习的内容有通过语音识别进行机器人的控制，人脸识别实现，目标检测识别，交通识别控制小车的智能驾驶。

2）实训列表

实训1：基于深度学习的语音控制 实训2：基于深度学习的人脸识别 实训3：基于神经网络的目标识别 实训4：基于神经网络的交通识别 ? 实验截图：

1.1.2 产品参数 设备部件 参数指标 智能边缘计算网关采用工业级铝合金一体屏设计，AI最强嵌入式边缘计算处理器RK3399，4G+16G内存配置，10寸高清电容屏，可运行ubuntu、ROS、android多操作系统系统，能够完成人工智能视觉、机器控制等课程的教学和实验实践。 详细参数： 1.RK3399处理器，ARM 64位大小核架构，Cortex-A72和Cotex-A53多核处理器，四核Mali-T860 GPU，4GB LPDDR4，16GB EMMC。 主控单元 2.10.1寸1280*800 LVDS高清屏，10点触控电容屏，工业级铝合金一体屏外壳 3.2.4G&5G双频Wi-Fi模组，BLE4.1模组，全网通LTE通信模组，GPS&BDS双频定位模组，ZigBee&LoRa传感网AP模组。 4.1000M LAN，HDMI、Type-C OTG，USB 3.0 Host，USB 2.0 Host*2，USB Debug UART，RS232，RS485，TF Card，MIC，喇叭，24PIN嵌入式拓展接口。 5.1080P工业级AI宽动态摄像头，125度广角镜头焦距，提供网络视频

传输，AI视觉图像视频捕捉处理。 6.嵌入式设备拓展：24PIN嵌入式接口板，集成GPIO/PWM双驱动LED*4，按键*2，IIC接口陀螺仪&加速度&地磁仪，IIC接口OLED，ADC接口TVOC，8*8矩阵LED，步进电机，STM32协处理器。 1.型号：Intel RealSense Depth Camera D415： 2.最小深度距离：0.16米 3.深度视野：65°±2°x40°±1°x72°±2° 深度摄像头 4.深度流输出分辨率、帧速率：1280x720&90fps 5.RGB传感器视野：69.4°x42.5°x77°(± 3°) 6.RGB传感器分辨率、帧速率：1920x1080&30fps 7.最大范围：10米 深度摄像头 USB3.0接线 1.线型：USB?C 3.1 Gen 1 2.线长：0.5m 六自由度机械臂： 机械臂 1.总线舵机，一根信号线控制6个舵机 2.遇到阻碍自动停止，避免烧毁 3.大扭力舵机，扭矩15kg·cm RK3399通信线 1.线型：Mini-USB 2.0 2.线长：0.2m 1.尺寸：287mmx238mm 2.配备麦克纳姆轮，能向前、后、左、右、左前、右前、左后、右后8底盘 个方向移动 3.进口轴承，承重40kg，适应多种地形 4.麦克纳姆轮直径77mm，轮横距200mm，轴距215mm 5.电机减速比1:90，编码器磁极数11 1.额定输出电压：11.1V 电池 2.容量：5200mA·h 3.放电倍率：30C 1.型号：LiDAR Delta3 2.量程：0.15m-16m 3.采样率：8k/s 4.扫描频率：5-15Hz（可调） 激光雷达 5.激光波长：780nm 6.激光功率：3mW 7.精度：<1%@16m 8.测量分辨率：0.25mm 9.通讯接口：UART(TTL)

ZigBee天线/WIFI天线 2.4G棒状天线 4G天线 电源线 4G棒状天线 1.线型：双公弯头DC电源线 2.线长：0.2米 1.1.3 课程资源 自动驾驶实训平台可完成的主要课程如下： 课程名称 课程内容 以人工智能产业应用项目为核心，通实际的项目案例和真实工程任务管理模式 《自动驾驶实行对项目任务的开发与实践，包括方案分析、硬件课程大纲 出版教材/推荐教材 1）智能驾驶概述（硬件介绍、内部教材（待完成），预软件介绍、综合体验） 2）自主导航（机器人SLAM地图构建及导航、激光雷达SLAM地图构建及导航、三维视觉计出版时间2022-02-01前 算法设计、应用设计、SLAM地图构建及导航、复合项目实训》 设计、功能测试等完整的开发流程。通过本课程的学习可以使学生掌握人工智能项目的设计与开发思路，掌握人工智能在产业里面的技术应用和创新，使学生获得实际人工智能项目的设计与实施能力。 3D深度环境感知地图构建及导航） 3）自主避障（基于红外和超声波的避障、基于激光雷达的避障、基于远景摄像头的机器视觉避障） 4）语音控制（智能自动驾驶小车语音唤醒、智能自动驾驶小车语音识别、智能自动驾驶小车语音控制） 5）机器视觉（智能车道线识别、智能车牌识别、智能交通信号识别、智能行人目标识别） 6）综合案例（激光雷达的无人驾驶汽车控制、机器视觉的无人驾驶汽车控制）