【会议内容】2023.6.26~2023.6.27

[kurisaW]

会议内容

• 对整体的系统框架分析、软件系统框架设计（小车底盘运动系统[g4]、主系统[f4]、UI系统[h7]）
• 串口通信数据帧的打包与解析
• 云端数据转发逻辑框架
• UI设计、触发逻辑
• 语音交互（语音识别、语音播报）
• 传感器模块使用逻辑

---

• 解决一下目前工程现有的问题
• 复盘下目前完成的项目部分
• 总结当前还存在的项目难点（未解决）
• 对未来一周的任务进行列举

[kurisaW]

复盘下目前完成的项目部分

kurisaw

• 麦克纳轮驱动+运动模式设计模式
• 小车底盘运动逻辑软件系统框架
• MPU9250九轴传感器
• BH1750光照传感器
• BMP280气压传感器

guapi

• 阿里云云端发送接收消息
• UI设计
• GPS（待测试）

[kurisaW]

总结当前还存在的项目难点（未解决）

• 4G外网透传
• 串口通信数据帧的打包与解析---需要解决沾包、分包、封包等问题
• 串口多路复用

[kurisaW]

云端数据转发逻辑框架（发送需求）

本地->云端

1. 气象传感器数据采集（温湿度、气压、光照）（云端处理）

• 温湿度
• 气压
• 光照

将数据发送至云端即可：命令触发->开始采集->发送云端

2. 环境监测数据采集（噪声、颗粒浓度）（非云端处理）

• 噪声
• 颗粒浓度

本地实时监测，一旦超过阈值，立即记录当前数据值、当前时间、当前经纬度信息，保存到本地日志库

3. 小车异常状态信息（非云端处理）

（1）车辆姿态

• 障碍物（设计一个避障模式--->底盘运动逻辑系统那块设计）
• 车身姿态异常（跌倒）--->语音提示行人能否帮助归正姿态 | 发送短信至指定用户，提示车辆姿态异常

（2）车辆电量信息

本地实时监测电池电量信息，一旦低于临界值，立即通过AT指令发送短信至指定用户

4. GPS数据云端解析--->地图展示 （云端处理）

在本地实时解析GPS数据，将解析出的地理位置信息通过Topic流发送至云端

5. 本地AI相机识别（非云端处理 + 云端处理）

AI模型的应用主要是作为城市火灾监测，设定两个等级：

Lever1：（AI特征值不明显，不足以触发火灾识别效果）根据温湿度传感器监测当前的气候特征，如果存在火灾隐患，触发语音提示：注意防火（扩大提示频率）

Lever2：通过AI相机监测到火灾发生的高特征--->

• (1) 语音提示（救火、防火）
• (2) 通过4G模块进行电话报警
• (3)每隔10s截取当前一帧图片（共十副图片），发送至云端 （云端处理）

6. 远程遥控指令接收 （云端处理）

本地需要提前设计好运动指令接收模式，收到云端具体的某些指令后，能够自动执行对应的底层运动逻辑

[kurisaW]

云端数据转发逻辑框架（接收需求）

云端、云端--->本地

1. 城市气象采集数据指令（云端--->本地）

当需要执行气象数据采集任务时，云端向本地发送采集指令，本地这块需要做好即时接收指令的功能，并启动采集任务

2. GPS数据解析--->地图显示（云端）

本地在发送GPS信息后，云端这块需要进行解析，并能够在地图上看到当前坐标（轨迹）

3. 云端遥控小车

借助物联网云平台，最好有配套APP，设计一款控制UI应用，发送相应的运动指令后，本地接收到指令后执行运动逻辑（云端--->本地）

[kurisaW]

UI设计、触发逻辑

1. 当前已实现的界面：

(1) 主界面UI：4G信号强度、当前网络时间、网络温湿度信息、当前电量、项目的一些基本信息
(2) 小车运动状态UI：当前位置、速度、方向、行驶时间、行驶距离
(3) 监测信息UI：气象数据--->语音触发：读取当前气象数据[设计一个图标形式，留出数据接口]；监测数据--->读取当前监测数据(从F4获取，一旦有超标信息除了F4端对应的处理逻辑，还需要将数据封装起来发送给监测UI，以触发方式显示该数据，文本格列表列出)
(4) 预警及示警UI

2.触发逻辑

(1) 传感器触发：恶劣城市环境（噪声超标、尘雾浓度过大）--->示警UI
(2) 小车状态；异常姿态--->示警UI
(3) AI相机识别：火灾 Level1--->预警UI
(4) 车载电量：电量值过低--->预警UI

[kurisaW]

语音交互（语音识别、语音播报）

1.场景需求

(1) 车身姿态：当小车车身姿态异常时，触发语音提示行人帮助归正姿态（系统触发） G4->F4，执行语音任务
(2) AI相机识别：Level1：提示路人小心防火；Level2：救火、防火（系统触发） H7->F4，执行语音任务
(3) 监测信息UI：用户可语音指定命令，在UI界面对应显示相应UI："查看气象数据" | "查看城市异常监测数据"（分别对应设计UI）（用户主动触发） F4->G4，执行UI任务
(4) 电量提示：如果当前电量过低，自动语音提示 "电量过低，不足以支持巡航，请及时充电"（系统触发）
(5) 操作员远程喊话（可不实现）

2.任务

• 语音识别
• 语音播报

[kurisaW]

传感器模块使用逻辑

1.当前所使用的传感器列表

• mpu9250九轴传感器：获取车身姿态信息、获取行驶距离、行驶时间、车速（G4:I2C）
• ATGM332D GPS模块：本地获得GPS数据，在云端进行解析，能够实时查看当前位置(F4:UART)
• LM386声音传感器：监测噪声是否超标(F4:AD)
• 语音模块：语音识别、语音播报(F4:UART)
• SIM7600CE：4G模块，提供网络能力---换成移动网卡(无需外设资源)
• 温湿度传感器：温湿度数据获取(F4:AD)
• BMP280气压传感器：气压数据获取(F4:I2C)
• BH1750光照传感器：光照数据获取(F4:I2C)
• GP2Y10 PM2.5颗粒传感器：监测尘雾浓度是否超标(F4:AD)
• 避障模块：避障功能(G4:AD)

2.模块使用逻辑

[kurisaW]

串口通信数据帧的打包与解析

此处参考软件包Upacker

[kurisaW]

对未来一周的任务进行列举

kurisaw

• 串口数据帧的打包与解析
• 底盘机器人软件系统设计(G4)
• 车速PID设计
• 小车行驶距离、行驶时间、车速获取
• 主系统软件系统设计(F4)
• 将模型部署到ART-PI上
• 选购语音模块
• 4G方案选择、无线网卡

guapi

1.语音播报
2.语音识别
3.完善UI
-----监测信息UI：气象数据--->语音触发：读取当前气象数据[设计一个图标形式，留出数据接口]；监测数据--->读取当前监测数据[从监测日志库中读取监测数据，文本格列表列出]
4.云端接口修改
-----上报数据接口修改
-----接收数据接口修改