- 電工電子電氣實訓設備
- 電力電子電機實訓裝置
- 過程控制實驗裝置
- 工業機器人智能制造
- 維修電工實訓設備
- PLC自動化實訓設備
- 數控機床實訓考核裝置
- 數控機床機械加工設備
- 機床電氣實訓裝置
- 機電一體化實訓設備
- 機械示教陳列柜
- 機械專業實驗設備
- 傳感器檢測實驗室設備
- 工業互聯人工智能實訓設備
- 特種作業操作實訓考核設備
- 物聯網實驗實訓設備
- 消防、給排水實訓設備
- 網絡布線實訓室設備
- 電梯安裝維修實訓考核設備
- 熱工暖通家電制冷實訓設備
- 樓宇智能化實訓設備
- 環境工程實驗裝置
- 流體力學實驗裝置
- 化工專業實驗實訓設備
- 新能源實驗實訓設備
- 電力供配電實訓設備
- 煤礦礦山實驗實訓設備
- 液壓氣動實驗室設備
- 教學仿真軟件
- 軌道交通實驗實訓設備
- 船舶實訓考核裝置
- 駕駛模擬訓練設備
- 新能源汽車實訓設備
- 汽車發動機底盤實訓臺
- 汽車電器電子實訓臺
- 特種車工程機械實訓設備
- 智能網聯汽車實訓設備
- 醫學教學模型
- 中小學實驗室設備
- 實驗箱.實驗儀
- 光電子通信實驗裝置
- 儀器設備.教學掛圖
- LG-DQ04型 電氣自動化技術考核實訓裝置
- LGKL-735D型 通用電工電子實訓設備(電工電子電氣數
- LG-BZH015型 光纜交接箱工程布線光電展示實訓裝置
- LG-BZH014型 數據中心工程布線光電展示實訓裝置
- LG-BZH013型 光纖熔接實訓設備
- LG-BZH012型 全光網綜合布線實訓平臺
- LG-BZH011型 網絡綜合布線故障模擬與檢測實訓裝置
- LG-BZH010型 網絡綜合布線故障模擬與檢測實訓裝置
- LG-BZH09型 光纜配線端接與測試實訓裝置
- LG-BZH08型 光纜配線端接與測試實訓裝置
- LG-BZH07型 銅纜配線端接與測試實訓裝置
- LG-BZH06型 銅纜配線端接與測試實訓裝置
- LG-DST02型 智能制造單元理實一體化平臺
- LGP-LC01型 PLC實驗臺
- LGY-LY020型 運動控制實訓裝置
- 汽車透明整車模型、運輸車輛模型
- CLG-104型《電機與變壓器》示教陳列柜(CD解說)
- CLG-109《模具》示教陳列柜(CD解說)
- CLG-107型 機械綜合陳列柜
- CLG-102型 《機械零件》示教陳列柜
- LG-DCC型 機械振打袋式除塵實驗裝置
- LG-MFL01型 超濾微濾膜分離實驗裝置
- LG-NKS型 催化劑顆粒內擴散實驗裝置
- LG-CLDF型 多釜串聯實驗裝置
- LG-YY18C型 氣動與PLC實訓裝置(T型鋁槽單面)
- LG-YY18B型 透明液壓傳動與PLC實訓裝置(T型鋁槽單面
- LG-YYCS01型 液壓傳動與控制綜合測試實驗臺
- LG-DY01B型 電液比例綜合實驗臺
- LG-YYZN01型 智能型液壓綜合實驗臺
- LG-DLK01型 電力系統綜合自動化實驗平臺
LGWL-HMC01A型 智能網聯座艙實訓臺(鴻蒙系統)
品牌:理工偉業 咨詢電話:010-82827827 82827835
一、產品簡介
智能座艙實訓臺是一款融合了物聯網控制、車載網絡CAN總線、人工智能開發、開源應用開發、Qt應用軟件開發的實驗平臺,能夠滿足智能網聯專業智能座艙課程、物聯網控制與嵌入式操作系統課程、人工智能應用課程的實驗實訓的要求。
平臺包含中控計算平臺系統、車機及其顯示器、視覺傳感器、麥克風陣列、音響設備、座艙艙體(含座椅、雨刮、車窗、方向盤、剎車踏板、加速踏板)、超聲波雷達、毫米波雷達等硬件,結合中控軟件系統、車機軟件、座椅控制程序,實現手勢識別、人臉識別、語音交互、駕駛員疲勞駕駛檢測、座椅遠程調節、雨刮車窗控制、車載傳感器監測、車機應用娛樂等功能。
二、產品組成
產品包括智能座艙實訓臺體和智能座椅艙體兩部分。
實訓臺體主要安裝了中控計算平臺、車機控制器、顯示器、視覺傳感器、麥克風陣列、揚聲器及音響、超聲波雷達及其四個探頭、毫米波雷達、激光雷達、以及網絡組建設施。布局如圖所示。
艙體,安裝了單臺主駕駛座椅、雨刮及電機、車窗及電機、方向盤、剎車踏板、加速踏板和座艙線控制器,通過座艙線控制器,接入到系統的CAN總線中,支持使用CAN分析工具測試艙體設備。
三、產品功能
1、座椅設施控制功能
可通過軟件控制座椅向前移動任意距離、向后移動任意距離、向上移動、向下移動、回歸零點;可以控制雨刮器擦拭擋風玻璃;控制車窗器驅動車窗升降。
2、人臉識別功能
軟件和視覺傳感器配合,能夠實現人臉檢測、人臉錄入、人臉識別調節座椅。
3、手勢識別座艙控制功能
軟件支持手勢交互功能,通過人工智能算法,能夠識別手部的關鍵點信息;軟件支持不少于4種的手勢識別;并根據手勢識別的結果,控制車載氛圍燈開、關、調節座椅前移或后移。
4、語音識別座艙控制功能
軟件支持語音交互控制功能,開啟語音識別后,可識別到用戶的語音指令,根據用戶指令發送命令,控制座艙氛圍燈開關、座艙風扇開關、座椅移動方式。
5、駕駛員疲勞檢測功能
軟件支持駕駛員疲勞或注意力不集中的狀態檢測,采用pytorch框架,真實場景拍攝的駕駛員數據,支持正常駕駛、打呵欠、低頭、打電話至少四種不同狀態的檢測。當出現疲勞或不集中狀態時,軟件語音提醒駕駛員休息。
6、汽車周身環境感知功能
軟件可以探測并可視化超聲波四路探頭前方障礙物的距離;可以設置毫米波雷達參數,對前方障礙物信息進行篩選顯示;采用ROS操作系統,和可視化機器人系統開源工具RViz,可視化顯示激光雷達四周的動態信息。
四、軟件資源
1、座艙CAN控制軟件:采用嵌入式處理器和C語言開發,驅動PWM外設接口輸出脈沖調制信號驅動座椅的前后方向轉動電機、或上下方向轉動電機,并實時檢測限位變化,控制電機及時停止;驅動車窗總成電機正反轉,實現車窗上升或下降;驅動繼電器吸合或斷開控制雨刮器的的往復擺動;實時讀取方向盤、剎車踏板、加速踏板的模擬量傳感器信號,輸出方向盤轉角、踏板深度數據;控制器具有CAN總線接口,支持CAN總線通信協議,與其他CAN總線設備通信。
2、座椅上位機控制軟件:采用PyQt進行GUI上位機軟件開發,具備TCP/IP通信程序,可以通過網絡與座艙CAN控制器進行通信,基于CAN總線協議,向座艙CAN控制器發送命令,控制座椅、車窗、雨刮相應動作,實時讀取CAN控制器的數據幀,顯示方向盤、剎車踏板、加速踏板的變化數據。
3、服務器數據處理軟件:使用ROS框架作為MQTT客戶端節點和TCP Server節點相互通信的中間層。MQTT客戶端訂閱控制類主題消息(如控制座椅、控制車窗、控制雨刮),轉發給ROS層對應的訂閱話題,通過ROS消息隊列機制存儲和轉發。TCP Server節點的ROS層訂閱后經格式轉換,解析處理,就可以通過TCP Server發送給硬件TCP客戶端進行座椅、車窗、雨刮等設備的控制。同理,TCP Server節點接收到硬件TCP客戶端CAN數據協議,經過處理,再傳輸給MQTT節點,由MQTT節點發布。此時車機MQTT客戶端訂閱消息后就可以顯示座椅位置、方向盤狀態、踏板深度等座艙傳感器數據。
4、智能座艙人機交互應用軟件:基于中控系統安裝的Anaconda及虛擬環境、CUDA、CUDNN、PyCharm、PyQt等開發環境,開發了基于Mediapipe 的手勢識別、基于MTCNN的人臉檢測和Facnet的人臉識別,基于Keras和Tensorflow深度學習框架的司機疲勞檢測,基于第三方庫的語音識別控制座艙設施等一系列智能人機交互軟件。
5、智能座艙應用軟件:基于Openharmony4.0操作系統,采用DevEco Studio IDE和ArkTs語言進行應用軟件開發。軟件內置MQTT應用協議,具有發布訂閱消息的機制,可以訂閱溫濕度、光線、空氣質量等車載環境信息、座艙線控狀態(如方向盤轉向、剎車踏板深度、加速踏板深度;也可以發布命令,控制車載氛圍燈、車載風扇,控制座椅調節、車窗升降、雨刮啟停;內嵌第三方語音識別庫,可以語音識別控制風扇、氛圍燈、車窗、雨刮;內嵌視頻播放器功能軟件。
五、產品清單
序號 |
類別 |
名稱 |
|
1. |
實訓臺體 |
h型臺體框架(包含供電、保護裝置、開關、指示燈) |
|
2. |
網聯傳感器 |
超聲波傳感器 |
|
3. |
|
毫米波雷達傳感器 |
|
4. |
|
16線激光雷達傳感器 |
|
5. |
|
CAN轉網模塊 |
|
6. |
|
北斗GPS定位模塊 |
|
7. |
座艙臺體設備 |
計算平臺 |
|
8. |
|
顯示器 |
19.5 |
9. |
|
視覺傳感器 |
|
10. |
|
麥克風陣列 |
|
11. |
|
鼠標鍵盤 |
|
12. |
|
OpenHarmony車機 |
|
13. |
|
車機10寸顯示屏 |
|
14. |
|
OpenHarmony環境監測模塊 |
|
15. |
|
OpenHarmony光線聯動模塊 |
|
16. |
|
功放 |
|
17. |
|
內嵌式喇叭 |
|
18. |
|
有源音響 |
|
19. |
座艙艙體設備 |
座艙線控制器 |
|
20. |
|
座椅 |
|
21. |
|
座椅加熱/通風墊 |
|
22. |
|
雨刮器 |
|
23. |
|
車窗總成 |
|
24. |
|
加速踏板 |
|
25. |
|
剎車踏板 |
|
26. |
|
座艙金屬框架 |
|
27. |
|
方向盤 |
|
28. |
網絡設備 |
路由器 |
|
|
|
工業交換機 |
|
六、課程實驗
實訓項目 |
實驗名稱 |
課時 |
智能座艙網絡互聯
|
座艙網絡互聯規劃 |
1 |
座艙網絡互聯實施 |
1 |
|
中控計算平臺部署 |
服務器中間件的安裝與測試 |
1 |
車載傳感器的感知控制
|
座椅雨刮及車窗的移動控制 |
2 |
超聲波傳感器的探測 |
2 |
|
毫米波雷達的探測及應用開發 |
2 |
|
激光雷達的探測及應用 |
2 |
|
座艙人機無感交互
|
開發環境安裝與測試 |
2 |
人臉識別應用開發 |
2 |
|
手勢識別控制系統應用開發 |
2 |
|
語音識別控制系統應用開發 |
2 |
|
疲勞駕駛檢測系統應用開發 |
2 |
|
開源車機應用
|
OpenHarmony 開發環境搭建和eTS入門 |
1 |
OpenHarmony艙內控制器的控制開發 |
2 |
|
OpenHarmony座艙內環境參數采集開發 |
2 |
|
OpenHarmony語音助手的功能實現 |
2 |
|
OpenHarmony車機娛樂應用開發 |
2 |
|
OpenHarmony座艙綜合應用開發 |
2 |
|
|
共32課時 |