
- LGJT-SJ01型 智慧交通大數據實驗平臺
- LGWL-HMC01A型 智能網聯座艙實訓臺(鴻蒙系統)
- LGX-SC12型SCADA遠程微電網電力監控調度系統
- LGX-SN01型室內監控系統
- LGX-SW01型室外氣象監測系統
- LGX-ZH02型微網綜合能源接入柜
- LGX-NL01型微網能量管理系統
- LGX-ZN06型儲能雙向變流柜
- LGX-F12型UPS輔助電源柜
- LGX-W04型微網無功補償柜
- LGX-W03型微網負荷出線柜
- LGX-W02型微網進線旁路柜
- LGX-W01型微網進線計量柜
- LGX-D10型鋰電池儲能柜
- LGX-GF01型光伏電站系統
- LGX-CN5KW型 5KW光伏儲能發電實訓系統
- LGY-XN012A型太陽能光伏發電綜合實訓系統
- LGY-GF05A型小型光伏電站運行與維護實訓系統
- LGY-DW02A型智能微電網實訓系統(直流母線)
- LGY-FD015A型雙饋型風力發電機組實訓考核設備
- LGY-FD01A型風光互補發電實訓系統
- LGY-FD01B型風光互補發電實訓系統
- LGX-FG02型 風光電互補發電實訓系統
- LGX-GF01B型 太陽能光伏并網發電實訓臺
- LGX-GF02型 太陽能光伏發電綜合實訓系統
- LGX-F01型 風力發電系統實訓平臺
- LG-GF05型 風光互補發電實驗臺/風光互補發電系統實訓裝置
- LG-LB01B型 輪轂旋轉變槳機艙跟蹤實訓裝置 (豪華型)
- LG-GF02型 太陽能教學實驗臺,光伏太陽能實訓臺
- LG-FX03型 風向跟蹤風力發電實訓裝置
- LG-WP01型 風光互補發電實訓系統
- LG-WP02型 樓宇新能源光伏發電實訓裝置
- LG-DYRB1型 地源熱泵系統測試儀
- LG-PD02型 連續太陽模擬器
- LG-FD03型 太陽能電池組件/陣列評測系統
- LG-RJ02D型 可再生能源建筑應用測評系統
- LG-RJ02C型 太陽集熱管熱性能測試系統
- LG-PZ型 太陽集熱管真空品質測試儀
- LG-FS01型 太陽集熱管半球發射比測試儀
- LG-PD01A型 半自動單片測試儀
LGWL-HMC01A型 智能網聯座艙實訓臺(鴻蒙系統)
一、產品簡介
智能座艙實訓臺是一款融合了物聯網控制、車載網絡CAN總線、人工智能開發、開源應用開發、Qt應用軟件開發的實驗平臺,能夠滿足智能網聯專業智能座艙課程、物聯網控制與嵌入式操作系統課程、人工智能應用課程的實驗實訓的要求。
平臺包含中控計算平臺系統、車機及其顯示器、視覺傳感器、麥克風陣列、音響設備、座艙艙體(含座椅、雨刮、車窗、方向盤、剎車踏板、加速踏板)、超聲波雷達、毫米波雷達等硬件,結合中控軟件系統、車機軟件、座椅控制程序,實現手勢識別、人臉識別、語音交互、駕駛員疲勞駕駛檢測、座椅遠程調節、雨刮車窗控制、車載傳感器監測、車機應用娛樂等功能。
二、產品組成
產品包括智能座艙實訓臺體和智能座椅艙體兩部分。
實訓臺體主要安裝了中控計算平臺、車機控制器、顯示器、視覺傳感器、麥克風陣列、揚聲器及音響、超聲波雷達及其四個探頭、毫米波雷達、激光雷達、以及網絡組建設施。布局如圖所示。
艙體,安裝了單臺主駕駛座椅、雨刮及電機、車窗及電機、方向盤、剎車踏板、加速踏板和座艙線控制器,通過座艙線控制器,接入到系統的CAN總線中,支持使用CAN分析工具測試艙體設備。
三、產品功能
1、座椅設施控制功能
可通過軟件控制座椅向前移動任意距離、向后移動任意距離、向上移動、向下移動、回歸零點;可以控制雨刮器擦拭擋風玻璃;控制車窗器驅動車窗升降。
2、人臉識別功能
軟件和視覺傳感器配合,能夠實現人臉檢測、人臉錄入、人臉識別調節座椅。
3、手勢識別座艙控制功能
軟件支持手勢交互功能,通過人工智能算法,能夠識別手部的關鍵點信息;軟件支持不少于4種的手勢識別;并根據手勢識別的結果,控制車載氛圍燈開、關、調節座椅前移或后移。
4、語音識別座艙控制功能
軟件支持語音交互控制功能,開啟語音識別后,可識別到用戶的語音指令,根據用戶指令發送命令,控制座艙氛圍燈開關、座艙風扇開關、座椅移動方式。
5、駕駛員疲勞檢測功能
軟件支持駕駛員疲勞或注意力不集中的狀態檢測,采用pytorch框架,真實場景拍攝的駕駛員數據,支持正常駕駛、打呵欠、低頭、打電話至少四種不同狀態的檢測。當出現疲勞或不集中狀態時,軟件語音提醒駕駛員休息。
6、汽車周身環境感知功能
軟件可以探測并可視化超聲波四路探頭前方障礙物的距離;可以設置毫米波雷達參數,對前方障礙物信息進行篩選顯示;采用ROS操作系統,和可視化機器人系統開源工具RViz,可視化顯示激光雷達四周的動態信息。
四、軟件資源
1、座艙CAN控制軟件:采用嵌入式處理器和C語言開發,驅動PWM外設接口輸出脈沖調制信號驅動座椅的前后方向轉動電機、或上下方向轉動電機,并實時檢測限位變化,控制電機及時停止;驅動車窗總成電機正反轉,實現車窗上升或下降;驅動繼電器吸合或斷開控制雨刮器的的往復擺動;實時讀取方向盤、剎車踏板、加速踏板的模擬量傳感器信號,輸出方向盤轉角、踏板深度數據;控制器具有CAN總線接口,支持CAN總線通信協議,與其他CAN總線設備通信。
2、座椅上位機控制軟件:采用PyQt進行GUI上位機軟件開發,具備TCP/IP通信程序,可以通過網絡與座艙CAN控制器進行通信,基于CAN總線協議,向座艙CAN控制器發送命令,控制座椅、車窗、雨刮相應動作,實時讀取CAN控制器的數據幀,顯示方向盤、剎車踏板、加速踏板的變化數據。
3、服務器數據處理軟件:使用ROS框架作為MQTT客戶端節點和TCP Server節點相互通信的中間層。MQTT客戶端訂閱控制類主題消息(如控制座椅、控制車窗、控制雨刮),轉發給ROS層對應的訂閱話題,通過ROS消息隊列機制存儲和轉發。TCP Server節點的ROS層訂閱后經格式轉換,解析處理,就可以通過TCP Server發送給硬件TCP客戶端進行座椅、車窗、雨刮等設備的控制。同理,TCP Server節點接收到硬件TCP客戶端CAN數據協議,經過處理,再傳輸給MQTT節點,由MQTT節點發布。此時車機MQTT客戶端訂閱消息后就可以顯示座椅位置、方向盤狀態、踏板深度等座艙傳感器數據。
4、智能座艙人機交互應用軟件:基于中控系統安裝的Anaconda及虛擬環境、CUDA、CUDNN、PyCharm、PyQt等開發環境,開發了基于Mediapipe 的手勢識別、基于MTCNN的人臉檢測和Facnet的人臉識別,基于Keras和Tensorflow深度學習框架的司機疲勞檢測,基于第三方庫的語音識別控制座艙設施等一系列智能人機交互軟件。
5、智能座艙應用軟件:基于Openharmony4.0操作系統,采用DevEco Studio IDE和ArkTs語言進行應用軟件開發。軟件內置MQTT應用協議,具有發布訂閱消息的機制,可以訂閱溫濕度、光線、空氣質量等車載環境信息、座艙線控狀態(如方向盤轉向、剎車踏板深度、加速踏板深度;也可以發布命令,控制車載氛圍燈、車載風扇,控制座椅調節、車窗升降、雨刮啟停;內嵌第三方語音識別庫,可以語音識別控制風扇、氛圍燈、車窗、雨刮;內嵌視頻播放器功能軟件。