- 電工電子電氣實(shí)訓設備
- 電力電子電機實(shí)訓裝置
- 過(guò)程控制實(shí)驗裝置
- 工業(yè)機器人智能制造
- 維修電工實(shí)訓設備
- PLC自動(dòng)化實(shí)訓設備
- 數控機床實(shí)訓考核裝置
- 數控機床機械加工設備
- 機床電氣實(shí)訓裝置
- 機電一體化實(shí)訓設備
- 機械示教陳列柜
- 機械專(zhuān)業(yè)實(shí)驗設備
- 傳感器檢測實(shí)驗室設備
- 工業(yè)互聯(lián)人工智能實(shí)訓設備
- 特種作業(yè)操作實(shí)訓考核設備
- 物聯(lián)網(wǎng)實(shí)驗實(shí)訓設備
- 消防、給排水實(shí)訓設備
- 網(wǎng)絡(luò )布線(xiàn)實(shí)訓室設備
- 電梯安裝維修實(shí)訓考核設備
- 熱工暖通家電制冷實(shí)訓設備
- 樓宇智能化實(shí)訓設備
- 環(huán)境工程實(shí)驗裝置
- 流體力學(xué)實(shí)驗裝置
- 化工專(zhuān)業(yè)實(shí)驗實(shí)訓設備
- 新能源實(shí)驗實(shí)訓設備
- 電力供配電實(shí)訓設備
- 煤礦礦山實(shí)驗實(shí)訓設備
- 液壓氣動(dòng)實(shí)驗室設備
- 教學(xué)仿真軟件
- 軌道交通實(shí)驗實(shí)訓設備
- 船舶實(shí)訓考核裝置
- 駕駛模擬訓練設備
- 新能源汽車(chē)實(shí)訓設備
- 汽車(chē)發(fā)動(dòng)機底盤(pán)實(shí)訓臺
- 汽車(chē)電器電子實(shí)訓臺
- 特種車(chē)工程機械實(shí)訓設備
- 智能網(wǎng)聯(lián)汽車(chē)實(shí)訓設備
- 醫學(xué)教學(xué)模型
- 中小學(xué)實(shí)驗室設備
- 實(shí)驗箱.實(shí)驗儀
- 光電子通信實(shí)驗裝置
- 儀器設備.教學(xué)掛圖
- LGT-K01型 考核一體機
- LGT-M01型 滅火器的選擇和使用智能實(shí)操考核系統
- LGT-CS01型 創(chuàng )傷包扎實(shí)操考核系統
- LGT-CPR4080型 高級全自動(dòng)電腦心肺復蘇模擬人
- PLC控制編程仿真軟件系統
- LGWX-02B型 中級電工實(shí)訓考核設備(柜式、兩面雙
- LGE-QDD02型 純電動(dòng)車(chē)電池管理實(shí)訓臺
- LGDZ-JS06A型 電子技術(shù)綜合實(shí)訓考核平臺
- LG-DLK02A型 多功能繼電保護及變電站綜合自動(dòng)化實(shí)
- LG-HO2型 面向鴻蒙的智能網(wǎng)聯(lián)實(shí)驗系統
- LG-G06型 數字化工廠(chǎng)綜合應用實(shí)訓系統
- LG-GA02型 工業(yè)機器人模塊化實(shí)訓平臺
- LGDS-03型 智能制造設備技術(shù)應用平臺
- LG-DQYL01型 電氣回路故障排查與診斷裝置
- LG-X101C型 1+X考證工業(yè)機器人操作與運維工作站
- LG-DLK01型 電力系統綜合自動(dòng)化實(shí)驗平臺
- LG系列 智能建筑實(shí)驗實(shí)訓裝置
- LGJS-3型 模塊式柔性環(huán)形自動(dòng)生產(chǎn)線(xiàn)及工業(yè)機器人
- LGJX-82E型 立體倉庫實(shí)訓裝置
- LGJS-1型 現代物流倉儲自動(dòng)化實(shí)驗系統
- LGJS-2型 模塊式柔性自動(dòng)環(huán)形生產(chǎn)線(xiàn)實(shí)驗系統(工
- LG-2400型 數控模組化生產(chǎn)流水線(xiàn)綜合系統(CD制程
- LGJD-01型 光機電一體化控制實(shí)訓裝置
- LGJD-02型 光機電一體化控制實(shí)訓裝置
- LG-235A 光機電一體化高速分揀實(shí)訓系統
- LGK-III型 數控車(chē)/銑床綜合考核裝置(二合一/生產(chǎn)型
- LG-AT2型 自控原理與計算機控制實(shí)驗儀
- LG-NLY01型 樓宇智能化工程實(shí)訓系統
- LGZK-201G 自動(dòng)化綜合實(shí)訓裝置( PLC、直流調速、觸
- LGPD-205B型 PLC、單片機及微機原理綜合實(shí)訓裝置
LGWL-HMC01A型 智能網(wǎng)聯(lián)座艙實(shí)訓臺(鴻蒙系統)
品牌:理工偉業(yè) 咨詢(xún)電話(huà):010-82827827 82827835
一、產(chǎn)品簡(jiǎn)介
智能座艙實(shí)訓臺是一款融合了物聯(lián)網(wǎng)控制、車(chē)載網(wǎng)絡(luò )CAN總線(xiàn)、人工智能開(kāi)發(fā)、開(kāi)源應用開(kāi)發(fā)、Qt應用軟件開(kāi)發(fā)的實(shí)驗平臺,能夠滿(mǎn)足智能網(wǎng)聯(lián)專(zhuān)業(yè)智能座艙課程、物聯(lián)網(wǎng)控制與嵌入式操作系統課程、人工智能應用課程的實(shí)驗實(shí)訓的要求。
平臺包含中控計算平臺系統、車(chē)機及其顯示器、視覺(jué)傳感器、麥克風(fēng)陣列、音響設備、座艙艙體(含座椅、雨刮、車(chē)窗、方向盤(pán)、剎車(chē)踏板、加速踏板)、超聲波雷達、毫米波雷達等硬件,結合中控軟件系統、車(chē)機軟件、座椅控制程序,實(shí)現手勢識別、人臉識別、語(yǔ)音交互、駕駛員疲勞駕駛檢測、座椅遠程調節、雨刮車(chē)窗控制、車(chē)載傳感器監測、車(chē)機應用娛樂(lè )等功能。
二、產(chǎn)品組成
產(chǎn)品包括智能座艙實(shí)訓臺體和智能座椅艙體兩部分。
實(shí)訓臺體主要安裝了中控計算平臺、車(chē)機控制器、顯示器、視覺(jué)傳感器、麥克風(fēng)陣列、揚聲器及音響、超聲波雷達及其四個(gè)探頭、毫米波雷達、激光雷達、以及網(wǎng)絡(luò )組建設施。布局如圖所示。
艙體,安裝了單臺主駕駛座椅、雨刮及電機、車(chē)窗及電機、方向盤(pán)、剎車(chē)踏板、加速踏板和座艙線(xiàn)控制器,通過(guò)座艙線(xiàn)控制器,接入到系統的CAN總線(xiàn)中,支持使用CAN分析工具測試艙體設備。
三、產(chǎn)品功能
1、座椅設施控制功能
可通過(guò)軟件控制座椅向前移動(dòng)任意距離、向后移動(dòng)任意距離、向上移動(dòng)、向下移動(dòng)、回歸零點(diǎn);可以控制雨刮器擦拭擋風(fēng)玻璃;控制車(chē)窗器驅動(dòng)車(chē)窗升降。
2、人臉識別功能
軟件和視覺(jué)傳感器配合,能夠實(shí)現人臉檢測、人臉?shù)浫?、人臉識別調節座椅。
3、手勢識別座艙控制功能
軟件支持手勢交互功能,通過(guò)人工智能算法,能夠識別手部的關(guān)鍵點(diǎn)信息;軟件支持不少于4種的手勢識別;并根據手勢識別的結果,控制車(chē)載氛圍燈開(kāi)、關(guān)、調節座椅前移或后移。
4、語(yǔ)音識別座艙控制功能
軟件支持語(yǔ)音交互控制功能,開(kāi)啟語(yǔ)音識別后,可識別到用戶(hù)的語(yǔ)音指令,根據用戶(hù)指令發(fā)送命令,控制座艙氛圍燈開(kāi)關(guān)、座艙風(fēng)扇開(kāi)關(guān)、座椅移動(dòng)方式。
5、駕駛員疲勞檢測功能
軟件支持駕駛員疲勞或注意力不集中的狀態(tài)檢測,采用pytorch框架,真實(shí)場(chǎng)景拍攝的駕駛員數據,支持正常駕駛、打呵欠、低頭、打電話(huà)至少四種不同狀態(tài)的檢測。當出現疲勞或不集中狀態(tài)時(shí),軟件語(yǔ)音提醒駕駛員休息。
6、汽車(chē)周身環(huán)境感知功能
軟件可以探測并可視化超聲波四路探頭前方障礙物的距離;可以設置毫米波雷達參數,對前方障礙物信息進(jìn)行篩選顯示;采用ROS操作系統,和可視化機器人系統開(kāi)源工具RViz,可視化顯示激光雷達四周的動(dòng)態(tài)信息。
四、軟件資源
1、座艙CAN控制軟件:采用嵌入式處理器和C語(yǔ)言開(kāi)發(fā),驅動(dòng)PWM外設接口輸出脈沖調制信號驅動(dòng)座椅的前后方向轉動(dòng)電機、或上下方向轉動(dòng)電機,并實(shí)時(shí)檢測限位變化,控制電機及時(shí)停止;驅動(dòng)車(chē)窗總成電機正反轉,實(shí)現車(chē)窗上升或下降;驅動(dòng)繼電器吸合或斷開(kāi)控制雨刮器的的往復擺動(dòng);實(shí)時(shí)讀取方向盤(pán)、剎車(chē)踏板、加速踏板的模擬量傳感器信號,輸出方向盤(pán)轉角、踏板深度數據;控制器具有CAN總線(xiàn)接口,支持CAN總線(xiàn)通信協(xié)議,與其他CAN總線(xiàn)設備通信。
2、座椅上位機控制軟件:采用PyQt進(jìn)行GUI上位機軟件開(kāi)發(fā),具備TCP/IP通信程序,可以通過(guò)網(wǎng)絡(luò )與座艙CAN控制器進(jìn)行通信,基于CAN總線(xiàn)協(xié)議,向座艙CAN控制器發(fā)送命令,控制座椅、車(chē)窗、雨刮相應動(dòng)作,實(shí)時(shí)讀取CAN控制器的數據幀,顯示方向盤(pán)、剎車(chē)踏板、加速踏板的變化數據。
3、服務(wù)器數據處理軟件:使用ROS框架作為MQTT客戶(hù)端節點(diǎn)和TCP Server節點(diǎn)相互通信的中間層。MQTT客戶(hù)端訂閱控制類(lèi)主題消息(如控制座椅、控制車(chē)窗、控制雨刮),轉發(fā)給ROS層對應的訂閱話(huà)題,通過(guò)ROS消息隊列機制存儲和轉發(fā)。TCP Server節點(diǎn)的ROS層訂閱后經(jīng)格式轉換,解析處理,就可以通過(guò)TCP Server發(fā)送給硬件TCP客戶(hù)端進(jìn)行座椅、車(chē)窗、雨刮等設備的控制。同理,TCP Server節點(diǎn)接收到硬件TCP客戶(hù)端CAN數據協(xié)議,經(jīng)過(guò)處理,再傳輸給MQTT節點(diǎn),由MQTT節點(diǎn)發(fā)布。此時(shí)車(chē)機MQTT客戶(hù)端訂閱消息后就可以顯示座椅位置、方向盤(pán)狀態(tài)、踏板深度等座艙傳感器數據。
4、智能座艙人機交互應用軟件:基于中控系統安裝的Anaconda及虛擬環(huán)境、CUDA、CUDNN、PyCharm、PyQt等開(kāi)發(fā)環(huán)境,開(kāi)發(fā)了基于Mediapipe 的手勢識別、基于MTCNN的人臉檢測和Facnet的人臉識別,基于Keras和Tensorflow深度學(xué)習框架的司機疲勞檢測,基于第三方庫的語(yǔ)音識別控制座艙設施等一系列智能人機交互軟件。
5、智能座艙應用軟件:基于Openharmony4.0操作系統,采用DevEco Studio IDE和ArkTs語(yǔ)言進(jìn)行應用軟件開(kāi)發(fā)。軟件內置MQTT應用協(xié)議,具有發(fā)布訂閱消息的機制,可以訂閱溫濕度、光線(xiàn)、空氣質(zhì)量等車(chē)載環(huán)境信息、座艙線(xiàn)控狀態(tài)(如方向盤(pán)轉向、剎車(chē)踏板深度、加速踏板深度;也可以發(fā)布命令,控制車(chē)載氛圍燈、車(chē)載風(fēng)扇,控制座椅調節、車(chē)窗升降、雨刮啟停;內嵌第三方語(yǔ)音識別庫,可以語(yǔ)音識別控制風(fēng)扇、氛圍燈、車(chē)窗、雨刮;內嵌視頻播放器功能軟件。
五、產(chǎn)品清單
序號 |
類(lèi)別 |
名稱(chēng) |
|
1. |
實(shí)訓臺體 |
h型臺體框架(包含供電、保護裝置、開(kāi)關(guān)、指示燈) |
|
2. |
網(wǎng)聯(lián)傳感器 |
超聲波傳感器 |
|
3. |
|
毫米波雷達傳感器 |
|
4. |
|
16線(xiàn)激光雷達傳感器 |
|
5. |
|
CAN轉網(wǎng)模塊 |
|
6. |
|
北斗GPS定位模塊 |
|
7. |
座艙臺體設備 |
計算平臺 |
|
8. |
|
顯示器 |
19.5 |
9. |
|
視覺(jué)傳感器 |
|
10. |
|
麥克風(fēng)陣列 |
|
11. |
|
鼠標鍵盤(pán) |
|
12. |
|
OpenHarmony車(chē)機 |
|
13. |
|
車(chē)機10寸顯示屏 |
|
14. |
|
OpenHarmony環(huán)境監測模塊 |
|
15. |
|
OpenHarmony光線(xiàn)聯(lián)動(dòng)模塊 |
|
16. |
|
功放 |
|
17. |
|
內嵌式喇叭 |
|
18. |
|
有源音響 |
|
19. |
座艙艙體設備 |
座艙線(xiàn)控制器 |
|
20. |
|
座椅 |
|
21. |
|
座椅加熱/通風(fēng)墊 |
|
22. |
|
雨刮器 |
|
23. |
|
車(chē)窗總成 |
|
24. |
|
加速踏板 |
|
25. |
|
剎車(chē)踏板 |
|
26. |
|
座艙金屬框架 |
|
27. |
|
方向盤(pán) |
|
28. |
網(wǎng)絡(luò )設備 |
路由器 |
|
|
|
工業(yè)交換機 |
|
六、課程實(shí)驗
實(shí)訓項目 |
實(shí)驗名稱(chēng) |
課時(shí) |
智能座艙網(wǎng)絡(luò )互聯(lián) |
座艙網(wǎng)絡(luò )互聯(lián)規劃 |
1 |
|
座艙網(wǎng)絡(luò )互聯(lián)實(shí)施 |
1 |
中控計算平臺部署 |
服務(wù)器中間件的安裝與測試 |
1 |
車(chē)載傳感器的感知控制 |
座椅雨刮及車(chē)窗的移動(dòng)控制 |
2 |
|
超聲波傳感器的探測 |
2 |
|
毫米波雷達的探測及應用開(kāi)發(fā) |
2 |
|
激光雷達的探測及應用 |
2 |
座艙人機無(wú)感交互 |
開(kāi)發(fā)環(huán)境安裝與測試 |
2 |
|
人臉識別應用開(kāi)發(fā) |
2 |
|
手勢識別控制系統應用開(kāi)發(fā) |
2 |
|
語(yǔ)音識別控制系統應用開(kāi)發(fā) |
2 |
|
疲勞駕駛檢測系統應用開(kāi)發(fā) |
2 |
開(kāi)源車(chē)機應用 |
OpenHarmony 開(kāi)發(fā)環(huán)境搭建和eTS入門(mén) |
1 |
|
OpenHarmony艙內控制器的控制開(kāi)發(fā) |
2 |
|
OpenHarmony座艙內環(huán)境參數采集開(kāi)發(fā) |
2 |
|
OpenHarmony語(yǔ)音助手的功能實(shí)現 |
2 |
|
OpenHarmony車(chē)機娛樂(lè )應用開(kāi)發(fā) |
2 |
|
OpenHarmony座艙綜合應用開(kāi)發(fā) |
2 |
|
|
共32課時(shí) |