視覺(jué)語(yǔ)音智能車的機(jī)器視覺(jué)和機(jī)器人底盤以運(yùn)動(dòng)控制為核心，采用四輪驅(qū)動(dòng)底盤，搭配***精度編碼器，可實(shí)現(xiàn)精確的運(yùn)動(dòng)控制。通過(guò)在深度學(xué)習(xí)計(jì)算終端Jetson Nano中部署人工智能軟件環(huán)境，賦予機(jī)器人對(duì)環(huán)境的感知能力和協(xié)同工作能力，進(jìn)而實(shí)現(xiàn)基于人工智能技術(shù)的機(jī)器視覺(jué)+機(jī)器人運(yùn)動(dòng)控制教學(xué)應(yīng)用場(chǎng)景。平臺(tái)采用基于深度學(xué)習(xí)的圖像處理技術(shù)、機(jī)器視覺(jué)技術(shù)和機(jī)器人運(yùn)動(dòng)控制技術(shù)，可為人工智能、機(jī)器人工程、自動(dòng)化等***提供一體化軟硬件系統(tǒng)和教學(xué)解決方案。

　　產(chǎn)品具備如下功能：

　　1.滿足Python編程、機(jī)器學(xué)習(xí)、深度學(xué)習(xí)、數(shù)字圖像處理、計(jì)算機(jī)視覺(jué)、機(jī)器人運(yùn)動(dòng)控制等課程或知識(shí)點(diǎn)的教學(xué);

　　2.配置Jetson Nano深度學(xué)習(xí)計(jì)算模塊，部署人工智能軟件環(huán)境，集成自主研發(fā)的機(jī)器人運(yùn)動(dòng)控制器和機(jī)器視覺(jué)算法，用戶無(wú)需另外購(gòu)置電腦，真正開(kāi)箱即用;

　　3.平臺(tái)支持STM32+RT-Thread+ROS開(kāi)源系統(tǒng)，搭配激光雷達(dá)、IMU以及語(yǔ)音交互模塊，可實(shí)現(xiàn)機(jī)器人控制算法、SLAM建圖與導(dǎo)航等課程實(shí)踐和競(jìng)賽訓(xùn)練，所有軟件算法全部開(kāi)源，支持二次開(kāi)發(fā)。

　　產(chǎn)品功能和特點(diǎn)

　　1. 算力強(qiáng)勁的人工智能主機(jī)

　　產(chǎn)品主機(jī)采用性價(jià)比極***的英偉達(dá)計(jì)算主機(jī)Jetson Nano，配置***性能的四核64位ARM CPU，可用于各種機(jī)器人控制算法的實(shí)現(xiàn)，同時(shí)搭載128核的NVIDIA GPU，可提供472 GFLOPS的計(jì)算性能，還包括4GB LPDDR4存儲(chǔ)器，采用***效，低功耗封裝，具有5W / 10W功率模式和5V DC低電壓輸入能力。具有圖形加速能力，內(nèi)置NVIDIA CUDA Toolkit和TensorRT等庫(kù)。SDK包括主流的開(kāi)源機(jī)器學(xué)習(xí)(ML)框架，如TensorFlow，PyTorch，Caffe，Keras和MXNet，以及計(jì)算機(jī)視覺(jué)和機(jī)器人開(kāi)發(fā)的框架，如OpenCV和ROS;

　　2. 自主研發(fā)的***性能運(yùn)動(dòng)控制器

　　底盤控制器采用STM32F407***性能ARM處理器，主頻***、資源豐富?？蓪?shí)現(xiàn)板載陀螺儀數(shù)據(jù)采集與解算、4路直流減速電機(jī)編碼器數(shù)據(jù)采集與車速PID/MFAC閉環(huán)控制、四輪差速底盤運(yùn)動(dòng)解析及控制接口、與車載計(jì)算模塊的數(shù)據(jù)通信;控制器進(jìn)行深度定制，不僅支持c/c++開(kāi)發(fā)，同時(shí)可支持python語(yǔ)言開(kāi)發(fā);

　　3. 靈活易用的開(kāi)源實(shí)時(shí)操作系統(tǒng)

　　底盤控制器搭載***產(chǎn)***的嵌入式實(shí)時(shí)操作系統(tǒng)RT-Thread，實(shí)現(xiàn)所有內(nèi)核功能模塊調(diào)用、Finsh shell命令行交互模塊。可擴(kuò)展文件系統(tǒng)管理、網(wǎng)絡(luò)系統(tǒng)管理、支持Python編程的MicroPython系統(tǒng)框架、基于四輪差速底盤智能車的控制系統(tǒng)框架;提供RT-Thread操作系統(tǒng)的完整例程和教學(xué)課程;

　　4. 豐富的人工智能和機(jī)器視覺(jué)案例

　　支持Web頁(yè)面瀏覽攝像頭;基于openCV的人臉識(shí)別、車道線識(shí)別、巡線;Yolo交通標(biāo)識(shí)識(shí)別、手勢(shì)識(shí)別、物體識(shí)別;Unet語(yǔ)義分割實(shí)現(xiàn)車道線檢測(cè);語(yǔ)音交互與聲源定位;3D視覺(jué)建圖與導(dǎo)航;多機(jī)器人編隊(duì);深度視覺(jué)跟隨;

　　5. 完善的ROS機(jī)器人系統(tǒng)功能

　　車載計(jì)算主機(jī)搭載Ubuntu18.04版本Linux操作系統(tǒng)，配置ROS及相關(guān)開(kāi)發(fā)工具，實(shí)現(xiàn)ROS核心通信機(jī)制及組件、對(duì)底盤狀態(tài)監(jiān)測(cè)及運(yùn)動(dòng)控制、ROS分布式遠(yuǎn)程開(kāi)發(fā)、攝像頭數(shù)據(jù)采集與處理、SLAM建圖與導(dǎo)航、聲源定位、語(yǔ)音識(shí)別、Gazebo仿真環(huán)境，提供完整代碼。