AI視覺與語(yǔ)音實(shí)驗(yàn)箱，人工智能視覺實(shí)訓(xùn)平臺(tái)
時(shí)間：2025-05-06 23:45:18 點(diǎn)擊次數(shù)：
中人教儀廠
--SD38 AI語(yǔ)音與機(jī)器視覺研發(fā)應(yīng)用系統(tǒng)平臺(tái)
AI語(yǔ)音與機(jī)器視覺研發(fā)應(yīng)用系統(tǒng)平臺(tái)是一款包括AI語(yǔ)音、機(jī)器視覺、深度學(xué)習(xí)掌控把握基礎(chǔ) 嵌入式Linux于一體的高端教學(xué)科研實(shí)驗(yàn)平臺(tái)。
整個(gè)教學(xué)平臺(tái)由實(shí)驗(yàn)箱高功能嵌入式主板夠成，高功能嵌入式核心板應(yīng)用高功能64位ARM處置整理器，標(biāo)配4GB DDR3內(nèi)部存儲(chǔ)和16GB閃存，可運(yùn)行ubuntu、android、linuxqt等多種實(shí)操系統(tǒng)，可滿嵌入式linux和AI應(yīng)用研發(fā)。
平臺(tái)應(yīng)用多核高功能 AI 處置整理器，預(yù)裝 Ubuntu Linux 實(shí)操系統(tǒng)與 OpenCV 計(jì)算機(jī)數(shù)值數(shù)值視覺庫(kù)，支持 TensorFlow Lite、NCNN、MNN、Paddle-Lite、MACE 等深度學(xué)習(xí)掌控把握端側(cè)推理框體結(jié)構(gòu)。
提供多種應(yīng)用外設(shè)與豐富的機(jī)器視覺、AI語(yǔ)音、深度學(xué)習(xí)掌控把握實(shí)戰(zhàn)應(yīng)用案例，如語(yǔ)音前處置整理（聲源定位、語(yǔ)音增強(qiáng)、語(yǔ)音降噪、回聲消除、聲音提取）、語(yǔ)音活體查驗(yàn)、語(yǔ)音喚醒、語(yǔ)音識(shí)別、語(yǔ)音合成、自然語(yǔ)言處置整理、聲紋識(shí)別門鎖、語(yǔ)音智能家居、手寫字識(shí)別、人臉識(shí)別、目標(biāo)檢驗(yàn)測(cè)試、端側(cè)推理框體結(jié)構(gòu)、圖像識(shí)別、人體解析 、文字識(shí)別、人臉門禁控制、車牌道閘控制、手勢(shì)家居控制等，經(jīng)過案例教學(xué)讓學(xué)生掌控把握計(jì)算機(jī)數(shù)值數(shù)值視覺與深度學(xué)習(xí)掌控把握的基礎(chǔ)原理和經(jīng)經(jīng)典型應(yīng)用研發(fā)。
2.2.1. 嵌入式網(wǎng)關(guān)核心板
RK3399核心板是一款266-pin金手指形式高功能ARM計(jì)算機(jī)數(shù)值數(shù)值模型塊，它應(yīng)用了瑞芯微64位六核（含有雙核Cortex-A72 +四核Cortex-A53）Soc RK3399作為主處置整理器，標(biāo)配4GB DDR3內(nèi)部存儲(chǔ)和16GB閃存，板載2×2 MIMO雙天線Wi Fi模組，尺寸只有69.6×50mm，模型塊上帶有單單獨(dú)的Typec供電連接口，以及USB-C顯露連接口。
RK3399計(jì)算模型塊設(shè)定有豐富的外設(shè)和拓展連接口，可以拓展使用雙MIPI寬動(dòng)態(tài)攝像頭，另外它還帶有eDP顯露連接口，MIPI顯露連接口，1路USB3.0,2路USB2.0，以及12C,12S,SPI,PWM,GF10和串行口等各種資源。RK3399可流暢運(yùn)行Android 8.1,Ubuntu 18.04,Armbian,Buildroot等主流嵌入式實(shí)操系統(tǒng)，系統(tǒng)資源和生態(tài)非常豐富，尤其是Android 8.1設(shè)定有NN SDK神經(jīng)互聯(lián)網(wǎng)加快速度系統(tǒng)包，Qt-5.10包括了VPU硬件編解碼，GPU圖形加快速度，可使用QML快速研發(fā)流暢的動(dòng)態(tài)式界面，因此RK3399核心板非常適合做高端人臉識(shí)別，機(jī)器視覺，VR虛擬現(xiàn)實(shí)，自動(dòng)駕駛，深度計(jì)算解析等方面的人工智能設(shè)備快速原型及設(shè)備研發(fā)。
硬件功能數(shù)值：
|
CPU |
SOC:RK3399
核心:64位雙核Cortex-A72 +四核Cortex-A53
頻率:Cortex-A72 (2.0 ghz), Cortex-A53 (1.5 ghz) |
|
GPU |
Mali-T864 GPU,支持OpenGL ES1.1/2.0/3.0/3.1、OpenVG1.1 OpenCL, DX11, AFBC |
|
VPU |
4K VP9 and 4K 10bits H265/H264 60fps decoding, Dual VOP, etc |
|
Memory |
RAM: Dual-Channel 4GB DDR3 |
|
Storage |
eMMC: 16GB(regular), 32GB/64GB(optional), eMMC 5.1 |
|
Power Management |
RK808-D PMIC,協(xié)作單單獨(dú)直線DC/直線DC,啟用dvf solfware省電,RTC喚醒,系統(tǒng)睡眠模式 |
|
Connectivity |
以太網(wǎng):本機(jī)千兆以太網(wǎng)
wi - fi: 802.11 a / b / g / n / ac
藍(lán)牙:4.1雙模式
天線:雙天線連接口 |
|
Video Input |
1個(gè)或兩個(gè)4-Lane MIPI-CSI,雙重ISP, 13 mpix / s,同時(shí)支持雙相機(jī)數(shù)值的寫入 |
|
Video Output |
HDMI: HDMI 2.0a, supports 4K@60Hz，HDCP 1.4/2.2
DP on Type-C: DisplayPort 1.2 Alt Mode on USB Type-C
LCD Interface: one eDP 1.3（4-Lane，10.8Gbps）, one or two 4-Lane MIPI-DSI |
|
USB |
USB 2.0: 2單單獨(dú)的本地主機(jī)USB 2.0
USB 3.0: 1本地主機(jī)USB 3.0
USB c類型:支持USB3.0 c型和顯露端口1.2 Alt模式USB c型 |
|
PCIe |
PCIe x4, compatible with PCIe 2.1, Dual operation mode |
|
調(diào)節(jié)測(cè)試 |
1 x調(diào)節(jié)測(cè)試UART, 3 v級(jí),1500000個(gè)基點(diǎn) |
|
LED |
1x Power LED(Red) 1x GPIO LED(Green) |
|
Key |
Power Key x1 Reset Key x1 Recovery Key x1 |
|
作業(yè)溫度（℃） |
-20℃ to 70℃ |
|
電源 |
直線DC12 v / 1(邊緣連接器)或DV 5 v / 2.5 (c型) |
2.2.2. 網(wǎng)關(guān)底層基板其他外設(shè)
l 11.6寸高清觸顯一體屏：板載，eDP連接口,電容式多點(diǎn)觸摸，分辨率1920*1080
l 按鍵：板載重啟、恢復(fù)、電源3個(gè)功能按鍵，4個(gè)用戶自定義按鍵
l UART：1路RS232，1路RS485
l 以太網(wǎng)：100/1000M
l 音頻：音頻輸出連接口、MIC音頻寫入連接口、板載4歐3W揚(yáng)聲器
l 無(wú)線網(wǎng)：WiFi (2.4G and 5G, 802.11 ac), Bluetooth 4.1
l 4G模組：板載，板載EC20模組
l LoRaWAN網(wǎng)關(guān)模型塊連接口：板載mini-pcie連接口，可接入SX1301八通道并行LoRaWAN網(wǎng)關(guān)模型塊。1個(gè)項(xiàng)目須至少配備裝備1個(gè)LoRaWAN網(wǎng)關(guān)模型塊，以完成對(duì)實(shí)驗(yàn)室全部lora節(jié)點(diǎn)的接入管理。
l Zigbee網(wǎng)關(guān)模型塊：板載，直列雙排20芯插針連接口，非usb連接口。
l BLE網(wǎng)關(guān)模型塊：板載，直列雙排20芯插針連接口，非usb連接口。
l USB 3.0 HOST連接口：板載2個(gè)
l Debug連接口：板載1個(gè)
l Download連接口：板載1個(gè)
l 鍵盤：板載7寸80鍵標(biāo)準(zhǔn)鍵盤
l 高清相機(jī)模組：CMOS傳感器OV13850，MIPI信號(hào)輸出，400萬(wàn)像素，最高支持2688x1520像素。
l 麥克風(fēng)陣列：板載7顆數(shù)字高功能硅麥克風(fēng)。
l 紅外接收：板載紅外接收模型塊1個(gè)
l 震動(dòng)馬達(dá)傳感器：1個(gè)
l LED：板載4顆藍(lán)色LED燈珠。
l 天線連接口：板載wifi、BLE、lora、LET 共4個(gè)天線連接口。
l 傳感器拓展連接口：板載，與無(wú)線傳感器節(jié)點(diǎn)的傳感器模型塊連接口兼容，可完成linux系統(tǒng)下的傳感器驅(qū)動(dòng)研發(fā)實(shí)驗(yàn)。
l OBD連接口：板載，標(biāo)準(zhǔn)16針OBD-II插頭座，與配套系統(tǒng)集合可完成基于CAN總線通信相關(guān)實(shí)驗(yàn)。
l
電源：DC 9-12V寫入
l 其他連接口：MIPI、GPIO、SPI、I2C、TF Card (sd/mmc 3.0)、SIM卡座、USB 2.0 HOST、USB Type-C (with DP out)、eDP 1.3、HDMI 2.0 for 4K 60Hz
2.3. 外設(shè)模型塊
2.3.1.
4G LTE模型塊l 互聯(lián)網(wǎng)：FDD-LTE/TDD-LTE/WCDMA/TD-SCDMA/GSM/EDGE；
l 制式：CMCC/CUCC（B1/B3/B8/B34/B38/B39/B40）；
l 作業(yè)頻帶：HSPA1900/2100，GSM 900/1800；
l 高速USB 2.0連接口、PCI-E連接口；
l 支持短信、數(shù)值、電話本、PCM語(yǔ)音功能；
l 支持IPv4,IPv6協(xié)議；
l 支持LTE多頻；
l 支持最大150M/50Mbps的課程課程理論上下行數(shù)值傳輸速率；
2.3.2. AI麥克風(fēng)陣列
l 7路麥克風(fēng)陣列，提供聲源定位、語(yǔ)音增強(qiáng)、語(yǔ)音降噪、回聲消除、聲音拾取等功能。
l 帶硬件浮點(diǎn)運(yùn)算的RISC-V 雙核64位處置整理器，主頻最高800MHz。
l 具備機(jī)器聽覺能力和語(yǔ)音識(shí)別能力，內(nèi)置語(yǔ)音處置整理單元（APU）。
l 具備卷積人工神經(jīng)互聯(lián)網(wǎng)硬件加快速度器KPU,可高功能實(shí)行卷積人工神經(jīng)互聯(lián)網(wǎng)運(yùn)算。
l 麥克風(fēng)陣列模型塊包括TFT彩屏屏，能夠直觀顯露音頻頻譜圖。
l 內(nèi)置ARM STM32 USB音頻驅(qū)動(dòng)芯片，提供USB聲卡驅(qū)動(dòng)，開放源代碼。
l 連接口：雙列直插封裝/USB，需能夠接入到eAIOT平臺(tái)使用。
l 支持語(yǔ)音識(shí)別、語(yǔ)義理解、語(yǔ)音合成、人機(jī)對(duì)話等功能，可與硬件實(shí)行語(yǔ)音交互。
l 5米監(jiān)測(cè)界限、基于linux系統(tǒng)。
2.3.3. AI攝像頭
l 1/1.8" SONY Exmor CMOS
l 有效像素200萬(wàn)像素，30幀@1920*1080
l C/CS鏡頭連接口，最低照度0.001 Lux，120dB TWDR
l 支持協(xié)議：PROFILE S，GB/T28181，F(xiàn)TP/RTSP.UPNP等
l 支持雙碼流、手機(jī)監(jiān)控、心跳機(jī)制，具3D降噪、去霧、數(shù)字寬動(dòng)態(tài)、鏡頭校正、走廊監(jiān)控等智能模式
l 提供基于eAIOT教學(xué)平臺(tái)的人臉識(shí)別系統(tǒng)案例。
2.4. 物聯(lián)網(wǎng)應(yīng)用基礎(chǔ)云平臺(tái)
1、功能簡(jiǎn)介
1）學(xué)生能夠?qū)⑽锫?lián)網(wǎng)感知層設(shè)備（傳感器、執(zhí)行器等）接入物聯(lián)網(wǎng)云服務(wù)平臺(tái)，平臺(tái)能夠接收并存儲(chǔ)傳感器和執(zhí)行器的就地實(shí)時(shí)數(shù)值，模型塊在線狀態(tài)，并就地實(shí)時(shí)顯露。
2）提供后臺(tái)管理系統(tǒng)，能夠設(shè)定賬號(hào)類型和使用權(quán)限。支持多用戶管理及權(quán)限控制，分為父用戶和子用戶，父用戶可以創(chuàng)建多個(gè)子用戶，并而且可以為每個(gè)子用戶分配增、刪、改幾種權(quán)限，子用戶創(chuàng)建的資源相互隔離。
3）提供物聯(lián)網(wǎng)規(guī)則編輯器，無(wú)需編寫代碼即可編輯復(fù)雜的自動(dòng)化控制策略，完成位移互聯(lián)網(wǎng)系統(tǒng)的自動(dòng)化控制。
4）提供豐富的可視化控件庫(kù)，經(jīng)過拖拽、簡(jiǎn)便配備即可完成美觀的UI設(shè)計(jì)。支持GIS地圖、彎彎曲線圖、柱狀、餅圖、圖表、按鈕、儀表圖等控件。
5）物聯(lián)網(wǎng)感知層設(shè)備也能夠向執(zhí)行器發(fā)送控制命令，系統(tǒng)能夠完成模型塊的在線監(jiān)測(cè)。
6）云平臺(tái)支持物聯(lián)網(wǎng)硬件多協(xié)議接入，經(jīng)過ZigBee/BLE/wifi/lora/NBIOT無(wú)線技術(shù)取得傳感器收集的數(shù)值，形成一個(gè)完整的無(wú)線傳感器互聯(lián)網(wǎng)。
7）數(shù)值經(jīng)過http/MQTT協(xié)議傳輸至物聯(lián)網(wǎng)應(yīng)用基礎(chǔ)云平臺(tái)系統(tǒng)，實(shí)行數(shù)值圖形化展示。
8）完成基于云平臺(tái)的智能家居實(shí)驗(yàn)，并含有配套完整的教學(xué)資源。
9）支持本地化部署和云端部署兩種方法。
10）提供"物聯(lián)網(wǎng)應(yīng)用基礎(chǔ)云平臺(tái)"系統(tǒng)著作權(quán)登記證書及系統(tǒng)設(shè)備登記測(cè)量試驗(yàn)報(bào)告復(fù)印件并加蓋公章，原件備查。
3. 部分實(shí)驗(yàn)案例
3.1.1. 嵌入式linuxQT綜合實(shí)驗(yàn)
3.1.2. 手寫字識(shí)別
學(xué)習(xí)掌控把握設(shè)計(jì)一個(gè)神經(jīng)互聯(lián)網(wǎng)模型，然后用已經(jīng)標(biāo)注過的MNIST數(shù)值來實(shí)訓(xùn)這個(gè)模型，然后實(shí)行測(cè)量試驗(yàn)檢驗(yàn)。
圖：手寫字識(shí)別案例
3.1.3. 人臉識(shí)別
經(jīng)過OpenCV自帶的分類器、OpenCV的深度學(xué)習(xí)掌控把握分類器是基于SSD(Single Shot Detector)框體結(jié)構(gòu)的ResNet互聯(lián)網(wǎng)，完成在圖片、視頻中對(duì)人臉的檢驗(yàn)測(cè)試，并用矩形框框出來。
學(xué)?？捎脕砩矸葑R(shí)別、課堂/上下班考勤、會(huì)議簽到、刷臉支付、門禁通行、安防監(jiān)控相關(guān)場(chǎng)景。
圖： 人臉識(shí)別案例
3.1.4. 目標(biāo)檢驗(yàn)測(cè)試
運(yùn)用深度學(xué)習(xí)掌控把握框體結(jié)構(gòu)caffe，完成對(duì)常見物體的檢驗(yàn)測(cè)試。
圖：目標(biāo)檢驗(yàn)測(cè)試案例
3.1.5. 人體姿態(tài)識(shí)別
使用邊緣側(cè)推理框體結(jié)構(gòu)Tengine檢驗(yàn)測(cè)試圖像中的全部人體并返回每個(gè)人體的矩形框位置，精準(zhǔn)定位 21 個(gè)核心關(guān)鍵點(diǎn)，含有五官、四肢、脖頸等部位，更多關(guān)鍵點(diǎn)持續(xù)拓展中；支持多人檢驗(yàn)測(cè)試、人體位置重疊、遮擋、背面、側(cè)面、中低空俯拍、大動(dòng)作等復(fù)雜場(chǎng)景。
圖：人體姿態(tài)識(shí)別案例
3.1.6. 手勢(shì)識(shí)別
運(yùn)用深度學(xué)習(xí)掌控把握框體結(jié)構(gòu)caffe，完成對(duì)簡(jiǎn)便手勢(shì)的識(shí)別。
圖：手勢(shì)檢驗(yàn)測(cè)試和識(shí)別系統(tǒng)案例
3.1.7. 車牌識(shí)別
使用opencv 的 HAAR Cascade 檢驗(yàn)測(cè)試車牌大致位置，使用卷積神經(jīng)互聯(lián)網(wǎng)回歸車牌左右，然后使用卷積神經(jīng)互聯(lián)網(wǎng)滑動(dòng)窗切割字符、及識(shí)別字符。
圖：交通門禁車牌檢驗(yàn)測(cè)試和識(shí)別系統(tǒng)案例
3.1.8. 人臉門禁
應(yīng)用 mtcnn 實(shí)行人臉檢驗(yàn)測(cè)試，應(yīng)用MobileFaceNet 實(shí)行人臉識(shí)別，然后用活體檢驗(yàn)測(cè)試算法實(shí)行檢驗(yàn)測(cè)試。
圖：人臉門禁檢驗(yàn)測(cè)試和識(shí)別系統(tǒng)案例
3.1.9. 聲紋鎖實(shí)驗(yàn)
經(jīng)過語(yǔ)音增強(qiáng)、語(yǔ)音重量檢驗(yàn)測(cè)試、語(yǔ)音增強(qiáng)、有效語(yǔ)音提取、聲紋特征提取等步驟，完成聲紋注冊(cè)及聲紋檢驗(yàn)。
圖：聲紋電子鎖系統(tǒng)案例
3.1.10. AI語(yǔ)音控制智能家居
本系統(tǒng)完成語(yǔ)音數(shù)值高速傳輸，基于百度語(yǔ)音識(shí)別 API 完成語(yǔ)音識(shí)別，并用無(wú)線方法控制電燈，電風(fēng)扇，以及獲取溫度（℃）和濕度。
圖：語(yǔ)音控制智能家居系統(tǒng)案例
3.1.11. 知識(shí)圖譜和聊天機(jī)器人
知識(shí)圖譜融合了兩千五百多萬(wàn)的實(shí)體，擁有億級(jí)別的實(shí)體屬性關(guān)系，機(jī)器人應(yīng)用了基于知識(shí)圖譜的語(yǔ)義感知與理解，致力于最強(qiáng)認(rèn)識(shí)大腦。自然語(yǔ)言處置整理工量具包的功能有：中文分詞、詞性標(biāo)注、命名實(shí)體識(shí)別、關(guān)鍵詞提取、文本摘要、新詞發(fā)現(xiàn)、情感解析等。
圖：知識(shí)圖譜和文本聊天機(jī)器人系統(tǒng)案例
4. 招標(biāo)功能數(shù)值
|
序號(hào) |
項(xiàng)目名稱 |
項(xiàng)目技術(shù)功能數(shù)值參考規(guī)格 |
備注 |
|
1 |
名稱：AI人工智能語(yǔ)音機(jī)器視覺研發(fā)應(yīng)用系統(tǒng)平臺(tái)
型號(hào)：--SD38 |
本項(xiàng)目實(shí)驗(yàn)系統(tǒng)應(yīng)用CPU+GPU雙處置整理器架構(gòu)，是一款包括AI語(yǔ)音、機(jī)器視覺、深度學(xué)習(xí)掌控把握基礎(chǔ)、嵌入式Linux于一體的高端教學(xué)科研實(shí)驗(yàn)平臺(tái)。
整個(gè)教學(xué)平臺(tái)含有概括人工智能（AI）和嵌入式Linux部分，兩部分互相支撐、互為補(bǔ)充，一起合作完成嵌入式人工智能。人工智能部分的硬件基于嵌入式ARM控制器、高清相機(jī)模型塊、7麥麥克風(fēng)陣列，具備語(yǔ)音、圖像數(shù)值的收集和處置整理能力及適用來多種場(chǎng)景的控制連接口；嵌入式Linux部分的硬件應(yīng)用CPU+GPU雙處置整理器架構(gòu)，配備裝備高清大屏以及豐富的外設(shè)連接口。
平臺(tái)應(yīng)用多核高功能 AI 處置整理器，預(yù)裝 Ubuntu Linux 實(shí)操系統(tǒng)與 OpenCV 計(jì)算機(jī)數(shù)值數(shù)值視覺庫(kù)，支持 TensorFlow Lite、NCNN、MNN、Paddle-Lite、MACE 等深度學(xué)習(xí)掌控把握端側(cè)推理框體結(jié)構(gòu)。
提供多種應(yīng)用外設(shè)與豐富的機(jī)器視覺、AI語(yǔ)音、深度學(xué)習(xí)掌控把握實(shí)戰(zhàn)應(yīng)用案例，如語(yǔ)音前處置整理（聲源定位、語(yǔ)音增強(qiáng)、語(yǔ)音降噪、回聲消除、聲音提?。⒄Z(yǔ)音活體查驗(yàn)、語(yǔ)音喚醒、語(yǔ)音識(shí)別、語(yǔ)音合成、自然語(yǔ)言處置整理、聲紋識(shí)別門鎖、語(yǔ)音智能家居、手寫字識(shí)別、人臉識(shí)別、目標(biāo)檢驗(yàn)測(cè)試、端側(cè)推理框體結(jié)構(gòu)、圖像識(shí)別、人體解析 、文字識(shí)別、人臉門禁控制、車牌道閘控制、手勢(shì)家居控制等，經(jīng)過案例教學(xué)讓學(xué)生掌控把握計(jì)算機(jī)數(shù)值數(shù)值視覺與深度學(xué)習(xí)掌控把握的基礎(chǔ)原理和經(jīng)經(jīng)典型應(yīng)用研發(fā)。
一、硬件技術(shù)功能數(shù)值
★1、處置整理器：
CPU: RK3399：六核 Dual Cortex-A72 + Quad Cortex-A53, 64-bit CPU at 1.8GHz
GPU: Mali-T864 GPU,支持 OpenGL ES 1.1/2.0/3.0/3.1, OpenVG 1.1, OpenCL, DX11
2、存儲(chǔ)器：雙通道LPDDR3（64-bit）不低于4GB，16GB 高速emmc 拓展存儲(chǔ)，MicroSD不低于64G
3、高清相機(jī)模組：CMOS傳感器OV13850，MIPI信號(hào)輸出，1300萬(wàn)像素，最高支持4224x3136像素。
4、AI高清攝像機(jī)：有效像素500萬(wàn)像素，對(duì)焦方法自動(dòng)對(duì)焦，USB2.0連接口，提供基于eAIOT教學(xué)平臺(tái)的人臉識(shí)別系統(tǒng)案例。
★5、11.6寸板載高清觸顯一體屏：11.6寸eDP連接口,分辨率不低于1920*1080
★6、1）Zigbee網(wǎng)關(guān)模型塊連接口：板載，應(yīng)用直列雙排20芯插針牢靠固定，非usb連接口。
2）BLE網(wǎng)關(guān)模型塊連接口：板載，應(yīng)用直列雙排20芯插針牢靠固定，非usb連接口。
7、4G模組：板載EC20模組，支持LTE TDD/LTE FDD/TD-SCDMA/WCDMA /TD-SCDMA/CDMA2000/CDMA/GSM等頻段
★8、7路麥克風(fēng)陣列：
1）7路麥克風(fēng)陣列，提供聲源定位、語(yǔ)音增強(qiáng)、語(yǔ)音降噪、回聲消除、聲音拾取等功能。（需提供完整硬件原理圖及PCB文件截圖證明為自主研發(fā)設(shè)備）
2）主控芯片K210，RISC-V 雙核64位處置整理器，主頻最高800MHz。包括卷積神經(jīng)互聯(lián)網(wǎng)加快速度器KPU，峰值算力1TOPS。
3）一體化單板設(shè)計(jì)，包括TFT彩色液晶屏，能夠直觀顯露彩色音頻頻譜圖。
4）包括 STM32音頻驅(qū)動(dòng)芯片，提供USB聲卡驅(qū)動(dòng)，開放源代碼。（提供源碼工程截圖，源碼備查）
5）應(yīng)用雙列直插封裝和USB連接口輸出，需能夠接入到系統(tǒng)主板中使用。
6）5米監(jiān)測(cè)界限，基于linux系統(tǒng)。
★9、OBD連接口：板載，標(biāo)準(zhǔn)16針OBD-II插頭座，與配套系統(tǒng)集合可完成基于CAN總線通信相關(guān)實(shí)驗(yàn)。
10、天線連接口：板載wifi、BLE、lora、LTE共4個(gè)天線連接口。
11、其他硬件連接口：
1）UART：1路RS232，1路RS485
2）以太網(wǎng)：100/1000M
3）音頻：音頻輸出連接口、MIC音頻寫入連接口、板載4歐3W揚(yáng)聲器
4）無(wú)線網(wǎng)：WiFi (2.4G and 5G, 802.11 ac), Bluetooth 4.1
5）USB 3.0 HOST連接口：板載2個(gè)
6）Debug連接口：板載1個(gè)、Download連接口：板載1個(gè)
7）鍵盤：板載7寸80鍵標(biāo)準(zhǔn)鍵盤
8）紅外接收：板載紅外接收模型塊1個(gè)
9）傳感器拓展連接口：板載，與無(wú)線傳感器節(jié)點(diǎn)的傳感器模型塊連接口兼容，可完成linux系統(tǒng)下的傳感器驅(qū)動(dòng)研發(fā)實(shí)驗(yàn)。
10）按鍵：板載重啟、恢復(fù)、電源3個(gè)功能按鍵，4個(gè)用戶自定義按鍵 LED：板載4顆藍(lán)色LED燈珠
11）震動(dòng)馬達(dá)傳感器：板載1個(gè)
12）其他連接口：MIPI、GPIO、SPI、I2C、TF Card (sd/mmc 3.0)、SIM卡座、USB 2.0 HOST、USB Type-C (with DP out)、eDP 1.3、HDMI 2.0 for 4K 60Hz
12、實(shí)驗(yàn)箱箱體：?jiǎn)螌右惑w式設(shè)計(jì)，左邊固定裝配實(shí)驗(yàn)所需硬件，右邊收納放置配套電源適配器、線材、備品備件等設(shè)備。
二、系統(tǒng)規(guī)格功能數(shù)值要求
★1、實(shí)操系統(tǒng)：Linux+QT、Ubuntu18.04、Android8.1，支持Linux+QT、Ubuntu雙實(shí)操系統(tǒng)SD卡快速離線變換，便利教學(xué)管理；
★2、須配備裝備LoRaWAN NS(network server)實(shí)驗(yàn)系統(tǒng)，協(xié)作硬件可完成LoRaWAN雙向通信實(shí)驗(yàn)，實(shí)驗(yàn)可以顯露無(wú)線通信頻率值、擴(kuò)頻因子、RSSI（接收信號(hào)強(qiáng)度）、信噪比、fcnt等信息。經(jīng)過實(shí)驗(yàn)可以快速評(píng)估和測(cè)量試驗(yàn)LoraWan協(xié)議下的數(shù)值通信格式、通信距離、信號(hào)重量等，同樣也可以基于現(xiàn)有的樣例實(shí)行二次研發(fā)快速完成課程設(shè)計(jì)、項(xiàng)目研發(fā)、科研等。
★3、提供嵌入式深度學(xué)習(xí)掌控把握框體結(jié)構(gòu)Tengine：針對(duì) ARM CPU 及 ARM Mali GPU 優(yōu)化，支持 Caffe/TensorFlow/MXnet/ONNX 模型文件，兼容 Caffe/TensorFlow API，以插件方法支持底層算子拓展，支持 INT8 量化。
★4、提供物聯(lián)網(wǎng)應(yīng)用基礎(chǔ)云平臺(tái)：
1）學(xué)生能夠?qū)⑽锫?lián)網(wǎng)感知層設(shè)備（傳感器、執(zhí)行器等）接入物聯(lián)網(wǎng)云服務(wù)平臺(tái)，平臺(tái)能夠接收并存儲(chǔ)傳感器和執(zhí)行器的就地實(shí)時(shí)數(shù)值，模型塊在線狀態(tài)，并就地實(shí)時(shí)顯露。
2）提供后臺(tái)管理系統(tǒng)，能夠設(shè)定賬號(hào)類型和使用權(quán)限。支持多用戶管理及權(quán)限控制，分為父用戶和子用戶，父用戶可以創(chuàng)建多個(gè)子用戶，并而且可以為每個(gè)子用戶分配增、刪、改幾種權(quán)限，子用戶創(chuàng)建的資源相互隔離。
3）提供物聯(lián)網(wǎng)規(guī)則編輯器，無(wú)需編寫代碼即可編輯復(fù)雜的自動(dòng)化控制策略，完成位移互聯(lián)網(wǎng)系統(tǒng)的自動(dòng)化控制。
4）提供豐富的可視化控件庫(kù)，經(jīng)過拖拽、簡(jiǎn)便配備即可完成美觀的UI設(shè)計(jì)。支持GIS地圖、彎彎曲線圖、柱狀、餅圖、圖表、按鈕、儀表圖等控件。
5）物聯(lián)網(wǎng)感知層設(shè)備也能夠向執(zhí)行器發(fā)送控制命令，系統(tǒng)能夠完成模型塊的在線監(jiān)測(cè)。
6）云平臺(tái)支持物聯(lián)網(wǎng)硬件多協(xié)議接入，經(jīng)過ZigBee/BLE/wifi/lora/NBIOT無(wú)線技術(shù)取得傳感器收集的數(shù)值，形成一個(gè)完整的無(wú)線傳感器互聯(lián)網(wǎng)。
7）數(shù)值經(jīng)過http/MQTT協(xié)議傳輸至物聯(lián)網(wǎng)應(yīng)用基礎(chǔ)云平臺(tái)系統(tǒng)，實(shí)行數(shù)值圖形化展示。
8）支持本地化部署和云端部署兩種方法。
★5、人工智能麥克風(fēng)陣列語(yǔ)音前處置整理系統(tǒng)：
1）需支持以下實(shí)驗(yàn)并提供全部源代碼：聲源定位、語(yǔ)音增強(qiáng)、語(yǔ)音降噪、回聲消除、聲音拾取實(shí)驗(yàn)。
三、實(shí)驗(yàn)教學(xué)課程資源
★平臺(tái)提供成套教學(xué)資源，用戶可以按照學(xué)期長(zhǎng)度和實(shí)際教學(xué)現(xiàn)象安排教學(xué)，須配備裝備實(shí)驗(yàn)指導(dǎo)書，實(shí)驗(yàn)指導(dǎo)書可以提供10～18周、每周2～6節(jié)課的教學(xué)實(shí)驗(yàn)需要。含有但不限于以下知識(shí)實(shí)驗(yàn)課程：
Linux 實(shí)驗(yàn)清單
初識(shí)linux 系統(tǒng)：Ubuntu 系統(tǒng)裝配、Ubuntu 系統(tǒng)入門、Ubuntu 終端實(shí)操、Shell 實(shí)操、APT 下載工量具、Ubuntu 下文本編輯、Linux 文件系統(tǒng)、Linux 用戶權(quán)限管理、Linux 磁盤管理
Linux應(yīng)用研發(fā)基礎(chǔ)：編寫 HelloWorld 代碼、編譯 HelloWorld、GCC 編譯器、Makefile文件
ARM Linux 研發(fā)基礎(chǔ)：RK3399研發(fā)平臺(tái)簡(jiǎn)介、研發(fā)環(huán)境搭建、關(guān)于ARM架構(gòu)、AArch64匯編基礎(chǔ)、RK3399啟動(dòng)方法詳解、匯編LED燈試驗(yàn)、C語(yǔ)言版LED燈實(shí)驗(yàn)
基于SDK研發(fā)Uboot,kernel,rootfs：SDK 基礎(chǔ)、U-Boot 頂層 Makefile 詳解、U-Boot 啟動(dòng)流程詳解、U-Boot 圖形化配備及其原理、Linux 內(nèi)核頂層 Makefile詳解、buildroot根文件系統(tǒng)組建
linux 設(shè)備驅(qū)動(dòng)程序研發(fā)基礎(chǔ)：字符設(shè)備驅(qū)動(dòng)研發(fā)、嵌入式 Linux LED 驅(qū)動(dòng)研發(fā)實(shí)驗(yàn)、新字符設(shè)備驅(qū)動(dòng)實(shí)驗(yàn)、Linux 設(shè)備樹、設(shè)備樹下的 LED 驅(qū)動(dòng)實(shí)驗(yàn)、pinctrl 和 gpio 子系統(tǒng)實(shí)驗(yàn)、Linux 并發(fā)與競(jìng)爭(zhēng)、Linux 并發(fā)與競(jìng)爭(zhēng)實(shí)驗(yàn)、Linux 按鍵寫入實(shí)驗(yàn)、Linux 內(nèi)核定時(shí)器實(shí)驗(yàn)、Linux 中斷實(shí)驗(yàn)、Linux 阻塞和非阻塞 IO 實(shí)驗(yàn)、異步通知實(shí)驗(yàn)
linux 設(shè)備驅(qū)動(dòng)程序研發(fā)進(jìn)階：platform 設(shè)備驅(qū)動(dòng)實(shí)驗(yàn)、設(shè)備樹下的 platform 驅(qū)動(dòng)編寫、Linux 自帶的 LED 燈驅(qū)動(dòng)實(shí)驗(yàn)、Linux MISC 驅(qū)動(dòng)實(shí)驗(yàn)、Linux INPUT 子系統(tǒng)實(shí)驗(yàn)、Linux RTC 驅(qū)動(dòng)實(shí)驗(yàn)、Linux I2C 驅(qū)動(dòng)實(shí)驗(yàn)、Linux SPI驅(qū)動(dòng)實(shí)驗(yàn)、Linux misc雜項(xiàng)設(shè)備驅(qū)動(dòng)實(shí)驗(yàn)
Linux 無(wú)線通信編程實(shí)驗(yàn)：lorawan NS實(shí)驗(yàn)、Linux互聯(lián)網(wǎng)編程試驗(yàn)、嵌入式 Web 服務(wù)器試驗(yàn)、IOT云服務(wù)實(shí)驗(yàn)
嵌入式 Linux QT研發(fā)
Qt簡(jiǎn)介：Qt環(huán)境搭建
Qt編程基礎(chǔ)：Qt用到的研發(fā)工量具、Qt編程涉及的術(shù)語(yǔ)和名詞、Qt Creator的初步使用、第一個(gè)Qt程序、Qt項(xiàng)目管理文件、Qt項(xiàng)目界面文件、Qt項(xiàng)目中的main主函數(shù)、Qt界面布置管理、Qt信號(hào)與槽機(jī)制、Qt Creator使用技巧
Qt應(yīng)用研發(fā)實(shí)例：QCalculator計(jì)算器應(yīng)用實(shí)驗(yàn)、QClock就地實(shí)時(shí)時(shí)鐘應(yīng)用實(shí)驗(yàn)、QLed LED控制應(yīng)用實(shí)驗(yàn)、QSht20溫濕度計(jì)應(yīng)用實(shí)驗(yàn)、QFileview文件瀏覽應(yīng)用實(shí)驗(yàn)、QReader文本閱讀器應(yīng)用實(shí)驗(yàn)、QTest綜合測(cè)量試驗(yàn)應(yīng)用實(shí)驗(yàn)、添加應(yīng)用到系統(tǒng)桌面
人工智能實(shí)驗(yàn)清單-基礎(chǔ)
神經(jīng)互聯(lián)網(wǎng)的基礎(chǔ)作業(yè)原理：神經(jīng)互聯(lián)網(wǎng)的基礎(chǔ)作業(yè)原理
神經(jīng)互聯(lián)網(wǎng)中的基礎(chǔ)概念：線性反向傳播實(shí)驗(yàn)、非線性反向傳播實(shí)驗(yàn)、梯度下降實(shí)驗(yàn)、損失函數(shù)實(shí)驗(yàn)
神經(jīng)互聯(lián)網(wǎng)之回歸問題：?jiǎn)巫兞烤€性回歸、多變量線性回歸
神經(jīng)互聯(lián)網(wǎng)之分類問題：線性二分類、線性多分類、神經(jīng)互聯(lián)網(wǎng)非線性二分類、神經(jīng)互聯(lián)網(wǎng)非線性多分類
神經(jīng)互聯(lián)網(wǎng)模型的推理與部署：測(cè)量試驗(yàn)實(shí)訓(xùn)成果實(shí)驗(yàn)、查看模型文件實(shí)驗(yàn)、ONNX模型文件制作實(shí)驗(yàn)、模型部署和測(cè)量試驗(yàn)實(shí)驗(yàn)
深度神經(jīng)互聯(lián)網(wǎng)：深度神經(jīng)互聯(lián)網(wǎng)框體結(jié)構(gòu)設(shè)計(jì)、深度神經(jīng)互聯(lián)網(wǎng)應(yīng)用、神經(jīng)互聯(lián)網(wǎng)優(yōu)化、神經(jīng)互聯(lián)網(wǎng)過結(jié)合問題
卷積神經(jīng)互聯(lián)網(wǎng)：卷積神經(jīng)互聯(lián)網(wǎng)基礎(chǔ)簡(jiǎn)介、卷積的前向計(jì)算、卷積的反向傳播、池化的前向計(jì)算與反向傳播、經(jīng)典的卷積神經(jīng)互聯(lián)網(wǎng)模型、MNIST分類實(shí)驗(yàn)、Fashion-MNIST分類實(shí)驗(yàn)
循環(huán)神經(jīng)互聯(lián)網(wǎng)：普通循環(huán)神經(jīng)、通用的循環(huán)神經(jīng)互聯(lián)網(wǎng)模型實(shí)驗(yàn)互聯(lián)網(wǎng)、兩個(gè)時(shí)間步的循環(huán)神經(jīng)互聯(lián)網(wǎng)實(shí)驗(yàn)、四個(gè)時(shí)間步的循環(huán)神經(jīng)互聯(lián)網(wǎng)、不定長(zhǎng)時(shí)序的循環(huán)神經(jīng)互聯(lián)網(wǎng)實(shí)驗(yàn)、深度循環(huán)神經(jīng)互聯(lián)網(wǎng)、雙向循環(huán)神經(jīng)互聯(lián)網(wǎng)、高級(jí)循環(huán)神經(jīng)互聯(lián)網(wǎng)
人工智能實(shí)驗(yàn)清單-圖像
圖像收集：USB攝像頭圖像收集
圖像處置整理：圖片顯露、色彩空間、像素運(yùn)算、ROI與泛洪填充、濾波與模糊實(shí)操、圖像直方圖、模板匹配、圖像二值化、圖像金字塔、圖像梯度、Canny邊緣檢驗(yàn)測(cè)試、直線檢驗(yàn)測(cè)試、圓檢驗(yàn)測(cè)試、輪廓發(fā)現(xiàn)
傳統(tǒng)機(jī)器視覺：手寫字識(shí)別、人臉檢驗(yàn)測(cè)試、目標(biāo)檢驗(yàn)測(cè)試
深度學(xué)習(xí)掌控把握機(jī)器視覺：手寫字識(shí)別、人臉檢驗(yàn)測(cè)試、目標(biāo)檢驗(yàn)測(cè)試、 端側(cè)推理框體結(jié)構(gòu)
云端機(jī)器視覺應(yīng)用：圖像識(shí)別實(shí)驗(yàn)、文字識(shí)別、人體解析
圖像視覺綜合應(yīng)用：人臉門禁控制、車牌道閘控制、手勢(shì)識(shí)別
人工智能實(shí)驗(yàn)清單-語(yǔ)音
語(yǔ)音處置整理 ：語(yǔ)音收集和播放實(shí)驗(yàn)、語(yǔ)音編碼和解碼實(shí)驗(yàn)、語(yǔ)音變速變調(diào)實(shí)驗(yàn)、語(yǔ)音活性檢驗(yàn)測(cè)試實(shí)驗(yàn)、語(yǔ)音喚醒實(shí)驗(yàn)、語(yǔ)音識(shí)別實(shí)驗(yàn)、語(yǔ)音合成實(shí)驗(yàn)
自然語(yǔ)言處置整理：中文分詞實(shí)驗(yàn)、關(guān)鍵詞提取實(shí)驗(yàn)、文本可視化實(shí)驗(yàn)、文本向量化實(shí)驗(yàn)、文本分類實(shí)驗(yàn)、文本聚類實(shí)驗(yàn)、文本情感解析實(shí)驗(yàn)、句法依存解析實(shí)驗(yàn)、組建聊天機(jī)器人實(shí)驗(yàn)
云端語(yǔ)音語(yǔ)言應(yīng)用：云端語(yǔ)音合成實(shí)驗(yàn)、云端語(yǔ)音識(shí)別實(shí)驗(yàn)、云端對(duì)話情緒識(shí)別實(shí)驗(yàn)、云端新聞?wù)獙?shí)驗(yàn)、云端短文本相似度實(shí)驗(yàn)、云端情感傾向解析實(shí)驗(yàn)、云端地址識(shí)別解析實(shí)驗(yàn)
語(yǔ)音語(yǔ)言綜合應(yīng)用：組建知識(shí)圖譜和聊天機(jī)器人實(shí)驗(yàn)、聲紋識(shí)別門禁實(shí)驗(yàn)、AI語(yǔ)音智能家居實(shí)驗(yàn) |
|
常見問題：
1、如果我要購(gòu)買AI視覺與語(yǔ)音實(shí)驗(yàn)箱，人工智能視覺實(shí)訓(xùn)平臺(tái)，是否有安裝、培訓(xùn)服務(wù)呢？
答：我們的設(shè)備如果沒有特別注明“不含安裝”“裸機(jī)價(jià)”“出廠”等字樣的，都是提供安裝、培訓(xùn)服務(wù)的。
2、你們的AI視覺與語(yǔ)音實(shí)驗(yàn)箱，人工智能視覺實(shí)訓(xùn)平臺(tái)是否能開增值稅專用發(fā)票？
答：可以的，我們是正規(guī)企業(yè)，并且已經(jīng)升級(jí)到一般納稅人，可以開具增值稅專用發(fā)票，如果您需要開AI視覺與語(yǔ)音實(shí)驗(yàn)箱，人工智能視覺實(shí)訓(xùn)平臺(tái)的發(fā)票，您需要提供開票資料。
3、你們的AI視覺與語(yǔ)音實(shí)驗(yàn)箱，人工智能視覺實(shí)訓(xùn)平臺(tái)都是自己生產(chǎn)的嗎？都有什么產(chǎn)品資質(zhì)？
答：我們公司是專業(yè)生產(chǎn)教學(xué)設(shè)備的企業(yè)，完全自主生產(chǎn)，并通過了最新版ISO9001認(rèn)證，擁有多項(xiàng)專利與著作權(quán)。
本文來自網(wǎng)絡(luò)，不代表本站立場(chǎng)，圖片為參考圖片，轉(zhuǎn)載請(qǐng)注明出處：AI視覺與語(yǔ)音實(shí)驗(yàn)箱，人工智能視覺實(shí)訓(xùn)平臺(tái)
