加入星計(jì)劃,您可以享受以下權(quán)益:

  • 創(chuàng)作內(nèi)容快速變現(xiàn)
  • 行業(yè)影響力擴(kuò)散
  • 作品版權(quán)保護(hù)
  • 300W+ 專業(yè)用戶
  • 1.5W+ 優(yōu)質(zhì)創(chuàng)作者
  • 5000+ 長期合作伙伴
立即加入
  • 正文
  • 推薦器件
  • 相關(guān)推薦
  • 電子產(chǎn)業(yè)圖譜
申請入駐 產(chǎn)業(yè)圖譜

【分享】好玩的嵌入式 AI ,機(jī)器視覺和音視頻處理

2023/08/24
3387
閱讀需 6 分鐘
加入交流群
掃碼加入
獲取工程師必備禮包
參與熱點(diǎn)資訊討論

我是老溫,一名熱愛學(xué)習(xí)的嵌入式工程師

自從 ChatGPT 問世以來,人工智能技術(shù)的熱度又被推上了一個(gè)臺(tái)階,越來越多企業(yè)開始關(guān)注自身業(yè)務(wù)能否與行業(yè)大模型相互結(jié)合,從而進(jìn)一步提升企業(yè)的業(yè)務(wù)效率。

同時(shí),越來越多企業(yè)相信,人工智能將會(huì)掀起一場科技革命,這場科技革命將會(huì)切實(shí)地影響每一位社會(huì)從業(yè)者。

作為一名嵌入式工程師,在平時(shí)工作中從事的都是嵌入式軟件編程,或者嵌入式硬件設(shè)計(jì)工作,似乎跟人工智能沾不上邊,但其實(shí),嵌入式人工智能已經(jīng)在不知不覺中,走進(jìn)了我們的生活。

比如:人臉識(shí)別門禁系統(tǒng)計(jì)算機(jī)視覺)、智能交互音箱(自然語言處理)、自動(dòng)駕駛技術(shù)(車載移動(dòng)偵測、環(huán)境感知),等等。

要看人工智能在嵌入式領(lǐng)域的熱門程度,可以觀察一下國內(nèi)國外處理器廠家的產(chǎn)品線布局,與Intel和NVIDIA這些國際高端處理器廠家不同的是,國內(nèi)已經(jīng)有不少芯片廠家布局帶有NPU神經(jīng)網(wǎng)絡(luò)處理器的MPU芯片了,

華為海思Ascend系列,瑞芯微RK系列,全志V853,地平線旭日X3,嘉楠K510,等等。

就在上一周,我收到了正點(diǎn)原子自主研發(fā)的首款嵌入式AI開發(fā)板,ATK-DLRV1126,這款開發(fā)板是正點(diǎn)原子基于瑞芯微RV1126中高端MPU芯片研發(fā)的,正好可以有機(jī)會(huì)學(xué)習(xí)一下嵌入式人工智能的相關(guān)知識(shí),進(jìn)一步擴(kuò)寬自己的嵌入式知識(shí)領(lǐng)域。

先大概說一下ATK-DLRV1126這款開發(fā)板的硬件資源,開發(fā)板的核心板是采用了Rockchip RV1126作為主CPU,這款CPU是4核Cortex-A7架構(gòu),最高主頻1.5GHz,帶有2.0TOPS NPU,ISP圖像處理器,內(nèi)置H264/H265硬件編解碼器,等等。

核心板采用8層沉金工藝進(jìn)行設(shè)計(jì),帶有2GB DDR4內(nèi)存,8GB EMMC存儲(chǔ)芯片,采用標(biāo)準(zhǔn)的260P SODIMM接口與開發(fā)板底板進(jìn)行相連接,260P SODIMM接口還可以方便地集成到客戶的PCB上,滿足各種應(yīng)用需求。

注:關(guān)于功能底板的硬件資源情況,可以參考開發(fā)板的配套資料文檔《02【正點(diǎn)原子】ATK-DLRV1126開發(fā)板硬件參考手冊V1.0.pdf》

再來說一下軟件應(yīng)用方面,按照正點(diǎn)原子官方提供的資料文檔,基本上可以從頭開始搭建開發(fā)環(huán)境,編譯u-boot和Linux內(nèi)核,構(gòu)建buildroot文件系統(tǒng),然后燒錄固件,運(yùn)行正點(diǎn)原子提供的應(yīng)用程序。

這一系列的操作主要參考以下幾個(gè)文檔:《01【正點(diǎn)原子】ATK-DLRV1126快速體驗(yàn)V1.2.pdf》、《【正點(diǎn)原子】ATK-DLRV1126系統(tǒng)開發(fā)手冊V1.4.pdf》、《【正點(diǎn)原子】ATK-DLRV1126 AI例程測試指南V1.1(開篇).pdf》,如下圖所示。

在學(xué)習(xí)ATK-DLRV1126開發(fā)板之前,需要開發(fā)者有一定的嵌入式Linux開發(fā)基礎(chǔ),在這個(gè)前提下,參考《【正點(diǎn)原子】ATK-DLRV1126系統(tǒng)開發(fā)手冊V1.4.pdf》這份文檔,基本上就可以從零開始搭建出RV1126的開發(fā)環(huán)境,并且進(jìn)行各種固件編譯和燒錄,應(yīng)用程序測試,等工作。

如果開發(fā)者沒有嵌入式Linux的開發(fā)基礎(chǔ),建議先使用正點(diǎn)原子的imx6ull開發(fā)板進(jìn)行入門,基于這款開發(fā)板的學(xué)習(xí)難度,真心不建議零基礎(chǔ)的同學(xué)直接上手學(xué)習(xí)這款開發(fā)板,否則很容易就會(huì)被勸退。

ATK-DLRV1126開發(fā)板的出廠鏡像,已經(jīng)內(nèi)置了多個(gè)嵌入式AI相關(guān)的應(yīng)用程序,如物體識(shí)別SSD、車牌識(shí)別、人臉檢測、人體姿勢檢測,也內(nèi)置了多個(gè)跟音視頻相關(guān)的應(yīng)用程序,如視頻解碼、行車記錄儀、live555推流,等等。

作為正點(diǎn)原子推出的首款嵌入式AI開發(fā)板,跟以往那種大而全的開發(fā)板不同的是,ATK-DLRV1126開發(fā)板設(shè)計(jì)得比較小巧精致,就像是一部掌上電腦。

這款開發(fā)板的學(xué)習(xí)定位也比較精確,主要是面向嵌入式AI(機(jī)器視覺)和音視頻開發(fā)的同學(xué),這款開發(fā)板對外引出的資源,以及正點(diǎn)原子提供的學(xué)習(xí)資料,已經(jīng)足夠讓嵌入式工程師邁入嵌入式AI開發(fā)的大門。

關(guān)于ATK-DLRV1126開發(fā)板的學(xué)習(xí)筆記,將會(huì)在后續(xù)的文章進(jìn)行展開,歡迎各位同學(xué)密切關(guān)注本公眾號(hào)后續(xù)文章。

最后,來欣賞幾張開發(fā)板實(shí)拍照片。






推薦器件

更多器件
器件型號(hào) 數(shù)量 器件廠商 器件描述 數(shù)據(jù)手冊 ECAD模型 風(fēng)險(xiǎn)等級(jí) 參考價(jià)格 更多信息
CY62167EV30LL-45ZXI 1 Cypress Semiconductor Standard SRAM, 1MX16, 45ns, CMOS, PDSO48, TSOP1-48
$69.33 查看
HFBR-57E5APZ 1 Broadcom Limited Transceiver, 1270nm Min, 1380nm Max, LC Connector, Surface Mount, ROHS COMPLIANT PACKAGE
$70.48 查看
IL4208 1 Vishay Intertechnologies Triac Output Optocoupler, 1-Element, 5300V Isolation, DIP-6

ECAD模型

下載ECAD模型
$3.34 查看

相關(guān)推薦

電子產(chǎn)業(yè)圖譜