一、ASTRA AI是什么
ASTRA AI芯片是一種集成了多種計算單元(包括NPU/uNPU、GPU、CPU、DSP等)的異構計算系統級芯片(SOC),專為處理復雜的人工智能(AI)任務而設計。這種設計使得ASTRA AI芯片能夠在單個芯片上高效地執行多種不同類型的計算任務,從而滿足各種AI應用場景的需求。
二、主要組成部分解析
1.NPU/uNPU(Neural Processing Unit/micro Neural Processing Unit)
NPU是專門用于神經網絡加速的處理器,能夠高效執行深度學習算法中的矩陣運算和卷積操作。
uNPU指的是微型的NPU,設計用于處理較小規模的神經網絡或嵌入式系統中的AI任務,以節省功耗和成本。
2.GPU(Graphics Processing Unit):
GPU原本用于圖形渲染,但因其強大的并行處理能力,現在也被廣泛用于AI計算,特別是加速大規模矩陣運算和圖像處理。
3.CPU(Central Processing Unit):
CPU是系統的主控中心,負責執行各種指令,包括操作系統、應用程序以及AI任務的調度和管理。
4.DSP(Digital Signal Processor):
DSP專門設計用于處理數字信號,如音頻和視頻數據。在AI應用中,DSP可以加速信號處理和特征提取等任務。
三、多模態AI算法支持
ASTRA AI芯片支持多模態AI算法,意味著它能夠同時處理來自不同來源和類型的數據,如圖像、語音、文本等。這種多模態處理能力對于構建復雜、全面的AI系統至關重要,因為它可以整合來自多個傳感器的信息,從而做出更準確的決策。
1.視覺算法:用于圖像識別、物體檢測、場景理解等任務。
2.語音算法:支持語音識別、語音合成、情感分析等語音處理任務。
3.大模型支持:能夠接入并高效運行各種大型AI模型,如深度學習模型、自然語言處理模型等,從而滿足復雜應用場景的需求。
四、本地AI算力平臺五大特點
為了滿足構建新一代智能物聯網設備的客戶需求,深蕾半導體推出了可擴展的智能邊緣處理器產品組合Astra系列。全新的Astra本地AI算力平臺產品具備五大特點助力客戶構建新一代智能物聯網產品:
差異化計算解決方案
提供一系列節能多模的AI MPU芯片,以及高性能AI及MCU,為家庭自動化、智能家電、過程控制、可穿戴設備、安全、數字標牌、流媒體和企業會議等市場應用提供可擴展的、差異化的計算解決方案。
自適應AI框架
通過開放、跨平臺、工具化、建模和優化的自適應AI框架,從 “讓人工智能發揮作用” 變為 “與人工智能合作”。
統一的軟件體驗
全面的板級支持包(支持Linux,Android和領先的RTOS)提供開放、一致的跨平臺體驗。它基于標準的操作系統接口、安全架構和加速方法構建。用戶可以基于熟悉的開發環境縮短評估和決策周期
廣泛的合作伙伴解決方案生態系統
客戶可以與行業領先的合作伙伴公司(從ODM和ISV到服務提供商和系統集成商)一起構建市場就緒的系統和解決方案堆棧。從用于企業和消費市場的單板計算機、流媒體、平板電腦、顯示器和用于教育和商業的交互式 A/V 會議系統,到支持計算的連接模塊,ASTRA產品系列使各種物聯網平臺成為可能。
優秀的無線連接性能
業界一流、行業認可的無線連接性能,支持Wi-Fi、藍牙、BLE、802.15.4和GPS/GNSS等,并通過標準的 Linux 和 RTOS 軟件框架和協議(如 Matter)實現。
五、支持多種方式接入AI推理
1.HDMI RX:通過HDMI接收接口,ASTRA可以接入高清視頻信號,進行視頻內容的實時分析和處理。這種方式適用于需要處理高清視頻輸入的場景,如安防監控、視頻會議等。
2.MIPI/USB攝像頭:MIPI和USB是兩種常見的攝像頭接口標準。ASTRA支持通過這兩種接口接入攝像頭,獲取實時視頻流,并應用AI算法進行圖像識別、目標跟蹤等任務。這種方式在自動售賣機、智慧零售等領域有廣泛應用。
3.RTSP/RTMP流:RTSP(Real Time Streaming Protocol)和RTMP(Real Time Messaging Protocol)是兩種常用的流媒體傳輸協議。ASTRA支持通過這兩種協議接入網絡視頻流,進行遠程視頻內容的分析和處理。這種方式適用于需要處理網絡視頻內容的場景,如遠程監控、在線教育等。
4.本地視頻播放:ASTRA支持對存儲在本地設備上的視頻文件進行播放和分析。這種方式適用于需要處理本地視頻文件的場景,如視頻編輯、視頻內容審核等。
5.靜態圖像:ASTRA還支持對靜態圖像進行分析和處理。這可以用于圖像識別、圖像分類、圖像增強等多種應用場景。
6.麥克風:通過麥克風接入,ASTRA可以接收音頻信號,進行語音識別、語音合成等任務。這在智慧客服、智能家居等領域有重要應用。
六、芯片系列以及典型應用場景
ASTRA AI芯片系列中,包含了SL1680型號、SL1640型號、SL1620型號、SR110型號。應用場景有:
1.自動售賣:通過接入攝像頭和麥克風,ASTRA可以實時分析顧客的行為和需求,優化商品陳列和售賣策略。
2.智慧顯示牌:結合視頻流和靜態圖像的處理能力,ASTRA可以根據環境變化和觀眾需求動態調整顯示內容,提升用戶體驗。
3.安檢設備:通過對行李、人員等物品進行圖像識別和分析,ASTRA可以幫助安檢人員快速發現潛在威脅,提高安檢效率。
4.缺陷檢測:在工業生產線上,ASTRA可以對產品進行實時圖像檢測,發現缺陷并及時報警,確保產品質量。
5.事件預警:結合視頻流和音頻信號的分析能力,ASTRA可以實時監測環境中的異常情況,并及時發出預警信號。
6.自動化運維:ASTRA可以通過對系統日志、監控視頻等數據的分析,幫助運維人員快速定位和解決問題,提高運維效率。
7.多媒體交互:通過語音識別和合成技術,ASTRA可以實現與用戶的自然語言交互,提供更加便捷和智能的服務體驗。
8.視頻內容分析:ASTRA可以對視頻內容進行深度分析,提取關鍵信息并生成分析報告,為決策提供有力支持。
綜上所述,
ASTRA憑借其強大的AI推理能力和多樣化的接入方式,
在多個領域都有著廣泛的應用前景。
審核編輯 黃宇
-
半導體
+關注
關注
334文章
27719瀏覽量
222674 -
AI
+關注
關注
87文章
31536瀏覽量
270344
發布評論請先 登錄
相關推薦
深蕾半導體HDMI AI分析盒子
![<b class='flag-5'>深</b><b class='flag-5'>蕾</b><b class='flag-5'>半導體</b>HDMI <b class='flag-5'>AI</b>分析盒子](https://file1.elecfans.com/web2/M00/0B/1B/wKgZomctdSiARgt1AAeUNKtx3UY198.png)
ASTRA AI Hub詳細介紹
![<b class='flag-5'>ASTRA</b> <b class='flag-5'>AI</b> Hub<b class='flag-5'>詳細</b><b class='flag-5'>介紹</b>](https://file1.elecfans.com/web2/M00/0A/1E/wKgZomcZ-_qARML3AAUdkZFcHDY368.png)
![](https://file1.elecfans.com/web2/M00/0A/6A/wKgaomcOIl2AMm3HAA3rNUSduCU306.jpg)
深蕾半導體Astra? SL1620嵌入式物聯網處理器詳細介紹
![<b class='flag-5'>深</b><b class='flag-5'>蕾</b><b class='flag-5'>半導體</b><b class='flag-5'>Astra</b>? SL1620嵌入式物聯網處理器<b class='flag-5'>詳細</b><b class='flag-5'>介紹</b>](https://file1.elecfans.com/web2/M00/08/88/wKgZomb4vcSAGWBQAAsetFzP1DA275.png)
Astra? SL系列SL1680詳細介紹,嵌入式物聯網處理器
![<b class='flag-5'>Astra</b>? SL系列SL1680<b class='flag-5'>詳細</b><b class='flag-5'>介紹</b>,嵌入式物聯網處理器](https://file1.elecfans.com/web2/M00/03/9C/wKgaoma9ZyiAedv4AALll9Ah-9g157.png)
ASTRA產品SL1680、SL1640、SL1620簡介與對比
![<b class='flag-5'>ASTRA</b>產品SL1680、SL1640、SL1620簡介與對比](https://file1.elecfans.com/web2/M00/00/1D/wKgZomasfcOABZQAAANtpwSzpW8209.png)
Astra SDK源碼開放下載--深蕾半導體開發中心
![<b class='flag-5'>Astra</b> SDK源碼開放下載--<b class='flag-5'>深</b><b class='flag-5'>蕾</b><b class='flag-5'>半導體</b>開發中心](https://file1.elecfans.com/web2/M00/FB/65/wKgZomaQ9mKAL1vLAAKqzZN3Cqc856.png)
深蕾科技攜手Synaptics成功舉辦Astra中國技術研討日活動
![<b class='flag-5'>深</b><b class='flag-5'>蕾</b>科技攜手Synaptics成功舉辦<b class='flag-5'>Astra</b>中國技術研討日活動](https://file1.elecfans.com/web2/M00/F1/5E/wKgZomZ03N6AXtDlAA_5NYk_Q1k637.png)
2024年深蕾科技攜手Synaptics舉辦Astra中國技術研討會
![2024年<b class='flag-5'>深</b><b class='flag-5'>蕾</b>科技攜手Synaptics舉辦<b class='flag-5'>Astra</b>中國技術研討會](https://file1.elecfans.com/web2/M00/EE/8E/wKgaomZr8NCAZEwpAAOCTEfcbj8666.png)
深蕾半導體VS680人形機器人精彩亮相2024德國嵌入式展Embedded World
![<b class='flag-5'>深</b><b class='flag-5'>蕾</b><b class='flag-5'>半導體</b>VS680人形機器人精彩亮相2024德國嵌入式展Embedded World](https://file1.elecfans.com/web2/M00/D7/49/wKgaomYnaeuAOvfbAAW5jEtkbDw934.png)
深迪半導體榮獲“2023-2024半導體行業/MEMS芯片創新引領企業”獎
![<b class='flag-5'>深</b>迪<b class='flag-5'>半導體</b>榮獲“2023-2024<b class='flag-5'>半導體</b>行業/MEMS芯片創新引領企業”獎](https://file1.elecfans.com/web2/M00/C6/A5/wKgZomYLeJiAUZYZAAAVhYz-jMg702.jpg)
評論