衡阳派盒市场营销有限公司

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

視海芯圖Transformer加速SoC助力AR/VR設備性能升級

Monika觀察 ? 來源:電子發燒友網 ? 作者:莫婷婷 ? 2023-05-12 12:15 ? 次閱讀

5月12日,第十三屆松山湖中國IC創新高峰論壇在廣東東莞松山湖凱酒店舉行,本屆活動繼續由中國半導體行業協會IC設計分會(ICCAD)、芯原微電子、松山湖管委會主辦,東莞松山湖集成電路設計服務中心,東莞市生技置業有限公司承辦。電子發燒友網受邀參與活動并作現場報道。

成都視海芯圖微電子有限公司創始人許達文認為,很多AI模型的主干網絡正從CNN轉變為Transformer,Transformer可以解決終端芯片訪存密集型、不規則訪存,以及NPU利用率低的難題。

視海芯圖推出了Transformer加速SoC——SH1580芯片,采用12nm工藝,具備自研NPU、高性能主核、高性能圖像處理的特點。SH1580芯片具備2TOPS@INT8有效算力,在圖像處理方面,支持AI-HDR、3D-ToF圖像處理等。


許達文介紹,SH1580芯片的核心技術為PTPU架構,具備定制電路支持Transformer存儲結構和訪存優化的特點,另外視海芯圖還設計了可重構數據流,同時高效支持CNN和Transformer。

在AR/VR的應用中,為了能夠讓數字世界跟物理世界實現深層次的融合,需要把數字信息映射到物理世界中。這就需要場景識別功能,還需要支持混合性輸入,包括圖像輸入、語音輸入。“特別是圖像輸入這塊,往往要輸入、接收2D、3D圖像。這么復雜的一些場景和算法的話,它就需要一個配套的算法來支撐。”許達文表示。而基于Transformer為架構的模型能夠結束一部分問題。

在AR/VR設備中,SH1580芯片在SLAM中可以做特征點匹配LoFTR、地點識別SVT-Net,另外在AR/VR設備的應用中還能實現語義分割 SegFormer以及三維重建 Point-Bert。傳統CNN算法很難做稀疏紋理匹配,但是Transformer可以做到準確的無紋理特征識別。

值得一提的是,AR/VR設備對于需要有低功耗有著一定的需求。SH1580芯片基于12nm工藝。采用電源與芯片架構,idle功耗為46mW,超低功耗模式可以做到6mW。該產品在AR眼鏡上已有應用案例。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • Ar
    Ar
    +關注

    關注

    24

    文章

    5108

    瀏覽量

    170165
  • Transformer
    +關注

    關注

    0

    文章

    145

    瀏覽量

    6047
收藏 人收藏

    評論

    相關推薦

    攜手Porotech進軍AR眼鏡市場

    近日,鴻公司宣布將與Porotech攜手,共同進軍AR(增強現實)眼鏡市場。這一合作標志著鴻AR技術和MicroLED領域戰略布局的進一步加速
    的頭像 發表于 12-25 10:49 ?563次閱讀

    杭晶電子:晶振在AR/VR中的應用

    晶振在AR/VR設備中扮演重要角色,為其核心電子系統提供穩定的時鐘信號,確保設備的高性能運行。 以下是晶振在
    的頭像 發表于 12-04 10:49 ?229次閱讀
    杭晶電子:晶振在<b class='flag-5'>AR</b>/<b class='flag-5'>VR</b>中的應用

    科技32位MCU加速工業芯片國產替代

    隨著國產高性能32位MCU的崛起,科技憑借其在產品性能、可靠性、安全性和低功耗方面的優勢,以及不斷完善的開發生態,正逐步打破國際廠商的壟斷地位。CS32系列MCU的多樣化產品線,將
    的頭像 發表于 11-14 15:00 ?536次閱讀
    <b class='flag-5'>芯</b><b class='flag-5'>海</b>科技32位MCU<b class='flag-5'>加速</b>工業芯片國產替代

    CDS8702park

    版主,你好,請把CDS8702的PARK發我一下,1030200672@qq.com,謝謝!
    發表于 11-06 16:57

    助力榮耀MagicBook Pro 16,科技EC芯片再下一城

    特別值得一提的是,榮耀MagicBook Pro 16選擇搭載了科技高性能EC芯片,助力榮耀AI PC在整機性能上實現更為流暢、高效和可
    的頭像 發表于 08-09 15:50 ?473次閱讀
    <b class='flag-5'>助力</b>榮耀MagicBook Pro 16,<b class='flag-5'>芯</b><b class='flag-5'>海</b>科技EC芯片再下一城

    XR與ARVR的區別是什么

    XR(Extended Reality,擴展現實)是一種將現實世界與虛擬世界相結合的技術,它包括了AR(Augmented Reality,增強現實)和VR(Virtual Reality,虛擬現實
    的頭像 發表于 07-08 09:43 ?6253次閱讀

    思回歸安防,Hi35I6CV610打頭陣,IPC SoC市場戰火重燃

    電子發燒友網報道(文/黃晶晶)最近,AI泛視頻解決方案提供商重磅宣布了,2024年思新品Hi35I6CV610首發量產的消息。這意味著,繼華為麒麟手機SoC芯片回歸之后,華為
    的頭像 發表于 05-18 01:32 ?1.1w次閱讀
    <b class='flag-5'>海</b>思回歸安防,Hi35I6CV610打頭陣,IPC <b class='flag-5'>SoC</b>市場戰火重燃

    科技推出壓容二合一SoC系列芯片

    近日,科技宣布推出一款創新的“壓容二合一SoC”系列芯片,這款芯片融合了電阻式和容式檢測模塊,實現了“容式觸摸、滑動+壓力檢測”的高可靠性人機交互體驗。
    的頭像 發表于 05-16 15:12 ?900次閱讀

    應用筆記:CPW3101入門指南

    本技術說明文檔提供關于 CPW3101 開發板 UFCS_EVB_V1.2 功能介紹、特性說明、使用說明、IAP升級、使用注意事項等,旨在幫助用戶更好地使用 CPW3101 開發板_V1.2,進行
    發表于 05-16 14:39

    應用筆記:CSU3AF10 IAP功能設計指南_V1.0

    本文檔旨在幫助用戶基于科技 CSU3AF10 開發設計的產品中加入 IAP 功能,從而通過 USBType-C 接口的 CC 引腳(利用 PD 協議)或 DP & DM 引腳
    發表于 05-16 14:29

    應用筆記:通用 MCU IAR 開發指南

    本應用筆記旨在幫助指導用戶針對海通用 MCU 基于 IAR 環境的快速開發,幫助用戶快速建立應用工程。科技通用 MCU 提供的 pack 開發包都是僅支持
    發表于 05-16 11:50

    應用筆記:通用 MCU 基于 GCC 編譯開發應用

    本應用筆記旨在幫助指導用戶針對海通用 MCU 基于 GCC 環境的快速開發。科技通用 MCU 提供的 pack 開發包都是僅支持
    發表于 05-16 11:47

    海通用 MCU 應用筆記 :CS32F103 系列 MCU IAP 升級指南

    本應用筆記旨在幫助指導用戶針對 CORTEX-M3 MCU CS32F103 系列單片機 IAP 應用的快速開發。本應用筆記實現了 CAN 和 USART 兩種接口方式來開發 IAP 應用,協議
    發表于 05-16 11:40

    混合信號 SOC 產品用戶指南

    混合信號 SOC 產品是指集成了 RISC MCU、高精度 ADC、LED/LCD 顯示模塊等高系統集成的產品。芯片系統資源為特定應用領域量身定做,集高性能,高集成度,高性價比于一
    發表于 05-16 09:51

    晶心科技與元合作打造全球首次采用RISC-V IP SoC的車規級CMOS圖像傳感器產品

    RISC-V IP供貨商Andes晶心科技(TWSE:6533)與邊緣運算芯片供貨商元智能科技共同宣布,元 MAT系列作為全球首次采用RISC-V IP
    的頭像 發表于 02-22 10:55 ?914次閱讀
    狮威百家乐娱乐场| 同乐城百家乐娱乐城| 金满堂百家乐的玩法技巧和规则| 大发888娱乐场下载 制度| 顶尖百家乐官网学习| 百家乐官网娱乐平台官网网| 百家乐和的几率| 大发888赌场娱乐网规则| 深州市| 盛大百家乐官网的玩法技巧和规则| 百家乐娱乐平台真人娱乐平台| 百家乐庄闲桌子| 欢乐谷棋牌游戏官网| 线上百家乐官网平台| 百家乐官网赢退输进有哪些| 百家乐英皇娱乐场开户注册| 博娱乐城| 百家乐官网下注法| 大发888娱乐方下载| 澳门百家乐官网鸿福厅| 百家乐心得分享| 顶级赌场371betcwm| 博天堂百家乐官网官网| 百家乐蔬菜配送公司| 百家乐官网视频表演| 百家乐技巧阅读| bet365存款| 沙龙百家乐官网赌场娱乐网规则 | 视频百家乐赌法| 德阳市| 模拟百家乐游戏软件| 乐博娱乐| 百家乐数据程序| 蓝盾网上娱乐| 百家乐真钱电玩| 韦德娱乐| 百家乐庄闲规则| 尊龙国际开户| 2016哪个属相做生意吉利| 赌博的危害| 百家乐庄闲局部失衡|