瑞薩電子作為全球微控制器供應商，產(chǎn)品包括模擬器件、功率半導體和嵌入式處理器等。在中國市場，瑞薩電子與眾多本地客戶建立了長期戰(zhàn)略合作伙伴關系，以推動汽車、物聯(lián)網(wǎng)、工業(yè)及基礎設施行業(yè)的發(fā)展。近年來，瑞薩電子在實現(xiàn)持續(xù)的高速增長的同時，持續(xù)加大研發(fā)投入并根據(jù)中國市場的需求來精準的研發(fā)相關產(chǎn)品，力求使新產(chǎn)品更貼合中國市場與客戶的需求。

今年九月底，瑞薩電子全球銷售及市場本部副總裁賴長青、技術系統(tǒng)和解決方案事業(yè)部總監(jiān)王均峰、工業(yè)自動化高級總監(jiān)徐征及相關人員拜訪了上海交通大學計算機科學與工程系，并與系主任吳帆教授、副系主任孔令和、約翰·霍普克羅夫特計算機科學中心副主任金海明等11人進行了深入的交流。

上海交大計算機系歷史悠長、積淀深厚，近年來科研產(chǎn)出增長迅猛、成績斐然，吳帆主任希望未來持續(xù)采取多種方式推動雙方合作，探索與構建校企之間務實共贏的創(chuàng)新合作模式。賴長青副總裁表達了對上海交大計算機系科教團隊與科研成果的高度贊賞并非常榮幸能與之合作，以目前進行中的項目層面合作為起點，在瑞薩電子后續(xù)的產(chǎn)業(yè)拓展中，尋求更大范圍的合作機會。

項目介紹

01  嵌入式人工智能（e-AI）for RZ-T2/N2系列芯片

在這個項目中，我們將至力于在基于Cortex-R52內核的MPU芯片上實現(xiàn)運行輕量級機器學習模型的技術R-ETE（Renesas-Embedded Training Engine面向瑞薩嵌入式設備的訓練引擎）。這項技術在業(yè)界首次將機器學習技術與Cortex-R52內核作了深度的優(yōu)化，可以使用少量的內存資源高效的運行AI模型，從而為客戶端的應用帶來更智能的決策能力。這一技術的突破將為工業(yè)實時控制與通訊、監(jiān)控、預測和優(yōu)化復雜生產(chǎn)和制造過程提供了新的工具和便利。

按照合作計劃，瑞薩更高性能的基于Cortex-A55和Cortex-R52多核異構的MPU上將布署業(yè)界流行的輕量級深度學習推理及訓練引擎，比如TersorFlow Lite、MNN、NCNN等等。探索通過強化學習和聯(lián)邦學習等機器學習技術，賦能機器人智能控制，工業(yè)伺服的控制系統(tǒng)以及廣泛地應用于生產(chǎn)設備的日常預測性維護和過程質量控制等場景。

02  RZ-V MPU AI目標檢測NAS方案（AI人工智能目標檢測神經(jīng)網(wǎng)絡架構搜索）

瑞薩RZ/V系列芯片是帶有AI加速的高性能MPU，不僅搭載了多核的ARM Cortex-A55核，還配備了瑞薩獨有的AI算法加速模塊（DRP-AI），能夠在超低功耗的條件下達到最佳的AI算法加速效果。通過與上海交大合作，以瑞薩RZ/V MPU為硬件基礎，用Iterative One-shot NAS搜索算法軟件訓練框架與嵌入式MPU平臺相結合。硬件芯片通過將系統(tǒng)資源利用率、功耗、時延等數(shù)據(jù)實時反饋用于NAS算法模型訓練，不僅能精準的生成嵌入式適應的神經(jīng)網(wǎng)絡模型，還將RZ/V系列芯片的系統(tǒng)資源利用率發(fā)揮到極致。這將極大推動瑞薩AI MPU在工業(yè)制造、智能監(jiān)控、機器人技術以及其他領域的發(fā)展。

03  基于RZ/Five（RISC-V）和RZ/G2UL MPU（ARM）的矽璓（XiUOS）智能終端

在這個項目中，基于ARM Cortex-A55 1.0GHz的RZ/G2UL和RISC-V 1.0 GHz的RZ/Five兩款微處理器的智能終端產(chǎn)品，我們將與上海交通大學進行深度合作，開發(fā)將瑞薩芯片中支持的Linux系統(tǒng)與上海交大的矽璓（XiUOS）開源操作系統(tǒng)進行適配，構成了松耦合異構智能系統(tǒng)。通過靈活的可插拔技術高效的管理4G、LoRa、協(xié)處理器組件，顯示組件，并通過以太網(wǎng)、RS485、CAN等接口聯(lián)接工業(yè)物聯(lián)網(wǎng)設備、支撐工業(yè)物聯(lián)應用，實現(xiàn)智能化的“全面感知、泛在互聯(lián)、實時認知、精準調控”。此平臺將充分利用瑞薩RZ/G2UL，RZ/Five處理器的高性能、高可靠、易擴展的特性，和矽璓操作系統(tǒng)的松耦合架構，豐富的工業(yè)物聯(lián)網(wǎng)“控，知，感，聯(lián)”框架，相信這將為中國客戶在工業(yè)物聯(lián)網(wǎng)應用上帶來更便利的選擇。