隨著2D成像逐步向3D視覺感知升級,3D視覺感知市場作為一個全新的科技行業,已形成一條包括上游、中游、下游和應用終端的產業化鏈條,逐步邁進規模快速增長的爆發期。據Yole發布的全球3D成像和傳感市場研究報告顯示,2019年全球3D視覺感知市場規模為50億美元,預計在2025 年達到150億美元,年復合增長率約為20%。
為更好地探討3D深度視覺芯片領域發展現狀,分析如今3D視覺技術上存在的問題,探索未來的發展方向,2021年11月25日14:00-15:00,銀牛微電子——全球前沿的3D深度芯片企業以色列Inuitive的母公司正式舉辦《全球前沿3D深度視覺芯片及模組引領者,強勢登陸中國市場》線上發布會,重磅推出基于Inuitive NU4000芯片的“銀牛3D機器視覺模組C158”。銀牛微電子董事長兼CEO曲冠誠,以及銀牛微電子聯合創始人何火高(Kenny)作為演講嘉賓出席本次發布會,針對此次新品發布,企業創立初心和發展戰略,以及會議聽眾互動問答等作出深度解讀。
并購Inuitive:銀牛微電子致力于構建全新的3D機器世界
去年11月,銀牛微電子完成對全球領先的3D視覺芯片設計企業以色列Inuitive的收購,成功將集成了3D視覺深度引擎技術、人工智能及SLAM技術的高端芯片公司納入旗下,旨在助力中國市場的產業升級,引領全球的3D行業變革。
在介紹銀牛微電子收購Inuitive的初衷時曲冠誠提到,第一次見到Inuitive時就被該公司的設計理念深深吸引,早在10年之前Inuitive就開始對人工智能進行深刻地思考,人工智能要如何更“像人”,經過長期以來的技術研發和積累沉淀,Inuitive也成為全世界第一家將信息獲取能力、信息感知能力、深度學習能力三大功能共同集成在芯片產品的企業。
銀牛微電子董事長兼CEO 曲冠誠
據悉,Inuitive團隊有著豐富的設計經驗,Inuitive創始人及CEO Shlomo Gadot先生系以色列芯片領域領軍人物,早在80年代即為美國貝爾實驗室科學家,曾帶領團隊成功研發了ADSL/HDSL,并曾創立多家成功的芯片設計企業;聯合創始人Dor Zepeniuk先生系原PrimeSense研發負責人,后被蘋果公司收購,是光學設計、無線芯片、片上系統SoC、單元計算等多領域專家。此外,Inuitive所有人員的從業經歷平均超過20年,幾乎都是光學、計算機視覺,嵌入式系統等8個學科領域中的頂尖人才。
對于銀牛微電子而言,收購Inuitive完成后除了實現中國公司絕對控股,還能獲得超前的設計理念以及對人工智能的理解,并融合Inuitive原本在計算機視覺、人工智能、光學、系統架構、嵌入式系統軟件、邊緣計算及芯片設計等領域積累的豐富經驗,在國際客戶已經驗證的基礎上,進一步根據中國客戶的需求來調優現有的產品,進一步滿足中國客戶的需求。通過結合以色列的技術+中國本地化的產品和服務的方式,實現多地辦公、貼近客戶,為中國市場而發展壯大。
曲冠誠表示:“銀牛微電子的愿景和使命,是讓每個參與者實現自己的3D夢想,以構建全新的3D機器世界”。如今,銀牛微電子已經建立起研發、生產、銷售、市場、商務拓展、客戶支持的完整團隊,形成中以合作,雙向反哺的全新合作模式,同步支持國內和國際客戶的發展。銀牛微電子還會根據機器人市場的細分情況持續推出新產品。未來,還將面向自動駕駛、醫療、金融支付元宇宙等眾多領域,根據客戶的需求推出相應的芯片及模組產品。”
核心技術加持,銀牛3D機器視覺模組C158正式亮相
銀牛微電子聯合創始人 何火高(Kenny)
據銀牛微電子聯合創始人何火高Kenny介紹,銀牛微電子擁有三大核心技術:
一、Depth Sensing深度感知技術,銀牛微電子最為核心的技術之一,深度視覺引擎等專為3D感知功能設計的獨特IP,結合公司自言深度算法,性能功耗均比市場上的其他解決方案優異;
二、SLAM 實時定位與建圖,指在運動過程中傳感器探測并建立環境的模型,同時估計自己的運動并定位,這是在機器視覺應用中最常見的功能之一;
三、TimeWarp (ATW) 異步時間扭曲,ATW能產生中間幀,從而有效減少畫面的抖動。這是目前在VR/AR應用中最為重要的技術之一,帶VR眼鏡的人通常會面臨一個問題,如果視頻幀率不足的話用戶會出現眩暈感,異步時間扭曲技術能夠產生中間幀,從而能夠減少畫面的抖動,減少眩暈的這種感覺。銀牛微電子也將此部分功能以硬件實現的方式實現大幅度的降低延遲,從動作到畫面的反應延遲小于1毫秒。
基于上述三大核心技術,銀牛微電子推出了第二代芯片NU4000,集成的功能特性包括:專用的深度感知加速器,強勁的AI能力,高精度的實時建圖和回歸,通用CPU核,豐富的I/O接口,以及先進的12nm制造工藝。
NU4000
在核心技術和芯片產品優勢的加持下,銀牛微電子在本次發布會上重磅發布“銀牛3D機器視覺模組C158”,該模組由2個魚眼攝像頭+一個RGB彩色攝像頭+2個IR紅外攝像頭組成,還搭載了一個3D激光投射器,能夠為用戶提供從感知到計算到系統一體化的解決方案。
銀牛3D機器視覺模組C158
在產品性能方面,C158集深度感知能力、SLAM實時跟蹤建圖引擎、實時高精度/穩定跟蹤等亮點于一身,具體來看包括:
1、強大的深度感知能力,從0.3米到6米的感知范圍可以實現1%的深度精度誤差,分辨率高達1280x800,幀率可達60fps,還可以達到水平方向66°垂直方向44°的視場角,可滿足市面上絕大部分的客戶對深度的要求;
2、SLAM實時跟蹤建圖引擎,高精度的實時建圖和回歸能力,支持120fps的2路攝像頭,6自由度坐標的重定位,結合魚眼攝像頭跟蹤模組,可以實現實時高精度的穩定跟蹤;
3、實時高精度的穩定跟蹤,一方面采用雙魚眼攝像頭結構設計,視場角高達166.5°,板載六軸傳感器,采樣率高達100fps;
4、NU4000芯片性能加持,高達6TOPS的綜合運算能力,能夠給用戶提供非常靈活的配置,在不同的應用場景下用不同的AI引擎來進行計算或控制。同時在NU4000上通用CPU核采用ARM Cortex A5架構,工作頻率高達1.2GHz,支持嵌入式Linux操作系統,支持LPDDR4內存;
5、提供豐富的接口,包括USB/MIPI接口,支持windows/Linux等各種操作系統;
6、功耗與體積優勢,C158長寬高為125mmx40mmx27mm,功耗低至1.4W,可在0°~50°環境下工作。
市場為何原意選擇銀牛微電子?
在與觀眾的互動問答中,針對“支持雙目立體深度結構光和單目有什么區別”這一問題,何火高表示,雙目立體深度結構光不僅僅是比單目結構光多了一個攝像頭那么簡單。從物理原理來講,結構光技術其實是應用了三角定位測距原理,但雙目立體深度結構光技術依靠自然的紅外反射在攝像頭上產生特征點,然后來計算對象物的深度信息數據。而結構光需要有一個投射的光發射源,發射出去光線以后帶編碼的光到了對象物再反射回來計算深度。由此產生一個問題,在室外時結構光發射的帶編碼的光經常會受到環境干擾,而雙目立體深度結構光技術就不容易受到室外光線干擾,室外室外皆可采用。對此曲冠誠也補充表示,在自動駕駛等室外遠距離場景應用中,雙目立體深度結構光優勢更大。
有觀眾提問“感知到計算到系統一體化是不是每一個機器視覺必須要經歷的環節?”對此何火高認為,機器從感知到分析到計算,到最終的決策執行,需要用到系統的整體設計,而不是某個單一模塊的加強,銀牛微電子所推出的C158就是一款能夠把感知、計算和系統決策全部合為一體,一方面提高系統的集成度,同時增強了系統的穩定高效。
曲冠誠在回答“中以團隊具體是通過哪些措施來滿足本土化需求的”這一提問時表示,銀牛微電子現在分為以色列團隊和中國團隊,核心技術人員都是來自于全球各行各業的頂尖人才,中以兩個團隊之間創造了一種全新的合作模式,實現了完美的融合與交互,結合中國本土產業供應鏈的管理,更好的來適應中國本土化的需求。
據了解,目前銀牛微電子的產品主要應用在以下幾大技術方向,一是避障和自主導航,二是醫療領域的3D掃描/重建功能,三是模組定位,比如利用機器設備有條件的進行摘桃子、摘葡萄、采茶葉等操作,四是人臉識別,尤其是在用到防偽功能的金融支付等場合,可以讓人們更加安全的進行刷臉支付。
總結下來,3D視覺技術的盛行讓人們衣食住行、工作、娛樂、教育、醫療、社交萬物皆可3D,全方位革新人類生活方式,孕育無窮多的市場機會。銀牛微電子也憑借業界領先的深度感知技術,通過近十年的深度技術積累,系統的高集成度與簡化系統設計,讓產品獲得強勁的AI運算能力,結合通用ARM核心增加設計的靈活性,多功能一體化設計大幅度降低了系統的整體成本,讓機器用模擬人眼+人腦的方式認知世界,進一步幫助人類打破時空及自身物理條件限制,全面融入智能時代。
點擊下方鏈接 或 掃描下方二維碼,觀看銀牛微電子新品發布會全場回顧:
https://room.ofweek.com/liveweb/#/live/741
關于銀牛微電子
銀牛微電子成立于2020年8月,注冊資本7.78億元人民幣,是一家專注3D和AI芯片、模組及產品設計的高新科技企業,注冊地位于江蘇省江陰市,并在北京,上海和深圳設有辦公室。 2020年11月,銀牛微電子完成對全球前沿的3D視覺芯片設計企業以色列Inuitive的收購,成功將集成了3D視覺深度引擎技術、人工智能及SLAM技術的高端芯片公司納入旗下,旨在助力中國市場的產業升級,引領全球的3D行業變革。
子公司Inuitive布局3D視覺已近10年,擁有全球前沿的3D深度視覺芯片,在計算機視覺、人工智能、光學、系統架構、嵌入式系統軟件、邊緣計算及芯片設計等領域積累了豐富的經驗。Inuitive創始人及CEO Shlomo Gadot先生系以色列芯片領域領軍人物,早在80年代即為美國貝爾實驗室科學家,曾帶領團隊成功研發了ADSL/HDSL,并曾創立多家成功的芯片設計企業;聯合創始人Dor Zepeniuk先生系原PrimeSense研發負責人、后被蘋果公司收購,是光學設計、無線芯片、片上系統SoC、單元計算等多領域專家。