車載手勢識別進入“小規模量產”前夜 國內有哪些技術方案提供商

最近，美國專利商標局公布了蘋果公司的69項新授權專利。在這份特別的報告中，介紹了蘋果公司應用的3D人機界面的發明，它可以實現用戶的手勢識別和交互，然后控制Mac電腦的功能。這背后是蘋果收購的以色列PrimeSense公司，該公司是蘋果TrueDepth相機和Dot投影儀背后的技術支持提供商。在全球范圍內，許多手勢識別公司，如“老”Leap Motion和“新”Untouch（未接觸技術）、uSens（靈感技術）、Micro Motion、金龍瑞信、車蘿卜、Halo Halo和極魚科技，都被視為中國的代表公司。從最早的消費電子市場（手機、VR耳機）到今天的汽車市場，手勢識別讓用戶在“碟中諜”系列中感受到Tom在車內向空中揮手就能操縱信息的場景。

從目前的技術發展來看，事實上，自動駕駛汽車的一個重要組成部分是體驗、VR技術和AR技術，所有這些都是用來增強用戶體驗的。目前，攝像頭手勢識別已經成為一些高端機型的配置功能。奧迪、梅賽德斯-奔馳、寶馬、大眾和福特等知名原始設備制造商在其量產或概念車產品中添加了手勢識別技術，但這些產品的識別率和流暢度并不完美。此外，Tier1和包括偉世通、德爾福、微軟、谷歌和三星在內的IT公司也發布了類似的產品解決方案。在那些注重手勢控制的汽車中，寶馬7系無疑是一個典型的代表。它可以識別六種預設手勢操作，并實現音量、導航、通話和空調的設置。大眾高爾夫的系統可以通過手勢控制菜單選項、廣播電臺、滾動播放列表和瀏覽媒體庫，并且會有操作選項的光暈提示，以及視覺交互反饋。2015年初，奧迪帶來了一款處于開發階段的手勢識別技術顯示產品。有了它，后排乘客可以通過手勢控制后排娛樂系統的功能。根據硬件實現的不同，目前業內使用的手勢識別大約有三種：結構光、飛行時間和多攝像頭成像。其中，寶馬、大眾等廠商采用的ToF，英特爾的結構光技術，谷歌的毫米波雷達技術。與此同時，手勢識別也正在與中控、智能后視鏡和HUD等硬件集成。早些時候，谷歌甚至聲稱無人駕駛汽車可以檢測“數百種情況”，并可以識別交警發出的停車標志和騎自行車的人做出的手勢。與此同時，手勢識別和語音識別之間的集成交互也正在成為一種趨勢。目前，包括Spirit和云知聲在內的國內語音技術公司都有與投資相關的手勢識別制造商。此外，目前，手勢識別已被整合為中國多個自主品牌下一代互聯智能汽車系統中的功能之一。從目前的車輛規劃來看，第一波手勢識別有望出現在2019年發布的車型中。去年，奇瑞汽車召開了一次小型內部技術成果發布會，發布了AR（增強現實）、語音控制、手勢識別等一系列人工智能技術。根據目前披露的技術路線圖，這些技術有望在2018年左右量產并應用于奇瑞產品。寶馬將于近日推出的全新5系插電式混合動力版，配備了全新的“五維人機交互界面”，包括自然語音識別、手勢控制、觸摸屏、iDrive系統和熱敏按鈕。Untouch去年7月，Untouch正式發布了四款3D視覺交互產品：3D手勢識別產品Riemann平臺、3D人臉識別產品Euler平臺、SLAM產品Descartes平臺和場景重建產品Gaussian平臺。全球知名的ToF深度傳感器制造商PMD也宣布選擇Untouch Riemann平臺作為中間件，為客戶提供非接觸式交互解決方案。雙方深度合作，推出了完整的手勢識別軟件……

以及硬件集成解決方案。Untouch的核心競爭優勢之一是構建智能視覺交互技術的基礎平臺，另一個是積累數PB的深度數據。兩者的結合確保了觸達在中國領先的嵌入式智能視覺交互技術。目前，Untouch已經推出了一款車載智能視覺交互產品。該產品基于Immobile technology自主研發的國內頂級3D手勢識別和3D人臉識別技術，在車內智能駕駛艙實現非接觸式手勢控制、身份認證和駕駛員狀態監測，從而提供安全愉悅的車內人機交互體驗。Untouch正在加強和擴大與Tier1的合作，從而將視覺交互技術應用于更多的新機型。優信科技（領感）2016年，優信科技與戴姆勒中國IT創新實驗室展示了最新合作成果。這種車內手勢交互應用了uSens的26自由度手勢跟蹤和6自由度頭部跟蹤技術，體驗者不僅可以在ARVR場景中觀察3D汽車模型的內部和外部細節，還可以進行交互。USens和Leap Motion使用類似的原理，都使用復雜的紅外相機來識別人手的運動。該公司將這種自主研發的帶有紅外攝像頭的手勢識別模塊稱為Fingo。USens于2017年2月正式推出了手部追蹤解決方案Finger。Fingo集成了軟件和硬件。在硬件方面，手的運動由兩個紅外攝像機和三個紅外輔助燈跟蹤。在軟件中，手骨是基于計算機視覺和深度學習等算法識別的。大多數常見的手勢可以被準確地識別并且具有低延遲。隨后，uSens發布了新版Fingo SDK，對手勢算法進行了改進，增加了握拳、手掌寫字、交叉手指等一系列手對手的互動動作。在同類產品中，率先實現了對大面積雙手重疊的類手動作的識別，并且可以實現十個手指的精細運動跟蹤。微動Vidoo在去年4月的上海車展上，微動Vido發布了Vdrive車載手勢識別解決方案，實現了從傳感器定制到UI人機交互界面設計的全閉環。基于功能需求，micro-Vidoo對算法進行了優化，并生成了自定義方案。制定硬件通信接口和通信協議；

量身定制標準化的動作指導設計、UI設計和操作反饋設計。此外，通過HMI的動作設計環節和對底層基礎數據的分析，可以清楚地區分用戶是有意發出手勢操作指令，還是無意中無意識地做出動作。公開資料顯示，微動作手勢識別技術的獨特性主要體現在復雜的核心算法和大量的數據操作不依賴于主機，而是依賴于硬件設備上獨立于FPGA的計算單元。Vdrive的手勢識別解決方案使用120Hz高頻雙目深度傳感器和基于SoC架構的FPGA芯片，該芯片在車載Vdrive內運行圖形、圖像和人工智能算法，并與上層車輛通信。極魚科技去年，以TOF方案實現手勢識別模塊的國內初創公司極魚科技宣布完成了超過2000萬元的a輪融資，該融資將主要用于車內手勢識別模塊研發和生產。當時，極魚科技的手勢識別方案可以識別5-10種動態和靜態手勢，車廠可以選擇3-5種手勢并定制相應的功能。識別準確率為1-2cm，識別準確率可達95%以上。延遲率可以控制在25ms以內。目前，極魚科技可以提供三種系統方案：中控手勢交互、HUD手勢交互和車內乘客娛樂交互。去年12月，極魚科技進入了Startup Autobahn在中國的第一階段加速器，并獲得了與戴姆勒合作推出基于手勢識別的汽車娛樂系統的機會。景隆瑞信定位于面向前置和準前置HUD的研發和銷售平臺。除了HUD本身，景隆瑞信還帶來了自己的主要交互語音識別，手勢識別為輔。其中，手勢識別主要通過上、下、左、右四個方向的手勢來識別相應的指令。這是通過HUD機身面向車主一側的夜視紅外傳感器實現的，該傳感器可以識別用戶的動作。去年，景隆瑞信與阿里云OS達成合作，雙方將共同推出基于云OS系統的景隆第三代HUD產品H3。該產品將進一步實現圖像效果、距離和溫度的最佳匹配。在語音、手勢等智能交互的基礎上，對手勢芯片和產品上行窗口進行修改。在保證圖像清晰、顏色不暈染、明暗環境可識別的前提下，增加角度辨別，使產品與更多型號相匹配。光環網絡2016年底，總部位于深圳的初創公司光環網絡科技也發布了HUD產品光環，該產品花了大約兩年的研發時間。作為一個專注于車內交互的團隊，光環網絡科技推出了他們的首款HUD產品，專注于手勢識別、語音交互和AR導航的集成體驗。Halo Halo的攝像頭從自上而下的角度識別用戶特定的手勢以執行命令。在這項技術中，光環網絡技術團隊利用人工智能技術，訓練了200多萬張不同手勢的特定姿勢圖片；

通過數據壓縮，他們將5TB的原始手勢數據庫控制在5MB左右，這大大減少了實際應用中消耗的計算資源。2015年7月1日，北京樂嘉科技有限公司。，有限公司正式發布全球首款基于語音和手勢控制的“Carrobot）HUD智能車載機器人。樂嘉科技成立于2015年1月，憑借其在語音技術（Spirits）方面的積累和優勢，最初定位于構建一個基于語音控制和人機對話技術的人車交互平臺。其基于機器視覺的疲勞駕駛和視線偏差檢測技術的應用，通過產品前面的攝像頭，不僅可以完成手勢識別的應用，還可以實現基于機器視覺疲勞駕駛和視野偏差檢測，主要包括三部分：人臉檢測技術，面部特征定位技術和疲勞檢測技術。最近，美國專利商標局公布了蘋果公司的69項新授權專利。在這份特別的報告中，介紹了蘋果公司應用的3D人機界面的發明，它可以實現用戶的手勢識別和交互，然后控制Mac電腦的功能。這背后是蘋果收購的以色列PrimeSense公司，該公司是蘋果TrueDepth相機和Dot投影儀背后的技術支持提供商。在全球范圍內，許多手勢識別公司，如“老”Leap Motion和“新”Untouch（未接觸技術）、uSens（靈感技術）、Micro Motion、金龍瑞信、車蘿卜、Halo Halo和極魚科技，都被視為中國的代表公司。從最早的消費電子市場（手機、VR耳機）到今天的汽車市場，手勢識別讓用戶在“碟中諜”系列中感受到Tom在車內向空中揮手就能操縱信息的場景。

從目前的技術發展來看，事實上，自動駕駛汽車的一個重要組成部分是體驗、VR技術和AR技術，所有這些都是用來增強用戶體驗的。目前，攝像頭手勢識別已經成為一些高端機型的配置功能。奧迪、梅賽德斯-奔馳、寶馬、大眾和福特等知名原始設備制造商在其量產或概念車產品中添加了手勢識別技術，但這些產品的識別率和流暢度并不完美。此外，Tier1和包括偉世通、德爾福、微軟、谷歌和三星在內的IT公司也發布了類似的產品解決方案。在那些注重手勢控制的汽車中，寶馬7系無疑是一個典型的代表。它可以識別六種預設手勢操作，并實現音量、導航、通話和空調的設置。大眾高爾夫的系統可以通過手勢控制菜單選項、廣播電臺、滾動播放列表和瀏覽媒體庫，并且會有操作選項的光暈提示，以及視覺交互反饋。2015年初，奧迪帶來了一款處于開發階段的手勢識別技術顯示產品。有了它，后排乘客可以通過手勢控制后排娛樂系統的功能。根據硬件實現的不同，目前業內使用的手勢識別大約有三種：結構光、飛行時間和多攝像頭成像。其中，寶馬、大眾等廠商采用的ToF，英特爾的結構光技術，谷歌的毫米波雷達技術。與此同時，手勢識別也正在與中控、智能后視鏡和HUD等硬件集成。早些時候，谷歌甚至聲稱無人駕駛汽車可以檢測“數百種情況”，并可以識別交警發出的停車標志和騎自行車的人做出的手勢。與此同時，手勢識別和語音識別之間的集成交互也正在成為一種趨勢。目前，包括Spirit和云知聲在內的國內語音技術公司都有與投資相關的手勢識別制造商。此外，目前，手勢識別已被整合為中國多個自主品牌下一代互聯智能汽車系統中的功能之一。從目前的車輛規劃來看，第一波手勢識別有望出現在2019年發布的車型中。去年，奇瑞汽車召開了一次小型內部技術成果發布會，發布了一系列人工智能技術，如……

AR（增強現實）、語音控制和手勢識別。根據目前披露的技術路線圖，這些技術有望在2018年左右量產并應用于奇瑞產品。寶馬將于近日推出的全新5系插電式混合動力版，配備了全新的“五維人機交互界面”，包括自然語音識別、手勢控制、觸摸屏、iDrive系統和熱敏按鈕。Untouch去年7月，Untouch正式發布了四款3D視覺交互產品：3D手勢識別產品Riemann平臺、3D人臉識別產品Euler平臺、SLAM產品Descartes平臺和場景重建產品Gaussian平臺。全球知名的ToF深度傳感器制造商PMD也宣布選擇Untouch Riemann平臺作為中間件，為客戶提供非接觸式交互解決方案。雙方深度合作，推出了完整的手勢識別軟硬件集成解決方案。Untouch的核心競爭優勢之一是構建智能視覺交互技術的基礎平臺，另一個是積累數PB的深度數據。兩者的結合確保了觸達在中國領先的嵌入式智能視覺交互技術。目前，Untouch已經推出了一款車載智能視覺交互產品。該產品基于Immobile technology自主研發的國內頂級3D手勢識別和3D人臉識別技術，在車內智能駕駛艙實現非接觸式手勢控制、身份認證和駕駛員狀態監測，從而提供安全愉悅的車內人機交互體驗。Untouch正在加強和擴大與Tier1的合作，從而將視覺交互技術應用于更多的新機型。優信科技（領感）2016年，優信科技與戴姆勒中國IT創新實驗室展示了最新合作成果。這種車內手勢交互應用了uSens的26自由度手勢跟蹤和6自由度頭部跟蹤技術，體驗者不僅可以在ARVR場景中觀察3D汽車模型的內部和外部細節，還可以進行交互。USens和Leap Motion使用類似的原理，都使用復雜的紅外相機來識別人手的運動。該公司將這種自主研發的帶有紅外攝像頭的手勢識別模塊稱為Fingo。USens于2017年2月正式推出了手部追蹤解決方案Finger。Fingo集成了軟件和硬件。在硬件方面，手的運動由兩個紅外攝像機和三個紅外輔助燈跟蹤。在軟件中，手骨是基于計算機視覺和深度學習等算法識別的。大多數常見的手勢可以被準確地識別并且具有低延遲。隨后，uSens發布了新版Fingo SDK，對手勢算法進行了改進，增加了握拳、手掌寫字、交叉手指等一系列手對手的互動動作。在同類產品中，率先實現了對大面積雙手重疊的類手動作的識別，并且可以實現十個手指的精細運動跟蹤。微動Vidoo在去年4月的上海車展上，微動Vido發布了Vdrive車載手勢識別解決方案，實現了從傳感器定制到UI人機交互界面設計的全閉環。基于功能需求，micro-Vidoo對算法進行了優化，并生成了自定義方案。制定硬件通信接口和通信協議；

量身定制標準化的動作指導設計、UI設計和操作反饋設計。此外，通過HMI的動作設計環節和對底層基礎數據的分析，可以清楚地區分用戶是有意發出手勢操作指令，還是無意中無意識地做出動作。公開資料顯示，微動作手勢識別技術的獨特性主要體現在復雜的核心算法和大量的數據操作不依賴于主機，而是依賴于硬件設備上獨立于FPGA的計算單元。Vdrive的手勢識別解決方案使用120Hz高頻雙目深度傳感器和基于SoC架構的FPGA芯片，該芯片在車載Vdrive內運行圖形、圖像和人工智能算法，并與上層車輛通信。極魚科技去年，以TOF方案實現手勢識別模塊的國內初創公司極魚科技宣布完成了超過2000萬元的a輪融資，該融資將主要用于車內手勢識別模塊研發和生產。當時，極魚科技的手勢識別方案可以識別5-10種動態和靜態手勢，車廠可以選擇3-5種手勢并定制相應的功能。識別準確率為1-2cm，識別準確率可達95%以上。延遲率可以控制在25ms以內。目前，極魚科技可以提供三種系統方案：中控手勢交互、HUD手勢交互和車內乘客娛樂交互。去年12月，極魚科技進入了Startup Autobahn在中國的第一階段加速器，并獲得了與戴姆勒合作推出基于手勢識別的汽車娛樂系統的機會。景隆瑞信定位于面向前置和準前置HUD的研發和銷售平臺。除了HUD本身，景隆瑞信還帶來了自己的主要交互語音識別，手勢識別為輔。其中，手勢識別主要通過上、下、左、右四個方向的手勢來識別相應的指令。這是通過HUD機身面向車主一側的夜視紅外傳感器實現的，該傳感器可以識別用戶的動作。去年，景隆瑞信與阿里云OS達成合作，雙方將共同推出基于云OS系統的景隆第三代HUD產品H3。該產品將進一步實現圖像效果、距離和溫度的最佳匹配。在語音、手勢等智能交互的基礎上，對手勢芯片和產品上行窗口進行修改。在保證圖像清晰、顏色不暈染、明暗環境可識別的前提下，增加角度辨別，使產品與更多型號相匹配。光環網絡2016年底，總部位于深圳的初創公司光環網絡科技也發布了HUD產品光環，該產品花了大約兩年的研發時間。作為一個專注于車內交互的團隊，光環網絡科技推出了他們的首款HUD產品，專注于手勢識別、語音交互和AR導航的集成體驗。Halo Halo的攝像頭從自上而下的角度識別用戶特定的手勢以執行命令。在這項技術中，光環網絡技術團隊利用人工智能技術，訓練了200多萬張不同手勢的特定姿勢圖片；通過數據壓縮，他們將5TB的原始手勢數據庫控制在5MB左右，這大大減少了實際應用中消耗的計算資源。2015年7月1日，北京樂嘉科技有限公司。，有限公司正式發布全球首款基于語音和手勢控制的“Carrobot）HUD智能車載機器人。樂嘉科技成立于2015年1月，憑借其在語音技術（Spirits）方面的積累和優勢，最初定位于構建一個基于語音控制和人機對話技術的人車交互平臺。其基于機器視覺的疲勞駕駛和視線偏差檢測技術的應用，通過產品前面的攝像頭，不僅可以完成手勢識別的應用，還可以實現基于機器視覺疲勞駕駛和視野偏差檢測，主要包括三部分：人臉檢測技術，面部特征定位技術和疲勞檢測技術。

標簽：寶馬大眾奧迪曼奇瑞

汽車資訊熱門資訊