虛擬現(xiàn)實(shí)傳感器：6個(gè)“微型慣性運(yùn)動(dòng)傳感器”實(shí)現(xiàn)虛擬現(xiàn)實(shí)
2016年左右，虛擬現(xiàn)實(shí)曾掀起過一次行業(yè)熱浪，被業(yè)內(nèi)人士稱為“VR元年”，但受制于技術(shù)的不成熟、應(yīng)用生態(tài)的缺乏等原因，近幾年顯得有些冷淡。隨著自動(dòng)駕駛、無人機(jī)、虛擬主播等新興領(lǐng)域越來越走近大眾視野，虛擬現(xiàn)實(shí)技術(shù)發(fā)展的迫切性更加凸顯。
我們生活中接觸到最多的虛擬現(xiàn)實(shí)應(yīng)用大概就是VR電影和游戲，這類電影制作花絮中我們一般見到的制作場(chǎng)景是這樣的：
虛擬世界里的人物能夠做到現(xiàn)實(shí)人物動(dòng)作的復(fù)刻主要是基于動(dòng)作捕捉技術(shù)。
近期，來自清華大學(xué)北京信息科學(xué)與技術(shù)國家研究中心和軟件學(xué)院的徐楓團(tuán)隊(duì)，推出了一項(xiàng)慣性動(dòng)作捕捉新技術(shù)。
科學(xué)家介紹
徐楓，清華大學(xué)軟件學(xué)院副教授，國家優(yōu)青，CAAI副秘書長(zhǎng)。主要研究領(lǐng)域包括人工智能、智慧醫(yī)療、虛擬/增強(qiáng)現(xiàn)實(shí)等。在相關(guān)領(lǐng)域發(fā)表論文40余篇，獲授權(quán)中國/美國專利10余項(xiàng)，獲省部級(jí)技術(shù)發(fā)明獎(jiǎng)2項(xiàng)，擔(dān)任Pacific Graphics，Symposium on Graphics等國際會(huì)議程序委員會(huì)委員，擔(dān)任CAAI Transactions on Intelligent Technology青年編委等。
我們從研究團(tuán)隊(duì)實(shí)驗(yàn)視頻中可以看到：
兩人乒乓球?qū)Υ騽?dòng)作流暢的被右下角電腦捕捉到，但并未看到房間內(nèi)有拍攝或其他設(shè)備。
通過視頻中的標(biāo)記才發(fā)現(xiàn)，原來兩人身上各自佩戴了6個(gè)小型慣性無線傳感器。
慣性捕捉相較于應(yīng)用較多的光學(xué)捕捉具有便攜、采樣快的特點(diǎn)，但通常需要穿戴多達(dá)17個(gè)傳感器組成數(shù)據(jù)服，基本無法在日常生活中使用。這項(xiàng)新的慣性運(yùn)動(dòng)捕捉技術(shù)，只運(yùn)用6個(gè)微型慣性運(yùn)動(dòng)傳感器便實(shí)現(xiàn)了動(dòng)作精確捕捉。較少的佩戴設(shè)備既降低了成本，也不會(huì)對(duì)人體運(yùn)動(dòng)產(chǎn)生太大的干擾。
目前捕捉技術(shù)里應(yīng)用和發(fā)展最成熟的是光學(xué)捕捉，它是通過對(duì)目標(biāo)上特定光點(diǎn)的監(jiān)視和跟蹤來完成運(yùn)動(dòng)捕捉的任務(wù)，因信號(hào)精度高常應(yīng)用于VR電影、游戲制作等。
然而這類捕捉技術(shù)需要搭建特定的空間，固定多個(gè)相機(jī)拍攝，成本昂貴，對(duì)表演者限制也較大。另外也有只靠相機(jī)無需光點(diǎn)的光學(xué)式捕捉技術(shù)，但捕捉精度又會(huì)降低。
慣性運(yùn)動(dòng)捕捉新技術(shù)克服了場(chǎng)地和相機(jī)的限制，無需搭建場(chǎng)地，信號(hào)直接傳入電腦。
腿部動(dòng)作是捕捉中較為困難的部分，如健身環(huán)只能簡(jiǎn)單地檢測(cè)到抬腿，再模擬成游戲中固定的腿部動(dòng)畫，或借用游戲中的交通工具。
新技術(shù)不僅可以捕捉腿部動(dòng)作，還可實(shí)時(shí)捕捉跳躍、蹲爬、跨越障礙甚至躺下打滾，幀數(shù)都是90fps，精確度不受任何影響。
障礙物遮擋也是各類捕捉技術(shù)要解決的難題，一旦有遮擋便無法捕捉到信號(hào)。
新技術(shù)不僅不受環(huán)境障礙物的遮擋影響，對(duì)照明條件也沒有要求，夜間也可以捕捉。
長(zhǎng)距離移動(dòng)也沒有問題。
當(dāng)然除了光學(xué)捕捉、慣性捕捉之外，還存在機(jī)械式捕捉、聲學(xué)捕捉、電磁式捕捉等技術(shù)，然而因使用復(fù)雜、技術(shù)不成熟等原因難以實(shí)際應(yīng)用。
慣性運(yùn)動(dòng)捕捉應(yīng)用領(lǐng)域，荷蘭的Xsens公司處于市場(chǎng)壟斷地位，其核心軟件和硬件技術(shù)緊追創(chuàng)新前沿，然而因壟斷而致使價(jià)格昂貴，與成本價(jià)值過于不匹配，小規(guī)模制作團(tuán)隊(duì)和個(gè)人應(yīng)用難以普及。
慣性動(dòng)作捕捉新技術(shù)，可以彌補(bǔ)國內(nèi)市場(chǎng)上的技術(shù)空白，打破獨(dú)家壟斷局面，實(shí)現(xiàn)慣性動(dòng)作捕捉商業(yè)廣泛應(yīng)用的技術(shù)支持。
這項(xiàng)創(chuàng)新技術(shù)的實(shí)現(xiàn)依靠深度學(xué)習(xí)。
深度學(xué)習(xí)是依靠數(shù)據(jù)進(jìn)行，并原創(chuàng)了雙向循環(huán)神經(jīng)網(wǎng)絡(luò)(biRNN)的技術(shù)方法。運(yùn)動(dòng)具有時(shí)間性，上一秒和下一秒的動(dòng)作不一定相同，但擁有基本的軌跡。該技術(shù)方法不僅可以有效的定位運(yùn)動(dòng)信號(hào)，還能測(cè)算運(yùn)動(dòng)函數(shù)，實(shí)現(xiàn)預(yù)測(cè)運(yùn)動(dòng)軌跡，保證動(dòng)作捕捉的流暢。
在具體研究實(shí)驗(yàn)中，團(tuán)隊(duì)收集和采集大量人體運(yùn)動(dòng)數(shù)據(jù)及測(cè)量信號(hào)數(shù)據(jù)，從中找尋測(cè)量信號(hào)和運(yùn)動(dòng)姿態(tài)之間的關(guān)系。將動(dòng)作捕捉任務(wù)分解為姿態(tài)估計(jì)和運(yùn)動(dòng)估計(jì)。對(duì)于姿態(tài)估計(jì)任務(wù)，研究團(tuán)隊(duì)將其拆分成3個(gè)子任務(wù)。先從慣性數(shù)據(jù)估計(jì)出5個(gè)人體末端關(guān)節(jié)（頭部、手、腳）的位置，再細(xì)化成人體全部23個(gè)關(guān)節(jié)的位置，最后通過反向動(dòng)力學(xué) (IK)求解得到關(guān)節(jié)旋轉(zhuǎn)，即人體姿態(tài)。
只使用當(dāng)前幀的慣性測(cè)量值估計(jì)當(dāng)前的姿態(tài)是一個(gè)非常欠約束的問題，因?yàn)橥唤M慣性測(cè)量值對(duì)應(yīng)著無數(shù)個(gè)可行的人體姿態(tài)，所以在這一步需要充分利用人體運(yùn)動(dòng)的時(shí)序信息以及先驗(yàn)知識(shí)來減少歧義性，因此采用了雙向循環(huán)神經(jīng)網(wǎng)絡(luò)(biRNN)技術(shù)。
運(yùn)動(dòng)估計(jì)則是通過兩個(gè)方法RNN與biRNN融合實(shí)現(xiàn)的。一個(gè)是通過估計(jì)腳與地面接觸的概率，在支撐腳不能滑動(dòng)的物理約束下，使用姿態(tài)推算人體的運(yùn)動(dòng)。另一個(gè)使用網(wǎng)絡(luò)直接回歸人體的本地速度，從而算出在世界坐標(biāo)系下的速度。兩個(gè)方法通過線性插值進(jìn)行平滑的融合。
團(tuán)隊(duì)使用大型的合成和真實(shí)公開數(shù)據(jù)集進(jìn)行訓(xùn)練，包含300名受試者超過40小時(shí)的姿勢(shì)和空間位置的數(shù)據(jù)。
圍繞該技術(shù)形成論文已被計(jì)算機(jī)圖形頂會(huì)SIGGRAPH 2021接受。
研究團(tuán)隊(duì)將該項(xiàng)技術(shù)和現(xiàn)有的硬件技術(shù)結(jié)合驗(yàn)證了其產(chǎn)業(yè)化的可行性，并且因其成本低、使用便捷、方便攜帶等優(yōu)勢(shì)，產(chǎn)業(yè)化應(yīng)用場(chǎng)景廣泛，發(fā)展前景廣闊。
除了熟知的電影、游戲、動(dòng)畫制作使用，還可以應(yīng)用在體育、養(yǎng)老、醫(yī)療、娛樂、教育等多個(gè)領(lǐng)域。
體育：提供相關(guān)運(yùn)動(dòng)數(shù)據(jù)，以便技術(shù)分析與調(diào)整等。
養(yǎng)老：實(shí)時(shí)獲得老人動(dòng)作信息，規(guī)避了傳統(tǒng)攝像頭可能侵害隱私的風(fēng)險(xiǎn)。
醫(yī)療：該技術(shù)還可以醫(yī)療診斷、姿態(tài)矯正、復(fù)健輔助等方面發(fā)揮重要作用。
另外可用于虛擬主播、遠(yuǎn)程教學(xué)、日常佩戴檢測(cè)、工業(yè)測(cè)量和設(shè)計(jì)、軍事模擬訓(xùn)練等各種需求場(chǎng)景。
隨著技術(shù)產(chǎn)品化的深入，需求場(chǎng)景也會(huì)越來越多，慣性運(yùn)動(dòng)捕捉技術(shù)的廣泛應(yīng)用指日可待！
虛擬現(xiàn)實(shí)傳感器：傳感器在VR中有著什么樣的作用
相關(guān)推薦
農(nóng)業(yè)自動(dòng)氣象觀測(cè)站的功能特點(diǎn)農(nóng)業(yè)自動(dòng)氣象觀測(cè)站詳細(xì)介紹JD-QC8，隨著社會(huì)科學(xué)水平的進(jìn)步，現(xiàn)代農(nóng)業(yè)氣象業(yè)務(wù)水平也相應(yīng)提升。為了....發(fā)表于 2021-09-23 17:34?
3次閱讀一文了解微波雷達(dá)傳感器傳感器是電子信息裝備制造業(yè)中的基礎(chǔ)類產(chǎn)品，是重點(diǎn)發(fā)展的新型電子元器件中的特種元器件。傳感器技術(shù)含量高....發(fā)表于 2021-09-23 16:55?
5次閱讀汽車安全系統(tǒng)組成的必要條件之一胎壓監(jiān)測(cè)隨著家用車的不斷普及，大家對(duì)胎壓監(jiān)測(cè)系統(tǒng)肯定不再陌生。胎壓監(jiān)測(cè)是用于監(jiān)測(cè)輪胎里的氣壓，在輪胎氣壓變動(dòng)....發(fā)表于 2021-09-23 16:48?
31次閱讀氣象環(huán)境監(jiān)測(cè)設(shè)備參數(shù)氣象環(huán)境監(jiān)測(cè)設(shè)備FT-CQX7在氣象監(jiān)測(cè)工作當(dāng)中，除了需要保證監(jiān)測(cè)工作的準(zhǔn)確性，保證災(zāi)害預(yù)防工作的有....發(fā)表于 2021-09-23 15:01?
19次閱讀農(nóng)業(yè)微型氣象站產(chǎn)品介紹作用分析農(nóng)業(yè)微型氣象站產(chǎn)品介紹作用分析，隨著科學(xué)技術(shù)水平的提升，我國農(nóng)業(yè)氣象業(yè)務(wù)逐漸進(jìn)步，廠家改變了農(nóng)民“看....發(fā)表于 2021-09-23 14:24?
13次閱讀農(nóng)業(yè)智能小型氣象站安裝需求農(nóng)業(yè)智能小型氣象站安裝需求JD-QC9，農(nóng)業(yè)生產(chǎn)過程中，很多不利天氣氣候和農(nóng)業(yè)設(shè)施耕地不當(dāng)導(dǎo)致農(nóng)業(yè)減....發(fā)表于 2021-09-23 14:15?
32次閱讀農(nóng)業(yè)環(huán)境監(jiān)測(cè)氣象站的技術(shù)參數(shù)農(nóng)業(yè)環(huán)境監(jiān)測(cè)氣象站介紹及參數(shù)JD-QC7，隨著現(xiàn)代我國科技水平的不斷提高,為了幫助人們對(duì)氣象信息實(shí)施....發(fā)表于 2021-09-23 14:06?
15次閱讀高精度基準(zhǔn)電壓源工作原理的詳細(xì)說明高精度基準(zhǔn)電壓源是從實(shí)際電源抽象出來的一種模型，在其兩端總能保持一定的電壓而不論流過的電流為多少。電....發(fā)表于 2021-09-23 11:31?
116次閱讀VR全景虛擬企業(yè)線上展館的應(yīng)用今年疫情的影響下很多企業(yè)線下展廳無法得到實(shí)際的進(jìn)展，線下企業(yè)展廳不管在時(shí)間、地域上的限制，以及很多不....發(fā)表于 2021-09-23 11:30?
10次閱讀農(nóng)業(yè)小型氣象站有哪些技術(shù)參數(shù)?價(jià)格多少農(nóng)業(yè)小型氣象站有哪些技術(shù)參數(shù)?價(jià)格多少?對(duì)于農(nóng)業(yè)來說，影響最大的因素就是氣象因素了。那么影響我們農(nóng)作....發(fā)表于 2021-09-23 11:11?
22次閱讀多樣性表明物聯(lián)網(wǎng)正在穩(wěn)步的向前發(fā)展沒有人知道物聯(lián)網(wǎng)是真實(shí)的還是白日夢(mèng)。現(xiàn)在，該方法已多樣化為針對(duì)特定應(yīng)用領(lǐng)域的多種變體。這個(gè)概念已經(jīng)成....發(fā)表于 2021-09-23 11:06?
273次閱讀蘋果13發(fā)布會(huì)什么時(shí)候可以買蘋果公司于9月15號(hào)舉行的秋季新品發(fā)布會(huì)，9月17日晚八點(diǎn)正式開啟預(yù)售，9月24日全渠道開售。蘋果1....發(fā)表于 2021-09-23 11:01?
320次閱讀智慧城市和農(nóng)村建設(shè)中自來水多參數(shù)一體式水質(zhì)監(jiān)測(cè)站...自來水多參數(shù)一體式水質(zhì)監(jiān)測(cè)站 產(chǎn)品介紹 云傳物聯(lián)最新推出的環(huán)保水質(zhì)在線監(jiān)測(cè)系統(tǒng)，主要用于江河、湖泊、....發(fā)表于 2021-09-23 10:37?
23次閱讀人類高質(zhì)量家庭成員：會(huì)自己賺錢的成熟卡車香嗎？技...自動(dòng)駕駛行業(yè)經(jīng)過多年的快速發(fā)展，走向了落地的應(yīng)用的階段。繼robotaxi之后，智能重卡的風(fēng)也吹起來....發(fā)表于 2021-09-23 09:45?
290次閱讀ADI公司推出臨床級(jí)四項(xiàng)生命體征AFE，適用于遠(yuǎn)...醫(yī)療設(shè)備設(shè)計(jì)者希望用尺寸更小、功耗更低、方便在家中或辦公室持續(xù)穿戴的無線設(shè)備代替基于辦公室的健康監(jiān)護(hù)....發(fā)表于 2021-09-23 09:38?
191次閱讀無位置無刷直流電機(jī)的準(zhǔn)閉環(huán)啟動(dòng)有何優(yōu)勢(shì)無位置傳感器是怎樣啟動(dòng)的？
無位置無刷直流電機(jī)的準(zhǔn)閉環(huán)啟動(dòng)有何優(yōu)勢(shì)？
...發(fā)表于 2021-09-23 08:41?
0次閱讀介紹一種新的控制設(shè)備運(yùn)行基礎(chǔ)設(shè)施PLC 4.0PLC 4.0是什么？
PLC 4.0的基本特性有哪些？PLC 4.0有何作用？
...發(fā)表于 2021-09-23 06:23?
0次閱讀關(guān)于正弦波有感程序的學(xué)習(xí)不看肯定后悔本期學(xué)習(xí)的主要內(nèi)容是對(duì)正弦波有傳感器的主要程序部分進(jìn)行學(xué)習(xí)，表現(xiàn)在對(duì)電流環(huán)和相關(guān)代碼的理解。
...發(fā)表于 2021-09-23 06:08?
0次閱讀活體莖稈強(qiáng)度測(cè)定儀的應(yīng)用托普云農(nóng)的TPDF-1活體莖稈強(qiáng)度測(cè)定儀也叫活體抗倒伏測(cè)定儀，活體抗倒伏儀，活體抗倒伏測(cè)量?jī)x，該儀器....發(fā)表于 2021-09-22 17:09?
18次閱讀新能源汽車中電流傳感器電路講解前面我們講了，電流傳感器的Ip電流為0V時(shí)，電流傳感器Vout輸出2.5V;當(dāng)Ip等于+750A時(shí)，....發(fā)表于 2021-09-22 15:03?
146次閱讀化工園區(qū)微氣象監(jiān)測(cè)站的特點(diǎn)功能是什么？化工園區(qū)微氣象監(jiān)測(cè)站的特點(diǎn)功能是什么？FT-FB【風(fēng)途】隨著西風(fēng)槽即將淺化北收，副熱帶高壓重新增強(qiáng)，....發(fā)表于 2021-09-22 14:58?
19次閱讀廠界VOC氣象站的功能有哪些？廠界VOC氣象站的功能有哪些？FT-FB【風(fēng)途】而隨著副熱帶高壓進(jìn)一步增強(qiáng)，這條雨帶的演變又將超出華....發(fā)表于 2021-09-22 14:54?
15次閱讀環(huán)保認(rèn)證智慧工地?fù)P塵監(jiān)測(cè)廠家介紹環(huán)保認(rèn)證智慧工地?fù)P塵監(jiān)測(cè)廠家介紹JD-YC09，眾觀當(dāng)下，傳統(tǒng)的用于監(jiān)測(cè)建筑工地?fù)P塵的主要手段仍存在....發(fā)表于 2021-09-22 14:51?
9次閱讀水資源可持續(xù)利用VR線上博覽會(huì)的作用水資源可持續(xù)利用與綠色發(fā)展博覽會(huì)采用VR全景線上的方式舉行，展示水資源保護(hù)、水環(huán)境治理、水高效利用、....發(fā)表于 2021-09-22 14:41?
425次閱讀化工廠環(huán)境監(jiān)測(cè)系統(tǒng)功能化工廠環(huán)境監(jiān)測(cè)系統(tǒng)FT-FB近年來，我國經(jīng)濟(jì)飛速發(fā)展，科學(xué)技術(shù)不斷改革與創(chuàng)新，我國農(nóng)業(yè)發(fā)展取得了質(zhì)的....發(fā)表于 2021-09-22 14:29?
22次閱讀化工園區(qū)微氣象監(jiān)測(cè)站作用化工園區(qū)微氣象監(jiān)測(cè)站FT-FB由于天氣條件是影響現(xiàn)代農(nóng)業(yè)發(fā)展的重要因素之一，因此，需要綜合分析天氣條....發(fā)表于 2021-09-22 14:27?
20次閱讀集成PGIA優(yōu)勢(shì)和相關(guān)限制數(shù)據(jù)采集系統(tǒng)（DAQ）在許多行業(yè)應(yīng)用廣泛，例如研究、分析、設(shè)計(jì)驗(yàn)證、制造和測(cè)試等。這些系統(tǒng)與各種傳感....發(fā)表于 2021-09-22 14:04?
611次閱讀歐森杰科技：購買氣體檢測(cè)儀主要考慮的有哪些因素？現(xiàn)目前，石油、化工、市政燃?xì)獾榷鄠€(gè)領(lǐng)域都有投入使用氣體檢測(cè)儀，市場(chǎng)上氣體檢測(cè)儀的種類繁多，選購氣體檢....發(fā)表于 2021-09-22 11:29?
35次閱讀工地?fù)P塵檢測(cè)儀價(jià)格多少?我們?nèi)绾芜x擇生產(chǎn)商家揚(yáng)塵監(jiān)測(cè)設(shè)備生產(chǎn)商要有完善的環(huán)保資質(zhì)和充足的制造整體實(shí)力，生產(chǎn)制造的揚(yáng)塵即時(shí)監(jiān)測(cè)儀才可以合格達(dá)標(biāo)的，....發(fā)表于 2021-09-22 10:59?
22次閱讀水質(zhì)多參數(shù)遠(yuǎn)程在線監(jiān)測(cè)系統(tǒng)的詳細(xì)介紹一體化設(shè)計(jì)，產(chǎn)品可靠易用。zui多可以同時(shí)接8支數(shù)字傳感器。可選擇要測(cè)得的參數(shù)包括溶解氧、pH、OR....發(fā)表于 2021-09-22 10:56?
13次閱讀揚(yáng)塵在線監(jiān)測(cè)系統(tǒng)的組成及特點(diǎn)揚(yáng)塵在線監(jiān)測(cè)系統(tǒng)【恒美HM-YC10】主要適用于建筑工地、拆遷工地、煤礦廠、工業(yè)園區(qū)、社區(qū)、城市環(huán)境....發(fā)表于 2021-09-22 10:02?
14次閱讀帶有MIPI接口的新型高端傳感器Vision Components展示了各種新的攝像頭模塊，將高圖像質(zhì)量和高幀速率與MIPI CSI....發(fā)表于 2021-09-22 09:58?
447次閱讀你都知道變電的相關(guān)名詞有哪些嗎變電組態(tài)文件的相關(guān)名詞有哪些？
變電硬件的相關(guān)名詞有哪些？
...發(fā)表于 2021-09-22 07:12?
0次閱讀功率放大器基于壓電主動(dòng)傳感技術(shù)健康監(jiān)測(cè)方法中的應(yīng)...實(shí)驗(yàn)名稱:功率放大器基于壓電主動(dòng)傳感技術(shù)健康監(jiān)測(cè)方法中的應(yīng)用實(shí)驗(yàn)?zāi)康?驗(yàn)證壓電陶瓷傳感器的時(shí)間反演法....發(fā)表于 2021-09-18 18:47?
31次閱讀虹科傳感器案例：發(fā)動(dòng)機(jī)測(cè)試人員如何精準(zhǔn)把握機(jī)油質(zhì)...機(jī)油粘度測(cè)量保障安全提高效益潤(rùn)滑油與發(fā)動(dòng)機(jī)，就像是血液和心臟的關(guān)系。大家都知道，潤(rùn)滑油濃度并不是越高....發(fā)表于 2021-09-18 18:33?
27次閱讀微波雷達(dá)模塊紫外線殺菌燈解決方案誰知，2020年伊始，我們便以“戰(zhàn)疫”一詞開篇，新型冠狀病毒肺炎牽動(dòng)著每一個(gè)中國人的心，也把長(zhǎng)期的衛(wèi)....發(fā)表于 2021-09-18 16:55?
18次閱讀無線土壤墑情監(jiān)測(cè)站的功能特點(diǎn)無線土壤墑情監(jiān)測(cè)站功能特點(diǎn)介紹FT-TS100【風(fēng)途】各級(jí)各部門要堅(jiān)決克服麻痹思想，做到汛期不過思想....發(fā)表于 2021-09-18 15:18?
22次閱讀無線多點(diǎn)土壤墑情監(jiān)測(cè)系統(tǒng)的功能介紹無線多點(diǎn)土壤墑情監(jiān)測(cè)系統(tǒng)的功能介紹FT-TS100【風(fēng)途】農(nóng)業(yè)氣象技術(shù)人員先后到汲灘鎮(zhèn)、桑莊鎮(zhèn)、文渠....發(fā)表于 2021-09-18 14:48?
29次閱讀非洲豬瘟檢測(cè)設(shè)備的詳細(xì)介紹非洲豬瘟檢測(cè)設(shè)備清單一覽表詳細(xì)介紹JD-PCR16，非洲豬瘟是由非洲豬瘟病毒感染家豬和各種野豬引起一....發(fā)表于 2021-09-18 13:26?
31次閱讀如何開發(fā)出延長(zhǎng)電池30%壽命的磁簧開關(guān)傳感器磁簧開關(guān)傳感器（Reed Switch Sensor）可用于許多智能家居應(yīng)用，如門窗接觸傳感器和運(yùn)動(dòng)....發(fā)表于 2021-09-18 11:07?
1032次閱讀歐菲光上半年凈利潤(rùn)下降93％，依靠新業(yè)務(wù)再次起步電子發(fā)燒友網(wǎng)報(bào)道（文/莫婷婷）8月30日，離開果鏈的歐菲光發(fā)布了今年上半年財(cái)報(bào)。財(cái)報(bào)顯示，該公司報(bào)告....發(fā)表于 2021-09-18 10:41?
960次閱讀傳感技術(shù)進(jìn)一步擴(kuò)大環(huán)境感知的應(yīng)用機(jī)會(huì)移動(dòng)計(jì)算推動(dòng)了產(chǎn)品機(jī)會(huì)的爆發(fā)——智能手機(jī)、可穿戴設(shè)備、可聽設(shè)備、運(yùn)動(dòng)相機(jī)等等。傳感技術(shù)將進(jìn)一步擴(kuò)大必....發(fā)表于 2021-09-18 10:21?
751次閱讀三星發(fā)布支持2億像素的HP1及采用全向?qū)沟?0...電子發(fā)燒友網(wǎng)報(bào)道（文/周凱揚(yáng)）9月2日，三星發(fā)布了兩顆新的圖像傳感器，分別是支持2億像素的HP1，以....發(fā)表于 2021-09-18 09:53?
235次閱讀蘋果13手機(jī)外觀和功能最新蘋果13手機(jī)支持防濺、抗水、防塵功能，搭載A15 仿生芯片，支持最新面容ID通過原深感攝像頭進(jìn)行....發(fā)表于 2021-09-18 09:48?
1069次閱讀傳感器的輸出精度與取負(fù)載電阻RL有關(guān)系嗎傳感器和變送器有何差別？
傳感器的輸出精度與取負(fù)載電阻RL有關(guān)系嗎？
...發(fā)表于 2021-09-18 09:09?
0次閱讀BLDC永磁同步電機(jī)無傳感器該如何去啟動(dòng)呢BLDC永磁同步電機(jī)無傳感器該如何去啟動(dòng)呢？
有位置傳感器的BLDC與無位置BLDC的區(qū)別在哪？...發(fā)表于 2021-09-18 08:41?
0次閱讀關(guān)于傳感器常見的一些技術(shù)參數(shù)隨著傳感器在工業(yè)生產(chǎn)、農(nóng)業(yè)種植、環(huán)境保護(hù)等領(lǐng)域的滲透和廣泛應(yīng)用，使得市場(chǎng)上的傳感器產(chǎn)品種類繁多，在原....發(fā)表于 2021-09-17 16:34?
425次閱讀土壤水分自動(dòng)觀測(cè)系統(tǒng)用處土壤水分自動(dòng)觀測(cè)系統(tǒng)FT-TDR土壤墑情是最基本、最主要也是最常用的土壤信息之一。土壤墑情的好壞，直....發(fā)表于 2021-09-17 16:17?
28次閱讀蘋果13promax價(jià)格表官網(wǎng)報(bào)價(jià)256g蘋果13promax價(jià)格表官網(wǎng)報(bào)價(jià)256g的價(jià)格為9799元，性價(jià)比較高，下面我們一起來看看蘋果13....發(fā)表于 2021-09-17 16:03?
5342次閱讀基于毫米波雷達(dá)感應(yīng)模塊的智能鏡子什么是智能鏡？智能鏡相當(dāng)于將普通的鏡子經(jīng)過特殊處理后，加上顯示屏與智能設(shè)備，使鏡子具有各項(xiàng)網(wǎng)絡(luò)功能，....發(fā)表于 2021-09-17 15:53?
24次閱讀電站風(fēng)機(jī)振動(dòng)監(jiān)測(cè)與故障診斷技術(shù)在振動(dòng)測(cè)量中，首先要衡量的因素是測(cè)量傳感器的選擇和測(cè)量位置的確定。單元振動(dòng)特性通過測(cè)量振動(dòng)位移，振動(dòng)....發(fā)表于 2021-09-17 15:26?
26次閱讀黃土坡滑坡GNSS自動(dòng)化位移監(jiān)測(cè)解決方案黃土坡滑坡東距巴東老城區(qū)2km，行政區(qū)劃隸屬巴東縣信陵鎮(zhèn)。黃土坡滑坡發(fā)育于三疊系中統(tǒng)巴東組第二段、第....發(fā)表于 2021-09-17 14:46?
31次閱讀GNSS+IMU+MM車載組合導(dǎo)航系統(tǒng)解決方案近年來，隨著定位業(yè)務(wù)的迅速發(fā)展，用戶對(duì)于車載端定位精度提出了越來越高的要求，由原來的導(dǎo)航級(jí)逐漸更替到....發(fā)表于 2021-09-17 14:40?
460次閱讀土壤碳通量測(cè)量系統(tǒng)的技術(shù)指標(biāo)土壤碳通量測(cè)量系統(tǒng)的產(chǎn)品概述【霍爾德儀器HED-T80X】土壤呼吸是土壤生態(tài)系統(tǒng)碳素循環(huán)的一個(gè)重要過....發(fā)表于 2021-09-17 13:18?
17次閱讀虹科環(huán)境監(jiān)測(cè)事業(yè)部提前十個(gè)月完成年度銷售目標(biāo)恭喜廣州虹科電子有限公司環(huán)境監(jiān)測(cè)事業(yè)部，提前十個(gè)月完成年度銷售目標(biāo)，締造銷售佳話。如此出色的成績(jī)，離....發(fā)表于 2021-09-17 11:10?
148次閱讀臭氧檢測(cè)儀的工作原理及特點(diǎn)臭氧檢測(cè)儀主要用于臭氧發(fā)生器管道內(nèi)的臭氧濃度測(cè)量，可連續(xù)在線檢測(cè)臭氧發(fā)生器出口管道中的臭氧濃度。主要....發(fā)表于 2021-09-17 10:53?
25次閱讀壓電物鏡定位器的特性及技術(shù)參數(shù)XD730.400壓電物鏡定位器是一款Z向運(yùn)動(dòng)的物鏡驅(qū)動(dòng)平臺(tái)，Z向行程可達(dá)400μm，承載能力達(dá)0.....發(fā)表于 2021-09-17 10:48?
17次閱讀淺析伺服電動(dòng)機(jī)機(jī)械系統(tǒng)1.3伺服電動(dòng)機(jī)機(jī)械系統(tǒng)由力或力矩控制并遵循動(dòng)力學(xué)模型，該動(dòng)力學(xué)模型依賴許多未知的系數(shù)。由運(yùn)動(dòng)學(xué)模型表述的相同的機(jī)...發(fā)表于 2021-09-17 09:19?
0次閱讀東芝TCT-300SCT機(jī)球管不到位的原因釋放雙眼，帶上耳機(jī)，聽聽看~！1、球管不到位的原因第三代CT機(jī)(螺旋CT稱第四代)，掃描架工作過程是：在待機(jī)狀態(tài)(掃...發(fā)表于 2021-09-17 08:18?
0次閱讀GFCI傳感器的檢測(cè)原理是什么一般漏電流分為哪幾種？
接地故障電流檢測(cè)的GFCI傳感器的檢測(cè)原理是什么？
...發(fā)表于 2021-09-17 07:01?
0次閱讀Topic通訊小結(jié)ROS實(shí)操入門系列(三）1、Topic通訊小結(jié) 2、編寫ros驅(qū)動(dòng)實(shí)現(xiàn)電機(jī)控制和編碼器讀取Topic通訊小結(jié)控制板...發(fā)表于 2021-09-16 09:11?
0次閱讀
虛擬現(xiàn)實(shí)傳感器：虛擬現(xiàn)實(shí)中的傳感器技術(shù)
摘要：
虛擬現(xiàn)實(shí)的概念誕生于20世紀(jì)60年代,指借助計(jì)算機(jī)系統(tǒng)及傳感器技術(shù)生成三維環(huán)境,創(chuàng)造出一種嶄新的人機(jī)交互方式,通過調(diào)動(dòng)用戶各種感官(視覺,聽覺,觸覺,嗅覺等),來享受更加真實(shí)的,身臨其境的體驗(yàn),主要包括虛擬現(xiàn)實(shí)(VR)和增強(qiáng)現(xiàn)實(shí)(AR).自2010年以來,我院圍繞3D立體顯示,計(jì)算機(jī)圖形,圖像處理等方面開展了大量研究,形成了一定的研究成果.針對(duì)當(dāng)前沉浸感,交互感更強(qiáng)的虛擬現(xiàn)實(shí)技術(shù),我們也進(jìn)行了深入研究,認(rèn)為標(biāo)準(zhǔn)化將是推動(dòng)虛擬現(xiàn)實(shí)產(chǎn)業(yè)發(fā)展的重要手段.
展開
虛擬現(xiàn)實(shí)傳感器：融合AI的傳感器：人類制造虛擬現(xiàn)實(shí)的關(guān)鍵一環(huán)
神譯局是36氪旗下編譯團(tuán)隊(duì)，關(guān)注科技、商業(yè)、職場(chǎng)、生活等領(lǐng)域，重點(diǎn)介紹國外的新技術(shù)、新觀點(diǎn)、新風(fēng)向。
編者按：傳感器是人類在構(gòu)造模擬現(xiàn)實(shí)世界的虛擬現(xiàn)實(shí)當(dāng)中的關(guān)鍵一環(huán)，它為我們提供了感知現(xiàn)實(shí)世界的關(guān)鍵數(shù)據(jù)。但是，隨著傳感器與機(jī)器學(xué)習(xí)技術(shù)的深度融合，傳感器正在獲得可以對(duì)數(shù)據(jù)進(jìn)行解釋和推理的智能。Gideon Rosenblatt 介紹了傳感器的發(fā)展與本質(zhì)，讓我們得以窺見傳感器以及智能的未來。原文標(biāo)題是：The Nature of Sensors
傳感器是人類用來增強(qiáng)感知和解釋世界能力的技術(shù)。機(jī)器學(xué)習(xí)的革命正在變革著傳感器，這些傳感器讓我們可以構(gòu)建虛擬現(xiàn)實(shí)模型，而后者則賦予了我們塑造周圍世界的巨大力量。
這種傳感器技術(shù)與機(jī)器學(xué)習(xí)的融合在地球新興的智能變革中充當(dāng)著關(guān)鍵的一層，因?yàn)閭鞲衅髋c機(jī)器學(xué)習(xí)之間不斷加強(qiáng)的聯(lián)系讓我們能夠增強(qiáng)感官知覺的元素。因此，傳感器和機(jī)器學(xué)習(xí)的融合在人機(jī)智能的融合中扮演著關(guān)鍵的角色。
傳感器是做什么的？
我們不妨先從了解一點(diǎn)傳感器是干什么的基礎(chǔ)知識(shí)開始。傳感器對(duì)信號(hào)進(jìn)行轉(zhuǎn)換，也就是說它們將信號(hào)從一種形式轉(zhuǎn)換為另一種形式。這就是傳感器有時(shí)被稱為“轉(zhuǎn)換器（transducer）” 的原因。例如，溫度可以轉(zhuǎn)換成電信號(hào)，然后電信號(hào)又可以轉(zhuǎn)換成在我們廚房使用的數(shù)字溫度計(jì)上的符號(hào)。
傳感器幫助我們解釋我們的物理環(huán)境。從這個(gè)意義上來說，傳感器跟我們的感覺類似。我們的嗅覺已經(jīng)演進(jìn)了數(shù)十億年，能夠檢測(cè)分子結(jié)構(gòu)并將其轉(zhuǎn)化為某些我們會(huì)跟特定氣味（例如過熟的香蕉）關(guān)聯(lián)起來的電化學(xué)信號(hào)。我們的皮膚包含神經(jīng)末梢，可將壓力和溫度信號(hào)轉(zhuǎn)換為觸覺，正如我們的眼睛可將光線轉(zhuǎn)換為視覺圖像一樣。通過傳感器，我們利用工具來完成其中一些解釋周圍世界的工作。
感覺與傳感器能力（Sensor-bility）
要想理解傳感器在綜合機(jī)器與人類智能中所扮演的角色，區(qū)分一下實(shí)現(xiàn)感知技術(shù)的兩種手段是有幫助的。一種情況下，實(shí)現(xiàn)的目標(biāo)是增強(qiáng)我們的生物性感覺；另一種情況下，目標(biāo)則是替代之。
望遠(yuǎn)鏡增強(qiáng)我們的眼睛而不是取代之。望遠(yuǎn)鏡增強(qiáng)了光信號(hào)而不是將其轉(zhuǎn)換為另一種類型的信號(hào)。因此，我們能夠用日常同樣的視覺處理生物機(jī)制來理解被放大過的信號(hào)。相反，溫度計(jì)取代了我們皮膚上的熱受體。傳統(tǒng)溫度計(jì)將觸摸的信號(hào)轉(zhuǎn)換為視覺信號(hào)，讓我們無需灼燒自己也能看到溫度。
傳統(tǒng)望遠(yuǎn)鏡的信號(hào)得到了提升，但是模式識(shí)別仍然跟我們視覺處理系統(tǒng)的人體生物學(xué)是一致的。這就是感覺增強(qiáng)。但是在溫度計(jì)這里，信號(hào)不再由我們皮膚神經(jīng)末梢的生物機(jī)制來捕捉了。智能數(shù)字溫度計(jì)不僅僅捕捉信號(hào)而且還通過嵌入在設(shè)備內(nèi)的邏輯——或者模型處理模式識(shí)別過程。它就是這樣將特定層面的分子振動(dòng)解釋為比方說華氏175℉，然后讓你不用去猜雞肉是不是煮熟了。這就是感覺替代。
感覺增強(qiáng)會(huì)收集和增強(qiáng)信號(hào)，從而讓我們的生理過程更容易地通過我們自己的大腦對(duì)其進(jìn)行解釋。而感覺替代則是收集信號(hào)并將其轉(zhuǎn)換——這是真正傳感器的真正標(biāo)志。
從感覺到傳感器的轉(zhuǎn)移
不妨設(shè)想有個(gè)東西，比如一只橡皮鴨。從它身上反射出去的光線被我們的的眼睛收集起來然后通過感覺的處理轉(zhuǎn)化為電信號(hào)。在所謂的感知的模式識(shí)別的過程中這些信號(hào)會(huì)穿過我們大腦的視覺皮層。
而在傳感器這里，這些過程變了。機(jī)器接管了生物感覺來捕獲信號(hào)，而在解釋那些信號(hào)時(shí)，合成模型則取代了生物感覺來對(duì)信號(hào)進(jìn)行轉(zhuǎn)換。
在早期傳感器里面，這種信號(hào)轉(zhuǎn)換仍然相對(duì)粗糙。老式溫度計(jì)會(huì)將水銀的運(yùn)動(dòng)映射為一系列的溫度范圍內(nèi)（分別由Daniel Fahrenheit和Anders Celsius進(jìn)行校準(zhǔn)）。你可以把這種校準(zhǔn)過程視為一個(gè)非常簡(jiǎn)單的將水銀柱的伸縮與溫度估算進(jìn)行映射的模型。
但今天的模型看起來已經(jīng)非常不同。過去需要由人克服智力挑戰(zhàn)的工作現(xiàn)在已經(jīng)被機(jī)器自動(dòng)化了。傳感器在構(gòu)建這些新模型并且將其投入使用方面發(fā)揮著關(guān)鍵作用。
用于訓(xùn)練機(jī)器學(xué)習(xí)的傳感器
我們是通過機(jī)器學(xué)習(xí)來進(jìn)行自動(dòng)建模的，如果沒有來自當(dāng)今的傳感器的大量數(shù)據(jù)的話，這項(xiàng)工作是不可能完成的。傳感器對(duì)數(shù)據(jù)的自動(dòng)捕捉正在掀起信息時(shí)代背后的數(shù)據(jù)海嘯。
在模型構(gòu)建時(shí)，傳感器會(huì)對(duì)來自現(xiàn)實(shí)世界的數(shù)據(jù)進(jìn)行采樣，然后通過迭代反饋過程對(duì)模型進(jìn)行“雕刻”。這個(gè)過程是通過生成初始算法模型，然后利用它來運(yùn)行樣本數(shù)據(jù)并查看模型與數(shù)據(jù)的接近程度來實(shí)現(xiàn)。大家稱之為模型“訓(xùn)練”的過程相當(dāng)于自動(dòng)調(diào)整參數(shù)，通過每次的訓(xùn)練迭代，使得模型更接近樣本數(shù)據(jù)的實(shí)際情況。
傳感器技術(shù)的新常態(tài)與機(jī)器學(xué)習(xí)密不可分。傳感器仍然要捕捉數(shù)據(jù)，但現(xiàn)在的信號(hào)轉(zhuǎn)換過程已經(jīng)演變?yōu)槟Ｐ蜆?gòu)建。原始信號(hào)就是原始數(shù)據(jù)，但是通過機(jī)器學(xué)習(xí)的訓(xùn)練過程，該信號(hào)被轉(zhuǎn)換成該數(shù)據(jù)中所代表的現(xiàn)實(shí)的算法表示。從某種意義上說，這是傳感器一直都做的事情。溫度計(jì)的校準(zhǔn)其實(shí)就是將水銀的分子振動(dòng)轉(zhuǎn)換為代表現(xiàn)實(shí)溫度變量的模型。而利用當(dāng)今的機(jī)器學(xué)習(xí)模型，這種信號(hào)轉(zhuǎn)換能夠表現(xiàn)的現(xiàn)實(shí)已經(jīng)變得復(fù)雜得多了。
人類利用由機(jī)器學(xué)習(xí)支持的傳感器拍攝的第一幅黑洞照片
應(yīng)用機(jī)器智能的傳感器
我們已經(jīng)了解了傳感器是如何提供數(shù)據(jù)讓機(jī)器學(xué)習(xí)可以訓(xùn)練模型的，接下來我們?cè)倏纯丛谧屵@些模型工作方面?zhèn)鞲衅靼l(fā)揮了什么樣的作用。這個(gè)應(yīng)用機(jī)器學(xué)習(xí)的過程通常被稱為推理，而推理也對(duì)傳感器數(shù)據(jù)也非常依賴。
推理就是通過證據(jù)和論證得出想法或結(jié)論的過程
推理需要從環(huán)境中提取新數(shù)據(jù)，并將其提供給通過早期訓(xùn)練數(shù)據(jù)生成的模型。機(jī)器學(xué)習(xí)模型就是這么部署到實(shí)際應(yīng)用中的。機(jī)器學(xué)習(xí)應(yīng)用程序從受過訓(xùn)練的模型開始，然后利用該模型來理解新數(shù)據(jù)。在此，模型充當(dāng)了某種算法推理的作用，而新數(shù)據(jù)就充當(dāng)證據(jù)。應(yīng)用程序應(yīng)用該模型的推理，從而將新證據(jù)的信號(hào)轉(zhuǎn)化為某種結(jié)論。
為了解釋得更具體一點(diǎn)，我們來舉一個(gè)實(shí)際的例子。Google擁有強(qiáng)大的機(jī)器學(xué)習(xí)模型，因?yàn)檫@些模型已經(jīng)過了大規(guī)模圖像集的訓(xùn)練。這讓我可以利用這些模型來進(jìn)行推理。我可以將手機(jī)的攝像頭對(duì)準(zhǔn)一個(gè)咖啡杯，然后它不僅可以正確地推斷出我面前的咖啡杯，能說出這是甲殼蟲樂隊(duì)的黃色潛水艇的圖片。簡(jiǎn)而言之，我的手機(jī)中的攝像頭傳感器捕捉了光的信號(hào)，而Google的機(jī)器視覺模型接著將之轉(zhuǎn)換成一種新型的信號(hào)——人類語言。
我們今天看到的是傳感器在轉(zhuǎn)換信號(hào)中所發(fā)揮的轉(zhuǎn)換作用越來越依賴于機(jī)器學(xué)習(xí)。比方說，如今相機(jī)市場(chǎng)的創(chuàng)新已經(jīng)越來越不是光學(xué)上的進(jìn)展，而是與機(jī)器學(xué)習(xí)模型方面的進(jìn)步越來越相關(guān)。事實(shí)上，我們的手機(jī)現(xiàn)在已經(jīng)部署了很多傳感器，多到開始發(fā)揮著像Spock的三錄儀（《星際迷航》里面的tricorder，具備感知、計(jì)算、記錄三種用途）那樣的作用。
傳感器、模型以及智能的未來
簡(jiǎn)而言之，傳感器為訓(xùn)練機(jī)器學(xué)習(xí)模型提供數(shù)據(jù)，然后應(yīng)用了這些模型。它們讓我們從世界中捕捉數(shù)據(jù)并將其置入該物理現(xiàn)實(shí)的虛擬表示里。事實(shí)上，思考我們現(xiàn)在使用傳感器數(shù)據(jù)構(gòu)建的模型可以有一種方式，那就是它們正在為一個(gè)宏大的、新的，多維度的虛擬現(xiàn)實(shí)做出貢獻(xiàn)。簡(jiǎn)而言之，傳感器正在幫助人類將物理現(xiàn)實(shí)轉(zhuǎn)化為虛擬現(xiàn)實(shí)。
就像機(jī)器學(xué)習(xí)接管了所謂的知覺的大腦的信號(hào)轉(zhuǎn)換功能一樣，傳感器承擔(dān)了我們感覺器官的數(shù)據(jù)捕捉功能。那些簡(jiǎn)單模型，比如早期溫度計(jì)中所嵌入的那種，仍然需要我們的解釋來回答這樣的問題：“這只雞要加熱到多高的溫度我才可以吃？”而當(dāng)今的傳感器中所嵌入的機(jī)器學(xué)習(xí)模型越強(qiáng)大，其所接管的我們大腦的數(shù)據(jù)解釋工作就會(huì)越多。這些傳感器現(xiàn)在已經(jīng)可以準(zhǔn)確地告訴我們雞肉什么時(shí)候可以吃，以及那艘顏色鮮艷的潛水艇的起源。
模型幫助我們將日常的定性體驗(yàn)轉(zhuǎn)化為定量理解，從而幫助我們解釋、預(yù)測(cè)和操縱我們周圍的世界。傳感器和新的機(jī)器學(xué)習(xí)模型使得人類能夠擴(kuò)展我們大腦的解釋能力。它們幫助我們?cè)鰪?qiáng)了自己的想象力，讓我們超越自己的生理極限。因此，它們構(gòu)成了新興的綜合機(jī)器和人類信息處理以及地球的智能未來的關(guān)鍵一層。
我的感覺看起來是這樣的嗎？
原文鏈接：
譯者：boxi。
