隨著汽車自動(dòng)駕駛功能的日益普及，對駕駛員或車輛操作員的依賴越來越少，這意味著具有更高自主性的產(chǎn)品將需要復(fù)制駕駛員或操作員將執(zhí)行的所有各種活動(dòng)。車輛和機(jī)器人技術(shù)必須利用人類駕駛員或操作員使用的所有感官，不僅是視覺或觸覺，還包括聲音和嗅覺。

Kurt Dekoski

Business Development Manager

根據(jù)SAE的說法：

L2級(jí)自動(dòng)駕駛意味著駕駛員必須監(jiān)控環(huán)境。

L3級(jí)自動(dòng)駕駛意味著不需要駕駛員監(jiān)控環(huán)境。

當(dāng)我們達(dá)到L4級(jí)自動(dòng)駕駛時(shí)，車輛能夠自行監(jiān)控環(huán)境。

瑞薩的Reality AI軟件已經(jīng)在幫助監(jiān)控當(dāng)今的這種環(huán)境。不僅需要產(chǎn)品或車輛外部的環(huán)境才能實(shí)現(xiàn)高級(jí)駕駛或操作能力，還包括產(chǎn)品本身，以促進(jìn)防御性駕駛和預(yù)測性維護(hù)。利用先進(jìn)的信號(hào)處理技術(shù)來分析環(huán)境產(chǎn)生的不同信號(hào)，Reality AI工具可以促進(jìn)更高水平的自動(dòng)駕駛，使車輛或產(chǎn)品更加安全。

對于自動(dòng)駕駛的各個(gè)行業(yè)，瑞薩提供Seeing with Sound解決方案，該解決方案通過包含聲音的傳感模態(tài)來增強(qiáng)當(dāng)前的ADAS/AD傳感器套件。當(dāng)我們開車時(shí)，我們不僅要利用我們的視覺，還要依靠聽覺甚至振動(dòng)來導(dǎo)航周圍的環(huán)境。我們從周圍的環(huán)境中聽到了很多聲音，我們可能無法立即看到或根本看不到它們的來源。

借助SWS，我們使用車輛的麥克風(fēng)或振動(dòng)聲學(xué)傳感器來監(jiān)聽緊急車輛、道路上的其他車輛、行人，甚至騎自行車的人，并結(jié)合RH850/U2A等瑞薩MCU。

Seeing with Sound（SWS）應(yīng)用程序是《紐約時(shí)報(bào)》最近一篇文章中報(bào)道的一個(gè)問題的完美解決方案，當(dāng)時(shí)機(jī)器人車輛從一輛拉著警報(bào)器的應(yīng)急車輛前經(jīng)過，從而延遲了其到達(dá)緊急情況。機(jī)器人車輛對迎面而來的消防車有清晰的視線，但是無法識(shí)別它，但如果采用了我們的SWS解決方案，它肯定會(huì)聽到警報(bào)聲。該車輛周圍的聽覺環(huán)境將提供視覺環(huán)境遺漏的信息，從而提供更好的整體環(huán)境圖像。

瑞薩的Seeing with Sound解決方案使車輛能夠聽到周圍環(huán)境，并根據(jù)感興趣的噪音（如緊急警報(bào)聲）做出決策。有時(shí)，我們會(huì)忽略開車時(shí)對聽覺的利用程度。即使在當(dāng)前的車輛中，我們也看到分心駕駛會(huì)將注意力從道路上轉(zhuǎn)移開，并且隨著被動(dòng)和主動(dòng)降噪技術(shù)的應(yīng)用，人類駕駛員更難識(shí)別來自環(huán)境的所有輸入。隨著SWS被納入車輛，這將使它們更安全，并且更少地依賴警覺的駕駛員。緊急車輛或自動(dòng)緊急制動(dòng)的法規(guī)和Move Over法律正在推動(dòng) SWS等各種技術(shù)的實(shí)施。

隨著各行各業(yè)繼續(xù)朝著自動(dòng)駕駛方向發(fā)展，人工智能在車輛或產(chǎn)品運(yùn)行狀態(tài)狀態(tài)監(jiān)測以及防御性駕駛和預(yù)測性維護(hù)中的應(yīng)用將繼續(xù)增加。作為駕駛員和操作員，我們通常會(huì)監(jiān)控產(chǎn)品或車輛的健康狀況并安排必要的維護(hù)，或?qū)④囕v移動(dòng)到安全的位置以便更好地觀察。瑞薩的Reality AI 工具可以分析來自各種傳感器（如加速度計(jì)、陀螺儀、IMU和麥克風(fēng)等）的數(shù)據(jù)，以利用頻率/幅度或時(shí)域信號(hào)指標(biāo)開發(fā)ML模型，以根據(jù)數(shù)學(xué)、統(tǒng)計(jì)和對數(shù)公式計(jì)算特征集。甚至可以使用壓力和溫度傳感器。為各種應(yīng)用生成健康狀態(tài)和剩余使用壽命指標(biāo)等結(jié)果，從過濾器到水或清洗泵到輪胎磨損等等。

考慮一下我們在開車時(shí)監(jiān)控的所有不同變量，甚至是可以感覺到和聽到的小碰撞、碰撞、叮當(dāng)聲和劃痕等異常情況。Reality AI Tools軟件可以分析這些不同的信號(hào)以對它們可能代表的內(nèi)容進(jìn)行分類。如果石頭或巖石撞到您的擋風(fēng)玻璃怎么辦？在最初的電擊之后，駕駛員能夠確定應(yīng)該采取哪些預(yù)防措施。未來的汽車如何知道發(fā)生了撞擊？在許多不同的情況下，包含聲音甚至觸摸或感覺可以提高自主能力。隨著各行各業(yè)都在努力實(shí)現(xiàn)自動(dòng)駕駛，自動(dòng)駕駛產(chǎn)品將如何適應(yīng)不同的條件，以確保駕駛員和乘客的安全和舒適？

瑞薩電子(TSE: 6723)

科技讓生活更輕松，致力于打造更安全、更智能、可持續(xù)發(fā)展的未來。作為全球微控制器供應(yīng)商，瑞薩電子融合了在嵌入式處理、模擬、電源及連接方面的專業(yè)知識(shí)，提供完整的半導(dǎo)體解決方案。成功產(chǎn)品組合加速汽車、工業(yè)、基礎(chǔ)設(shè)施及物聯(lián)網(wǎng)應(yīng)用上市，賦能數(shù)十億聯(lián)網(wǎng)智能設(shè)備改善人們的工作和生活方式。