基于IMX219和IWR6843ISK的人形机器人毫米波雷达感应和传感器融合

从(cóng)科(kē)幻(huàn)走(zǒu)入(rù)现(xiàn)实(shí)，人(rén)形(xíng)机(jī)器(qì)人(rén)正(zhèng)经(jīng)历(lì)一(yī)场(chǎng)静(jìng)默(mò)而(ér)深(shēn)刻(kè)的(de)技(jì)术(shù)革(gé)命(mìng)：更(gèng)高(gāo)效(xiào)的(de)能(néng)源(yuán)控(kòng)制(zhì)、更(gèng)精(jīng)准(zhǔn)的(de)运(yùn)动(dòng)算(suàn)法(fǎ)、更(gèng)高(gāo)速(sù)的(de)通(tōng)信(xìn)架(jià)构(gòu)、更(gèng)智(zhì)能(néng)的(de)环(huán)境(jìng)感(gǎn)知(zhī)能(néng)力(lì)......这(zhè)些(xiē)变(biàn)革(gé)正(zhèng)在(zài)重(zhòng)塑(sù)机(jī)器(qì)人(rén)的(de)“骨(gǔ)骼(gé)”、“神(shén)经(jīng)”与(yǔ)“感(gǎn)官(guān)”。

欢(huan)迎(yíng)来(lái)到(dào)

《人(rén)形(xíng)机(jī)器(qì)人(rén)专(zhuān)题(tí)》

我(wǒ)们(men)将(jiāng)为(wèi)大(dà)家(jiā)带(dài)来(lái)四(sì)篇(piān)系(xì)列(liè)文章(zhāng)

从(cóng)不(bù)同(tóng)方(fāng)面(miàn)对(duì)人(rén)形(xíng)机(jī)器(qì)人进行知识解析

本文为系列最后一篇文章

将聚焦

人形机器人中的毫米波雷达感应和传感器融合

人形机器人具有自动执行任务、做类似人类的动作和参与社交互动，因此在各行各业都备受关注。这些机器人的应用范围广泛，从医疗保健(jiàn)、人(rén)形(xíng)机(jī)器(qì)人(rén)辅(fǔ)助(zhù)患(huàn)者(zhě)，到(dào)工(gōng)业(yè)自(zì)动(dòng)化(huà)、教(jiào)育(yù)和(hé)研(yán)究(jiū)，不(bù)一(yī)而(ér)足(zú)。人(rén)形(xíng)机(jī)器(qì)人(rén)的(de)开(kāi)发(fā)面(miàn)临(lín)着(zhe)多(duō)项(xiàng)挑(tiāo)战(zhàn)，包(bāo)括(kuò)复(fù)制(zhì)人(rén)类(lèi)的复杂动作、实现自主决策以及创建能够适应非结构化环境的系统。

传感在人形机器人中的重要性

人形机器人的一个重要方面是探测和解读物理环境的能力；正如人类依靠感官进行导航和与世界互动一样，人形机器人也需要复杂的传感系统来自主有效地执行任务。人形机器人中使用的常见传感器类型包括视觉系统（摄像头）、雷达和激光雷达（导航和感知）、触觉传感器（模拟触控）以及使机器人能够了解自身姿势和平衡的听觉系统（麦克风）。本文探讨了毫米波 (mmWave) 雷达传感器在导航、识别(bié)以(yǐ)及(jí)将(jiāng)雷达与摄像头传感器集成方面的优势，从而实现人形机器人中的传感器融合。

毫米波雷(léi)达(dá)传(chuán)感(gǎn)器(qì)简(jiǎn)介(jiè)

远(yuǎn)距(jù)离(lí)功(gōng)能(néng)、高运动灵敏度和隐私功能使基于雷达的传感器集成电路 (IC) 成为位置和接近传感设计的常用技术。雷达传感器具有高精度，在汽车和工业市场中也很受欢迎，用于检测盲点、碰撞、人员和运动。

60GHz 和(hé) 77GHz 雷(léi)达(dá)传(chuán)感(gǎn)器(qì)具(jù)有(yǒu)更(gèng)高(gāo)的(de)分(fēn)辨(biàn)率(lǜ)、更(gèng)高(gāo)的(de)精(jīng)度(dù)和(hé)更(gèng)小(xiǎo)的(de)外(wài)形(xíng)尺(chǐ)寸(cùn)，正(zhèng)在(zài)取(qǔ)代(dài) 24GHz 雷(léi)达(dá)传(chuán)感(gǎn)器(qì)。60GHz 和(hé) 77GHz 雷(léi)达(dá)频(pín)带(dài)支(zhī)持(chí)新(xīn)的(de)应(yīng)用(yòng)，例(lì)如(rú)工(gōng)业(yè)机(jī)器(qì)人(rén)中(zhōng)的(de)物(wù)体(tǐ)存(cún)在(zài)检(jiǎn)测(cè)以(yǐ)及(jí)工(gōng)厂(chǎng)或(huò)家(jiā)居(jū)移(yí)动(dòng)机(jī)器(qì)人(rén)应(yīng)用(yòng)。

毫(háo)米(mǐ)波(bō)传(chuán)感(gǎn)器(qì)相(xiāng)较(jiào)于(yú)

激(jī)光(guāng)雷(léi)达(dá)和(hé)摄(shè)像(xiàng)头(tóu)的(de)优(yōu)势(shì)

由(yóu)于(yú)雷(léi)达(dá)能(néng)够(gòu)在(zài)恶(è)劣(liè)天(tiān)气(qì)条(tiáo)件(jiàn)下(xià)良(liáng)好(hǎo)运(yùn)行(xíng)，因(yīn)此(cǐ)通(tōng)常(cháng)选(xuǎn)择(zé)毫(háo)米(mǐ)波(bō)雷(léi)达(dá)技(jì)术(shù)而(ér)不(bù)是(shì)激(jī)光(guāng)雷(léi)达(dá)、摄(shè)像(xiàng)头(tóu)和(hé)其(qí)他(tā)光(guāng)学(xué)传(chuán)感(gǎn)器(qì)，以(yǐ)节(jié)省(shěng)成(chéng)本(běn)；摄(shè)像(xiàng)头(tóu)可(kě)能(néng)会(huì)受到(dào)光(guāng)线(xiàn)不(bù)足(zú)和(hé)天(tiān)气(qì)的(de)影(yǐng)响(xiǎng)。雷(léi)达(dá)还(hái)具(jù)有(yǒu)较(jiào)宽(kuān)的(de)距(jù)离(lí)和(hé)覆(fù)盖范围，使传感器能够检测 100 米以外的物体。由于移动机器人应用需要节省功耗，因此用户经常使用低至 1.7mW 的雷达进行存在检测。但是，在各种用例场景中，可使用雷达和激光雷达、摄像头或替代光学传感器类型组合。

从功能安全的角度来看，TI 工程师在设计 IWR6843 等非接触式雷达传感器之前，已进行了大量的硬件和软件开发工作，并获(huò)得了 (TÜV) SÜD 的器件认证。所有 TI 雷达传感器均包含内置的功能安全机制，可提供 IEC 61508 所要求的必要诊断覆盖范围，可在元件级别满足高达安全完整性等级 (SIL) 2 的硬件功能。

可以通过诊断软件库、编译器资质审核套件、第三方操作系统、开发工具和其他文档在线获取功能安全配套资料，从而让工程师简化安全设计流程和系统级认证。

传感器融合

在人形机器(qì)人(rén)中(zhōng)使(shǐ)用(yòng)一(yī)种(zhǒng)类(lèi)型(xíng)的(de)传(chuán)感(gǎn)器(qì)存(cún)在(zài)明(míng)显(xiǎn)的(de)局(jú)限(xiàn)性(xìng)，包(bāo)括(kuò)数(shù)据(jù)收(shōu)集不(bù)完(wán)整(zhěng)或(huò)不(bù)准(zhǔn)确(què)。例(lì)如(rú)，摄(shè)像(xiàng)头(tóu)在深度感知、光线不足或探测非视觉元素时会遇到困难，而激光雷达传感器则会因为机器人移动时激光上下跳动(dòng)而(ér)导(dǎo)致(zhì)读(dú)数(shù)不(bù)准(zhǔn)确(què)。数(shù)据(jù)收(shōu)集限(xiàn)制(zhì)可(kě)能(néng)会(huì)导(dǎo)致(zhì)导(dǎo)航(háng)、物(wù)体(tǐ)操(cāo)作(zuò)和(hé)环(huán)境(jìng)交(jiāo)互(hù)方(fāng)面(miàn)的(de)错(cuò)误(wù)。

传(chuán)感(gǎn)器(qì)融(róng)合(hé)技(jì)术(shù)通(tōng)过(guò)集成(chéng)来(lái)自(zì)多(duō)个(gè)传(chuán)感(gǎn)器(qì)的(de)数(shù)据(jù)，更(gèng)准(zhǔn)确(què)、可(kě)靠(kào)和(hé)全面(miàn)地(de)了(le)解(jiě)机(jī)器(qì)人(rén)环(huán)境(jìng)，从(cóng)而(ér)解(jiě)决(jué)这(zhè)些(xiē)问(wèn)题(tí)。通(tōng)过(guò)结(jié)合(hé)来(lái)自(zì)各(gè)种(zhǒng)传(chuán)感(gǎn)模(mó)式(shì)的(de)输(shū)入(rù)，人形机器人可以做出更明智的决策，从而增强执行复杂任务的能力，例如在不平坦的地形中导航、抓取不同形状和大小的物体，以及在动态的真实世界环境中进行交互。

传感器融合的优势包括：

通过合并不同传感器的数据来提高精确度。

冗余，以便在一个传感器发生故障时确认功能正常。

通过更全面地了解周围环境提高环境感知能力。

能够更好地适应动态环境。

雷达和摄像头传感器融合

雷达在恶劣条件下经久耐用，而且在探测移动物体时非常可靠，因此是经常集成到系统中的主要传感器之一。为了弥补单一传感器系统的不足，TI 为希望更大限度提高机器人精度和感知能力的用户提供了各种产品。TI 提供摄像头和雷达传感器模块以及 IMX219 摄像头和 IWR6843ISK EVM 毫米波雷达传感器。该模块实现了一种物体级融合方法，该方法应用了注重物体聚类和跟踪的摄像头-视觉处理链和雷达处理链，使用户能够跟踪和探测三维环境中的物体。用户演示了传感器融合在机器人 SDK 中的诸多潜能和功能。

图 ：采用 IMX219 和 IWR6843ISK

构建的摄像头和雷达传感器模块

总结

本文探讨了毫米波感应、安全和传感器融合在实现精确检测人形机器人周围的物体和运动方面的优势。毫米波传感技术在昏暗或灰尘等低能见度条件下尤为重要，因为在这些条件(jiàn)下(xià)，传(chuán)统(tǒng)的(de)视(shì)觉(jué)传(chuán)感(gǎn)器(qì)可(kě)能(néng)不(bù)可(kě)靠(kào)。毫(háo)米(mǐ)波(bō)雷(léi)达(dá)成(chéng)本(běn)低(dī)、功(gōng)耗(hào)更(gèng)低(dī)，而(ér)且(qiě)能(néng)在(zài)恶(è)劣(liè)天(tiān)气(qì)条(tiáo)件(jiàn)下(xià)工(gōng)作，因此成为机器人应用的潜在选择。

本文还介绍了功能安全和传感器融合技术，这些技(jì)术(shù)对(duì)于(yú)人(rén)形(xíng)机器人在复杂环境中的可靠运行至关重要。凭借 (TÜV) SÜD 内置的功能安全机制和器件安全认证，TI 雷达器件可提供 IEC 61508 所需的必要诊断覆盖范围，可在元件级别满足高达 SIL 2 的硬件功能。将支持安全功能的雷达与激光雷达、摄像头或其他光学传感器相结合，有助于提高物体探测的准确性、故障冗余性、决策能力以及机器人行为的实时调整，从而提高人形机器人系统的自主性和安全性。