Myriam Elizabeth Vaca Recalde, Luis Paarup Peláez, Enrique D. Marti Munoz, Ray Lattarulo, Xavier Udaeta
{"title":"基于飞行时间摄像头的停车协助","authors":"Myriam Elizabeth Vaca Recalde, Luis Paarup Peláez, Enrique D. Marti Munoz, Ray Lattarulo, Xavier Udaeta","doi":"10.17979/SPUDC.9788497497169.810","DOIUrl":null,"url":null,"abstract":"espanolEn este articulo se propone un asistente de aparcamiento basado en la reconstruccion de objetos alrededor del vehiculo, usando informacion obtenida de una camara de Tiempo de Vuelo (ToF, del ingles Time-to-Flight). El metodo propuesto se centra en la deteccion de las matriculas de los vehiculos de alrededor, para estimar su posicion y determinar espacios libres de aparcamiento. Para ello, se fusiona una imagen 2D de intensidad de luz recibida, y una nube de puntos 3D creada a partir de la informacion de profundidad. Esta fusion permite relacional cada pixel de la imagen con una posicion 3D, por lo que se obtiene una referencia 3D del entorno facilitando al conductor la maniobra de aparcamiento que esta realizando. El algoritmo propuesto mejora la deteccion de los vehiculos resolviendo dos de los principales problemas de trabajar con camaras: 1) obtencion de sombras y reflejos en las imagenes debido al brillo (principalmente en estacionamientos al aire libre), lo que dificulta su proceso para detectar objetos; y 2) la deteccion limitada de objetos de baja reflexion, como los coches oscuros. El sistema es evaluado a traves de una plataforma Renault Twizy en condiciones reales. EnglishThis paper proposes a parking assistant base don the reconstruction of objects around the vehicle, using 2D and 3D data obtained from a Time-to-Flight camera (ToF). The proposed method is based on the fusion of the data obtained from the intensity image and the point cloud. It is mainly on the detection of the vehicle’s plate to estimate their position and determine free parking lots. This fusion allows to link each pixel of the image with a 3D position, so it gets a 3D reference of the environment and a clear vision during the parking maneuver. In addition, this methodology improves the vehicles detection solving two of the relevant problems found in cameras: 1) obtaining shadows and reflections in the images considering brightness (mainly in outdoor parking lots), which hinders the process to detect objects; and 2) limited detection of low reflection objects, such as dark cars. The system is evaluated in a Renault Twizy platform in real conditions.","PeriodicalId":189601,"journal":{"name":"XL Jornadas de Automática: libro de actas (Ferrol, 4-6 de septiembre de 2019)","volume":"29 1","pages":"0"},"PeriodicalIF":0.0000,"publicationDate":"2020-06-11","publicationTypes":"Journal Article","fieldsOfStudy":null,"isOpenAccess":false,"openAccessPdf":"","citationCount":"0","resultStr":"{\"title\":\"Asistencia al aparcamiento basado en una cámara de tiempo de vuelo\",\"authors\":\"Myriam Elizabeth Vaca Recalde, Luis Paarup Peláez, Enrique D. Marti Munoz, Ray Lattarulo, Xavier Udaeta\",\"doi\":\"10.17979/SPUDC.9788497497169.810\",\"DOIUrl\":null,\"url\":null,\"abstract\":\"espanolEn este articulo se propone un asistente de aparcamiento basado en la reconstruccion de objetos alrededor del vehiculo, usando informacion obtenida de una camara de Tiempo de Vuelo (ToF, del ingles Time-to-Flight). El metodo propuesto se centra en la deteccion de las matriculas de los vehiculos de alrededor, para estimar su posicion y determinar espacios libres de aparcamiento. Para ello, se fusiona una imagen 2D de intensidad de luz recibida, y una nube de puntos 3D creada a partir de la informacion de profundidad. Esta fusion permite relacional cada pixel de la imagen con una posicion 3D, por lo que se obtiene una referencia 3D del entorno facilitando al conductor la maniobra de aparcamiento que esta realizando. El algoritmo propuesto mejora la deteccion de los vehiculos resolviendo dos de los principales problemas de trabajar con camaras: 1) obtencion de sombras y reflejos en las imagenes debido al brillo (principalmente en estacionamientos al aire libre), lo que dificulta su proceso para detectar objetos; y 2) la deteccion limitada de objetos de baja reflexion, como los coches oscuros. El sistema es evaluado a traves de una plataforma Renault Twizy en condiciones reales. EnglishThis paper proposes a parking assistant base don the reconstruction of objects around the vehicle, using 2D and 3D data obtained from a Time-to-Flight camera (ToF). The proposed method is based on the fusion of the data obtained from the intensity image and the point cloud. It is mainly on the detection of the vehicle’s plate to estimate their position and determine free parking lots. This fusion allows to link each pixel of the image with a 3D position, so it gets a 3D reference of the environment and a clear vision during the parking maneuver. In addition, this methodology improves the vehicles detection solving two of the relevant problems found in cameras: 1) obtaining shadows and reflections in the images considering brightness (mainly in outdoor parking lots), which hinders the process to detect objects; and 2) limited detection of low reflection objects, such as dark cars. The system is evaluated in a Renault Twizy platform in real conditions.\",\"PeriodicalId\":189601,\"journal\":{\"name\":\"XL Jornadas de Automática: libro de actas (Ferrol, 4-6 de septiembre de 2019)\",\"volume\":\"29 1\",\"pages\":\"0\"},\"PeriodicalIF\":0.0000,\"publicationDate\":\"2020-06-11\",\"publicationTypes\":\"Journal Article\",\"fieldsOfStudy\":null,\"isOpenAccess\":false,\"openAccessPdf\":\"\",\"citationCount\":\"0\",\"resultStr\":null,\"platform\":\"Semanticscholar\",\"paperid\":null,\"PeriodicalName\":\"XL Jornadas de Automática: libro de actas (Ferrol, 4-6 de septiembre de 2019)\",\"FirstCategoryId\":\"1085\",\"ListUrlMain\":\"https://doi.org/10.17979/SPUDC.9788497497169.810\",\"RegionNum\":0,\"RegionCategory\":null,\"ArticlePicture\":[],\"TitleCN\":null,\"AbstractTextCN\":null,\"PMCID\":null,\"EPubDate\":\"\",\"PubModel\":\"\",\"JCR\":\"\",\"JCRName\":\"\",\"Score\":null,\"Total\":0}","platform":"Semanticscholar","paperid":null,"PeriodicalName":"XL Jornadas de Automática: libro de actas (Ferrol, 4-6 de septiembre de 2019)","FirstCategoryId":"1085","ListUrlMain":"https://doi.org/10.17979/SPUDC.9788497497169.810","RegionNum":0,"RegionCategory":null,"ArticlePicture":[],"TitleCN":null,"AbstractTextCN":null,"PMCID":null,"EPubDate":"","PubModel":"","JCR":"","JCRName":"","Score":null,"Total":0}
引用次数: 0
摘要
在这篇文章中,我们提出了一个停车助手,基于重建车辆周围的物体,使用从飞行时间(ToF)摄像机获得的信息。提出的方法侧重于检测周围车辆的车牌,以估计它们的位置和确定停车位。为此,我们将接收到的光强度的2D图像与由深度信息创建的3D点云融合在一起。这种融合允许图像的每个像素与一个3D位置相关,从而获得环境的3D参考,方便司机执行停车机动。该算法改进了车辆检测,解决了相机工作中的两个主要问题:1)由于亮度(主要在户外停车场),图像中的阴影和反射难以检测物体;2)有限的低反射率物体检测,如深色汽车。该系统通过雷诺Twizy平台在实际条件下进行评估。这篇论文提出了一个停车辅助基地,使用从飞行时间摄像机(ToF)获得的2D和3D数据重建车辆周围的物体。所提出的方法是基于强度图像和点云数据的融合。It is mainly on the检测of the vehicle’s plate去判断其定位和确定停车场lots。= =地理= =根据美国人口普查,这个县的面积为,其中土地面积为,其中土地面积为。此外,该方法通过解决在摄影机中发现的两个相关问题来改进车辆检测:1)在考虑亮度的情况下(主要是在户外停车场)获得图像中的阴影和反射,这阻碍了检测物体的过程;= =地理= =根据美国人口普查,这个县的面积为。该系统在雷诺Twizy平台上进行了实际测试。
Asistencia al aparcamiento basado en una cámara de tiempo de vuelo
espanolEn este articulo se propone un asistente de aparcamiento basado en la reconstruccion de objetos alrededor del vehiculo, usando informacion obtenida de una camara de Tiempo de Vuelo (ToF, del ingles Time-to-Flight). El metodo propuesto se centra en la deteccion de las matriculas de los vehiculos de alrededor, para estimar su posicion y determinar espacios libres de aparcamiento. Para ello, se fusiona una imagen 2D de intensidad de luz recibida, y una nube de puntos 3D creada a partir de la informacion de profundidad. Esta fusion permite relacional cada pixel de la imagen con una posicion 3D, por lo que se obtiene una referencia 3D del entorno facilitando al conductor la maniobra de aparcamiento que esta realizando. El algoritmo propuesto mejora la deteccion de los vehiculos resolviendo dos de los principales problemas de trabajar con camaras: 1) obtencion de sombras y reflejos en las imagenes debido al brillo (principalmente en estacionamientos al aire libre), lo que dificulta su proceso para detectar objetos; y 2) la deteccion limitada de objetos de baja reflexion, como los coches oscuros. El sistema es evaluado a traves de una plataforma Renault Twizy en condiciones reales. EnglishThis paper proposes a parking assistant base don the reconstruction of objects around the vehicle, using 2D and 3D data obtained from a Time-to-Flight camera (ToF). The proposed method is based on the fusion of the data obtained from the intensity image and the point cloud. It is mainly on the detection of the vehicle’s plate to estimate their position and determine free parking lots. This fusion allows to link each pixel of the image with a 3D position, so it gets a 3D reference of the environment and a clear vision during the parking maneuver. In addition, this methodology improves the vehicles detection solving two of the relevant problems found in cameras: 1) obtaining shadows and reflections in the images considering brightness (mainly in outdoor parking lots), which hinders the process to detect objects; and 2) limited detection of low reflection objects, such as dark cars. The system is evaluated in a Renault Twizy platform in real conditions.