PGµç¾º



±¾Õ¾µãʹÓÃCookies£¬¼ÌÐøä¯ÀÀ±íʾÄúͬÒâÎÒÃÇʹÓÃCookies¡£ CookiesºÍÒþ˽Õþ²ß>

¼òÌåÖÐÎÄ
English
Ê×Ò³ > ¹ØÓÚÎÒÃÇ > ÐÂÎÅÖÐÐÄ > PGµç¾ºÐÅÏ¢AIÍŶӻñCVPR2024×Ô¶¯¼ÝÊ»¹ú¼ÊÌôÕ½Èü¡°Occupancy & Flow¡±ÈüµÀ¹Ú¾ü

PGµç¾ºÐÅÏ¢AIÍŶӻñCVPR2024×Ô¶¯¼ÝÊ»¹ú¼ÊÌôÕ½Èü¡°Occupancy & Flow¡±ÈüµÀ¹Ú¾ü

2024-06-24

½üÈÕ£¬ÔÚÈ«ÇòȨÍþµÄCVPR 2024×Ô¶¯¼ÝÊ»¹ú¼ÊÌôÕ½Èü(Autonomous Grand Challenge)ÖУ¬PGµç¾ºÐÅÏ¢AIÍŶÓËùÌá½»µÄ¡°F-OCC¡±Ë㷨ģÐÍÒÔ48.9%µÄ³öÉ«³É¼¨Õ¶»ñÕ¼¾ÝÕ¤¸ñºÍÔ˶¯¹À¼Æ(Occupancy & Flow)ÈüµÀµÚÒ»Ãû¡£¼Ì22¡¢23ÄêÔÚ´¿ÊÓ¾õºÍ¶àģ̬µÈ×Ô¶¯¼ÝÊ»¸ÐÖª·½Ïò£¬¶à´ÎµÇ¶¥nuSences 3DÄ¿±ê¼ì²â°ñµ¥ºó£¬¸ÃAIÍŶÓÃæÏòOccupancy¼¼ÊõÔÙÒ»´ÎʵÏÖÍ»ÆÆ£¬ÊµÏÖÁ˶Ը߶ȶ¯Ì¬¼°²»¹æÔòµÄ¼ÝÊ»³¡¾°¸ü¾«×¼µÄ3D¸ÐÖª¼°Ô˶¯Ô¤²â¡£

PGµç¾ºÐÅÏ¢AIÍŶÓÕ¶»ñÕ¼¾ÝÕ¤¸ñºÍÔ˶¯¹À¼ÆÈüµÀµÚÒ»Ãû

PGµç¾ºÐÅÏ¢AIÍŶÓÕ¶»ñÕ¼¾ÝÕ¤¸ñºÍÔ˶¯¹À¼ÆÈüµÀµÚÒ»Ãû

CVPR 2024×Ô¶¯¼ÝÊ»¹ú¼ÊÌôÕ½ÈüÊǹú¼ÊPGµç¾º¹ÙÍø»úÊÓ¾õÓëģʽʶ±ð»áÒé(IEEE/CVF Conference on Computer Vision and Pattern Recognition)µÄÒ»¸öÖØÒª×é³É²¿·Ö£¬×¨×¢ÓÚ×Ô¶¯¼ÝÊ»ÁìÓòµÄ¼¼Êõ´´ÐºÍÓ¦ÓÃÑо¿¡£2024ÄêCVPR×Ô¶¯¼ÝÊ»¹ú¼ÊÌôÕ½Èü£¬°üº¬¸ÐÖª¡¢Ô¤²â¡¢¹æ»®Èý´ó·½ÏòÆß¸öÈüµÀ£¬Ö¼ÔÚÉîÈë̽Ë÷×Ô¶¯¼ÝÊ»ÁìÓòµÄÇ°ÑØ¿ÎÌâ¡£

Èýά¸ÐÖªºÍÔ¤²âÊÇ×Ô¶¯¼ÝÊ»ÁìÓòµÄÐÂÐËÈÎÎñ£¬ÒªÇó¶Ô³µÁ¾ÐÐÊ»³¡¾°½øÐÐϸÁ£¶È½¨Ä££¬¶ÔÓÚÌáÉý×Ô¶¯¼ÝÊ»µÄ»·¾³¸ÐÖªÄÜÁ¦ÓÐ×ÅÖØÒªÒâÒå¡£´Ë´ÎPGµç¾ºÐÅÏ¢AIÍŶÓËùµÇ¶¥µÄÕ¼¾ÝÕ¤¸ñºÍÔ˶¯¹À¼Æ(Occupancy & Flow)ÈüµÀ£¬ÊÇCVPR 2024×Ô¶¯¼ÝÊ»¹ú¼ÊÌôÕ½Èü×îÊܹØ×¢µÄÈüµÀ£¬¾Û½¹¸ÐÖªÈÎÎñ£¬ÎüÒýÁËÈ«Çò17¸ö¹ú¼ÒºÍµØÇø£¬90ÓàÖ§¶¥¼âAIÍŶӲÎÓëÌôÕ½¡£±ÈÈüÌṩÁË»ùÓÚ nuScenes Êý¾Ý¼¯µÄ´ó¹æÄ£Õ¼ÓÃÕ¤¸ñÊý¾ÝÓëÆÀ²â±ê×¼, ÒªÇó²ÎÈü¶ÓÎéÀûÓÃÏà»úͼÏñÐÅÏ¢¶ÔÕ¤¸ñ»¯Èýά¿Õ¼äµÄÕ¼¾ÝÇé¿ö(Occupancy)ºÍÔ˶¯(Flow)½øÐÐÔ¤²â£¬ÒÔ´ËÀ´ÆÀ¹À¸Ð֪ϵͳ¶Ô¸ß¶È¶¯Ì¬¼°²»¹æÔò¼ÝÊ»³¡¾°µÄ±íʾÄÜÁ¦¡£

Õ¼¾ÝÕ¤¸ñ Occupancy£ºÌôÕ½¸ü¾«Ï¸µÄ»·¾³¸ÐÖªÓëÔ¤²â

µÀ·²¼¾ÖµÄ¸´ÔÓÐÔ¡¢½»Í¨¹¤¾ßµÄ¶àÑùÐÔÒÔ¼°ÐÐÈËÁ÷Á¿µÄÃܼ¯ÐÔ£¬Êǵ±Ç°³ÇÊеÀ·½»Í¨µÄÏÖ×´£¬Ò²ÊÇ×Ô¶¯¼ÝÊ»ÁìÓòÃæÁÙµÄÏÖʵÌôÕ½¡£ÎªÁËÓ¦¶ÔÕâÒ»ÌôÕ½£¬ÓÐЧµÄÕϰ­Îïʶ±ðºÍ±ÜÕϲßÂÔ£¬ÒÔ¼°¶ÔÈýά»·¾³µÄ¸ÐÖªºÍÀí½â¾Í±äµÃÖÁ¹ØÖØÒª¡£´«Í³µÄÈýάÎïÌå¼ì²â·½·¨Í¨³£Ê¹Óñ߽ç¿òÀ´±íʾÎïÌåµÄλÖúʹóС£¬µ«¶ÔÓÚ¼¸ºÎÐÎ×´¸´ÔÓµÄÎïÌ壬ÕâÖÖ·½·¨ÍùÍùÎÞ·¨×¼È·ÃèÊöÆäÐÎ×´ÌØÕ÷£¬Í¬Ê±Ò²»áºöÂÔ¶Ô±³¾°ÔªËصĸÐÖª¡£Òò´Ë£¬»ùÓÚÈýά±ß½ç¿òµÄ´«Í³¸ÐÖª·½·¨ÒѾ­ÎÞ·¨Âú×㸴ÔÓµÀ·»·¾³Ïµľ«×¼¸ÐÖªºÍÔ¤²âÐèÇó¡£

ͼ½â£ºÕë¶ÔÍÚ³µÖеÄÁ¦±Û£¬3DÄ¿±ê¼ì²âËã·¨Ö»Äܸø³öÍÚ³µÕûÌåµÄÂÖÀª¿ò£¨×󣩣¬µ«Õ¼¾ÝÕ¤¸ñÍøÂçÈ´¿ÉÒÔ¸ü¾«×¼µØÃèÊöÍÚ³µ¾ßÌåµÄ¼¸ºÎÐÎ×´ÕâÀàϸ½ÚÐÅÏ¢£¨ÓÒ£©

ͼ½â£ºÕë¶ÔÍÚ³µÖеÄÁ¦±Û£¬3DÄ¿±ê¼ì²âËã·¨Ö»Äܸø³öÍÚ³µÕûÌåµÄÂÖÀª¿ò£¨×󣩣¬µ«Õ¼¾ÝÕ¤¸ñÍøÂçÈ´¿ÉÒÔ¸ü¾«×¼µØÃèÊöÍÚ³µ¾ßÌåµÄ¼¸ºÎÐÎ×´ÕâÀàϸ½ÚÐÅÏ¢£¨ÓÒ£©

Occupancy Networks£¨Õ¼¾ÝÕ¤¸ñÍøÂ磩 ×÷ΪһÖÖȫеÄ×Ô¶¯¼ÝÊ»¸ÐÖªËã·¨£¬Í¨¹ý»ñÈ¡Á¢ÌåµÄÕ¤¸ñÕ¼¾ÝÐÅÏ¢£¬Ê¹ÏµÍ³Äܹ»ÔÚÈýά¿Õ¼äÖÐÈ·¶¨ÎïÌåµÄλÖúÍÐÎ×´£¬½ø¶øÓÐЧʶ±ðºÍ´¦ÀíÄÇЩδ±»Ã÷È·±ê×¢»òÐÎ×´¸´ÔÓµÄÕϰ­ÎÈçÒìÐγµ¡¢Â·ÉϵÄʯͷ¡¢É¢ÂäµÄÖ½ÏäµÈ¡£ÕâÖÖÕ¼¾ÝÕ¤¸ñÍøÂçʹµÃ×Ô¶¯¼ÝʻϵͳÄܹ»¸ü׼ȷµØÀí½âÖÜΧµÄ»·¾³£¬²»½öÄÜʶ±ðÎïÌ壬»¹ÄÜÇø·Ö¾²Ì¬ºÍ¶¯Ì¬ÎïÌå¡£²¢ÒԽϸߵķֱæÂʺ;«¶È±íʾÈýά»·¾³£¬¶ÔÌáÉý×Ô¶¯¼ÝʻϵͳÔÚ¸´ÔÓ³¡¾°Ïµİ²È«ÐÔ¡¢¾«¶ÈºÍ¿É¿¿ÐÔÖÁ¹ØÖØÒª¡£

È«ÃæÌáÉý£¡48.9%µÄ¾ø¼ÑÐÔÄܱíÏÖ£¬´´±¾ÈüµÀ×î¸ß³É¼¨

ÔÚÕ¼¾ÝÕ¤¸ñºÍÔ˶¯¹À¼Æ(Occupancy & Flow)ÈüµÀÖУ¬¸ÃAIÍŶÓËùÌá½»µÄ¡°F-OCC¡±Ë㷨ģÐÍ£¬Æ¾½èÏȽøµÄÄ£ÐͽṹÉè¼Æ¡¢Êý¾Ý´¦ÀíÄÜÁ¦ºÍËã×ÓÓÅ»¯ÄÜÁ¦£¬ÊµÏÖÁ˸ÃÈüµÀ×îǿģÐÍÐÔÄÜ£¬ÔÚRayIoU£¨»ùÓÚͶÉä¹âÏߵķ½Ê½ÆÀ¹ÀÕ¤¸ñµÄÕ¼ÓÃÇé¿ö£©¼°mAVE£¨Æ½¾ùËÙ¶ÈÎó²î£©Á½¸öÆÀ²âÖ¸±êÖоù»ñµÃ×î¸ß³É¼¨¡£

ÕýÉÏ·½£ºÊäÈëµÄ»·ÐÎÏà»úͼÏñ£»×óÏ£ºOccupancyÔ¤²âÕæÖµ£»ÓÒÏ£ºFlowÔ¤²âÕæÖµ

ÕýÉÏ·½£ºÊäÈëµÄ»·ÐÎÏà»úͼÏñ£»×óÏ£ºOccupancyÔ¤²âÕæÖµ£»ÓÒÏ£ºFlowÔ¤²âÕæÖµ

¸ü¼ò½à¸ßЧµÄÄ£Ðͼܹ¹£¬ÊµÏÖÔËËãЧÂÊÓë¼ì²âÐÔÄÜË«Í»ÆÆ

Ê×ÏÈ£¬Ä£ÐÍÕûÌåÑ¡Ôñ»ùÓÚǰÏòͶӰµÄ¸ÐÖª¼Ü¹¹£¬²¢²ÉÓøßЧÇÒÐÔÄÜÁ¼ºÃµÄFlashInternImageÄ£ÐÍ¡£Í¬Ê±£¬Í¨¹ý¶ÔÕûÌåÁ÷³Ì½øÐг¬²Îµ÷ÓÅ¡¢Ëã×Ó¼ÓËÙµÈÓÅ»¯£¬ÔÚÕ¼¾ÝÕ¤¸ñ(Occupancy)ºÍÔ˶¯¹À¼Æ(Flow)¾ù»ñµÃ×î¸ß·ÖµÄͬʱ£¬ÌáÉýÁËÄ£Ð͵ÄÔËËãЧÂÊ£¬¼Ó¿ìÁËÄ£Ð͵ü´úÓëÍÆÀíËÙ¶È¡£ÔÚʵ¼ÊÓ¦Óó¡¾°ÖУ¬ÕâÖָĽøÊ¹µÃÄ£ÐÍÄܹ»¸ü¿ìËÙ¡¢¸ßЧµØ´¦Àí´ó¹æÄ£3DÌåËØÊý¾Ý£¬Ê¹µÃ×Ô¶¯¼ÝÊ»³µÁ¾ÄܸüºÃµØÀí½â»·¾³£¬½ø¶øÌáÉý¾ö²ßµÄ׼ȷ¶ÈºÍʵʱÐÔ¡£

F-OCCË㷨ģÐͼܹ¹Í¼

F-OCCË㷨ģÐͼܹ¹Í¼

¸üÇ¿´óÍêÉÆµÄÊý¾Ý´¦Àí£¬È«ÃæÌáÉýÄ£Ðͼì²âÄÜÁ¦

ÔÚÊý¾Ý´¦Àí·½Ãæ£¬±ÈÈüÌṩµÄÌåËØ(Voxel)±êÇ©°üº¬ÁË´óÁ¿ÔÚͼÏñÖÐÎÞ·¨¹Û²âµ½µÄµã£¬ÀýÈç±»ÎïÌåÕÚµ²µÄÌåËØºÍÎïÌåÄÚ²¿²»¿É¼ûµÄÌåËØ£¬ÕâЩ±êÇ©ÔÚѵÁ·¹ý³ÌÖлá¶Ô»ùÓÚͼÏñÊý¾ÝµÄÔ¤²âÍøÂçѵÁ·²úÉú¸ÉÈÅ¡£ÔÚѵÁ·Êý¾ÝÖУ¬¸ÃAIÍŶÓͨ¹ýÄ£ÄâLiDAR¹âÊøµÄ·½·¨£¬Éú³É¿ÉÊÓ»¯ÑÚÂ룬ÌáÉýÁËÄ£Ð͵ÄÔ¤²â¾«¶È£»ÁíÒ»·½Ã棬ͨ¹ýÒýÈë¸ÐÖª·¶Î§±ßÔµµÄÌåËØµã²ÎÓëѵÁ·£¬ÓÐЧ½â¾ö³öÏÖÔÚ¸ÐÖª±ßÔµÇøÓòµÄÎó¼ìÎÊÌ⣬½«Ä£Ð͵ÄÕûÌå¼ì²âÐÔÄÜÌáÉý11%¡£

¸ü¾«Ï¸µÄ3DÌåËØ±àÂ룬ģÐÍÕ¼¾ÝÔ¤²âÄÜÁ¦ÌáÉý³¬5%

ÔÚ3DÌåËØÌØÕ÷±àÂëÄ£¿éÖУ¬¸ÃËã·¨ÍŶӽ«¾ßÓнϴó¸ÐÖª·¶Î§ºÍ±àÂëÄÜÁ¦µÄ¿ÉÐαä¾í»ý²Ù×÷Ó¦ÓÃÓÚ3DÌåËØÊý¾Ý£¬ÒÔÌáÉý3DÌØÕ÷µÄ±íʾÄÜÁ¦¡£Í¨¹ýʹÓÃCUDA¶Ô¿ÉÐαä3D¾í»ý(DCN3D)½øÐÐʵÏÖÓëÓÅ»¯£¬´ó·ùÌáÉýÁËÄ£Ð͵ÄÔËËãËÙ¶È£¬²¢ÓÐЧ½µµÍÁËÏÔ´æÏûºÄ¡£Í¨¹ýDCN3DÌæ´ú´«Í³3D¾í»ý£¬Ä£ÐÍÕûÌåÕ¼¾ÝÔ¤²âÄÜÁ¦ÌáÉý³¬5%¡£

»ùÓÚOCC 3D¿Õ¼ä¸ÐÖªËã·¨µÄ´´Ð£¬ ¡°F-OCC¡±Ë㷨ģÐͳɹ¦µÇ¶¥Õ¼¾ÝÕ¤¸ñºÍÔ˶¯¹À¼ÆÈÎÎñ(Occupancy & Flow)°ñµ¥£¬ÒÔ48.9%µÄ³öÉ«³É¼¨´´ÔìÁ˱¾ÈüµÀµÄ×î¸ß³É¼¨£¬ÎªÌ½Ë÷¸ü¸ß¼¶±ðµÄ×Ô¶¯¼ÝÊ»¼¼ÊõÌṩÁËÓÐÁ¦µÄÖ§³ÅÓë¾­Ñ顣δÀ´£¬PGµç¾ºÐÅÏ¢Ëã·¨ÍŶӽ«¼ùÐжà½Ç¶ÈÇÐÈ룬·¢»ÓËã·¨¡¢ËãÁ¦ÈںϵÄAIȫջÓÅ»¯ÄÜÁ¦£¬Íƶ¯×Ô¶¯¼ÝÊ»ÁìÓòµÄ¼¼Êõ´´Ð·¢Õ¹¡£

±¸×¢£ºÎÄÄÚËùÉæÊõÓï½âÊÍÈçÏÂ

 Occupancy£ºÔÚ×Ô¶¯¼ÝÊ»ÁìÓò£¬Í¨³£³ÆÎª¡°Õ¼¾ÝÕ¤¸ñ¡±»ò¡°Õ¼ÓÃÕ¤¸ñ¡±£¬ÆäÊÇÒ»ÖÖ3DÓïÒåÕ¼ÓøÐÖª·½·¨£¬Í¨¹ýÉú³É³µÁ¾ÖÜΧ»·¾³µÄÈýάռÓÃÍø¸ñ£¬Îª×Ô¶¯¼ÝÊ»³µÁ¾ÌṩÕϰ­Îï¼ì²â¡¢Â·¾¶¹æ»®ºÍ³µÁ¾¿ØÖƵȹؼü¹¦ÄÜ£»

RayIoU£ºÊÇָͨ¹ý¹âÏßͶÉäµÄ·½Ê½ÆÀ¹ÀÕ¼¾ÝÍø¸ñµÄÕ¼ÓÃÇé¿ö(Ray-based Intersection over Union)£¬RayIoU¿ÉÒÔÓÃÀ´ºâÁ¿Ô¤²âµÄÕ¼¾ÝÍø¸ñÓëʵ¼ÊÕ¼¾ÝÍø¸ñÖ®¼äµÄÖØµþ³Ì¶È¡£RayIoUÔ½¸ßÒâζ×ÅÔ¤²â׼ȷ¶ÈÔ½¸ß£¬Ä£ÐÍÐÔÄÜÔ½ºÃ£»

mAVE£ºÊÇָƽ¾ùËÙ¶ÈÎó²î(Mean Absolute Velocity Error)£¬ÆäÓÃÓÚÆÀ¹ÀÔ¤²âËÙ¶ÈÓëÕæÊµËÙ¶ÈÖ®¼äµÄƽ¾ùÎó²î¡£mAVEÖµÔ½µÍÒâζ×ÅÔ¤²â½á¹ûÓëÕæÖµÔ½½Ó½ü£»

ÌåËØ(Voxel)£ºÌå»ýÔªËØ(Volume Pixel)µÄ¼ò³ÆÌå»ýÔªËØ(Volume Pixel)µÄ¼ò³Æ£¬ÆäÀàËÆÓÚ¶þάͼÏñÖеÄÏñËØ£¬Êǹ¹³ÉÈýάͼÏñµÄ»ù±¾µ¥Ôª¡£

ÊÛǰ×Éѯ

ÊÛºó·þÎñ

Òâ¼û·´À¡

AIStore

»Øµ½¶¥²¿

»Øµ½¶¥²¿

ÊÕÆð
»Øµ½¶¥²¿ »Øµ½¶¥²¿
ÇëÑ¡Ôñ·þÎñÏîÄ¿
ÊÛǰ×Éѯ
ÊÛºó·þÎñ
·ÃÎÊ AIStore

ɨÂë·ÃÎÊAIStore

¡¾ÍøÕ¾µØÍ¼¡¿¡¾sitemap¡¿