失眠网,内容丰富有趣,生活中的好帮手!
失眠网 > 今年CVPR 我们填补了3D场景布局数据集空白 并向全世界开源!

今年CVPR 我们填补了3D场景布局数据集空白 并向全世界开源!

时间:2022-03-05 00:10:45

相关推荐

今年CVPR 我们填补了3D场景布局数据集空白 并向全世界开源!

点击上方“3D视觉工坊”,选择“星标”

干货第一时间送达

6月14日,"Learning 3D Generative Model" Workshop CVPR 召开。

来自名校各界的3D视觉和图形学学者举办了一场以“3D建模”为主题的线上 workshop,阿里巴巴淘系技术部资深算法专家乐田在会上分享了3D场景数据集3D-FRONT(3D Furnished Rooms with layOuts and semaNTics) 的报告,并向全世界开源此份数据集。

计算机视觉的鼻祖之一,Workshop 重量级嘉宾 Jitendra Malik 也远程在线。

以下,是我们关于3D场景数据集3D-FRONT(3D Furnished Rooms with layOuts and semaNTics)的核心内容。

欢迎先观看这个数据集的漫游视频。

3D场景数据迫在眉睫,数据集严重缺乏

想象一下未来,我们用机器人设计一个卧室,即使是放置一个衣柜,机器人也需要考虑房型、角度等许多有关美感的问题。对于这样一个创造性的问题,我们需要大量数据集来指导训练机器人的大脑。

3D与2D场景理解是打造未来AI世界的基础核心的研究课题,且都依赖于大量数据进行来训练相关模型。

然而,当前学界场景数据集严重缺乏,特别是具有高质量布局与室内设计的数据集。这不足以支持和推进数据驱动的高智能化3D场景的相关研究。这是当下学界和业界面临的现实问题。

阿里巴巴作为电商领军,深耕场景化数字营销,创造大量布局与设计数据

阿里巴巴作为世界级的电商互联网巨头,其官方家装家居设计平台——“躺平设计家”积累了海量高质量家居设计方案。

以这些真实家居场景为基础,阿里巴巴淘系技术部结合3D人工智能技术初步打造了场景化数字营销,推出了智能设计搭配服务,并创造了大量精美场景布局与设计数据。

这套 3D-FRONT(3D Furnished Rooms with layOuts and semaNTics)包含10,000真实户型,平均每个户型包含7个场景room。其中,31,734个场景含有人工验证过的精美室内设计信息。

数据集里面涉及的家具来自于阿里巴巴已开源的模型数据集3D-FUTURE(3D FUrniture shapes with TextURE),且都饱含丰富几何与纹理细节。

相比于其他3D场景数据集,3D-FRONT在相关统计数字上远超同类,且在高质量硬装mesh,户型布局,以及精美室内设计上是独一无二的。

此次报告内容受到热烈响应,国外几何圈内诸多知名大学(斯坦福,牛津,马普所等)均表示对数据集的兴趣,并期待使用它做相关话题的学术研究。

阿里巴巴淘系技术部 3D-FRONT 填补学界 3D 场景布局数据空白,这对于推进学术研究与工业落地紧密结合、对于3D视觉和图形学的未来发展有着重大意义。

开源数据集分享

3D-FRONT数据集主页:

/specials/promotion/alibaba-3d-scene-dataset

3D-FUTURE数据集主页:

/specials/promotion/alibaba-3d-future

Learning 3D Generative Models CVPR Workshop:

https://learn3dgen.github.io/

阿里巴巴淘系技术部与英国伦敦大学伯贝克学院Steve Maybank教授(Fellow of the IEEE and a Member of the Academia Europaea,the Koenderink Prize in )、悉尼大学陶大程教授(Fellow of the IEEE, ACM and Australian Academy of Science)等国际知名学者合作,与3月30日正式开源业界首个饱含纹理细节的大型3D家具数据集(3D-FUTURE),共同推动3D家居智能研究。并面向全球3D几何与视觉研究爱好者同步启动第一届阿里巴巴3D人工智能挑战赛暨IJCAI-PRICAI Workshop。3D几何与视觉研究是广受关注的基础研究领域,是建设未来3D智能世界必经之路。

淘系技术部在人工智能国际顶级会议IJCAI-PRICAI举办workshop及竞赛,旨在总结目前最先进的3D几何与视觉技术,启发高质量3D模型理解与重建,并且建立学术研究与工业应用的桥梁。

赛事正在火热进行中,请关注Workshop主页:/specials/promotion/ijcai-alibaba-3d-future-workshop。

编辑|橙子君

出品|阿里巴巴新零售淘系技术

本文仅做学术分享,如有侵权,请联系删文。

下载1

在「3D视觉工坊」公众号后台回复:3D视觉即可下载 3D视觉相关资料干货,涉及相机标定、三维重建、立体视觉、SLAM、深度学习、点云后处理、多视图几何等方向。

下载2

在「3D视觉工坊」公众号后台回复:3D视觉优质源码即可下载包括结构光、标定源码、缺陷检测源码、深度估计与深度补全源码、点云处理相关源码、立体匹配源码、单目、双目3D检测、基于点云的3D检测、6D姿态估计源码汇总等。

下载3

在「3D视觉工坊」公众号后台回复:相机标定即可下载独家相机标定学习课件与视频网址;后台回复:立体匹配即可下载独家立体匹配学习课件与视频网址。

重磅!3DCVer-学术论文写作投稿交流群已成立

扫码添加小助手微信,可申请加入3D视觉工坊-学术论文写作与投稿微信交流群,旨在交流顶会、顶刊、SCI、EI等写作与投稿事宜。

同时也可申请加入我们的细分方向交流群,目前主要有3D视觉CV&深度学习SLAM三维重建点云后处理自动驾驶、CV入门、三维测量、VR/AR、3D人脸识别、医疗影像、缺陷检测、行人重识别、目标跟踪、视觉产品落地、视觉竞赛、车牌识别、硬件选型、学术交流、求职交流等微信群。

一定要备注:研究方向+学校/公司+昵称,例如:”3D视觉+ 上海交大 + 静静“。请按照格式备注,可快速被通过且邀请进群。原创投稿也请联系。

▲长按加微信群或投稿

▲长按关注公众号

3D视觉从入门到精通知识星球:针对3D视觉领域的知识点汇总、入门进阶学习路线、最新paper分享、疑问解答四个方面进行深耕,更有各类大厂的算法工程人员进行技术指导。与此同时,星球将联合知名企业发布3D视觉相关算法开发岗位以及项目对接信息,打造成集技术与就业为一体的铁杆粉丝聚集区,近2000星球成员为创造更好的AI世界共同进步,知识星球入口:

学习3D视觉核心技术,扫描查看介绍,3天内无条件退款

圈里有高质量教程资料、可答疑解惑、助你高效解决问题

觉得有用,麻烦给个赞和在看~

如果觉得《今年CVPR 我们填补了3D场景布局数据集空白 并向全世界开源!》对你有帮助,请点赞、收藏,并留下你的观点哦!

本内容不代表本网观点和政治立场,如有侵犯你的权益请联系我们处理。
网友评论
网友评论仅供其表达个人看法,并不表明网站立场。