很可惜 T 。T 您现在还不是作者身份，不能自主发稿哦～
如有投稿需求，请把文章发送到邮箱admin@aa.com，一经录用会有专人和您联系
咨询如何成为春羽作者请联系：躬擐甲胄网小羽毛
在一年一度的市挑数据 AI城市挑战赛中，来自世界各地的战赛数百支参赛队伍在 NVIDIA Omniverse 生成的基于物理学的数据集上测试了他们的 AI 模型。
NVIDIA 为国际计算机视觉与模式识别会议（CVPR）中的构建年度 AI 城市挑战赛提供了有史以来最大的室内合成数据集，帮助研究人员和开发者推进智慧城市和工业自动化解决方案的合成开发工作。
这项挑战赛吸引了来自近 50 个国家的市挑数据 700 多支队伍参赛，参赛者的战赛任务是开发 AI模型，以提高物理环境（如零售和仓库环境）和智能交通系统的构建运营效率。
参赛队伍在由NVIDIA Omniverse生成的合成数据集上测试了模型。NVIDIA Omniverse 是市挑数据一个由应用编程接口（API）和软件开发套件（SDK）组成的平台，能够帮助开发者构建基于通用场景描述（OpenUSD）的战赛应用和工作流。
创建和仿真
大型空间的构建数字孪生
工厂、仓库等大型室内空间每天都会有源源不断的合成人员和小型车辆，并且在未来还将出现自主机器人。市挑数据开发者需要那些能够在复杂的战赛大型环境中观测活动、提高运营效率，构建并把人员安全放在第一位的解决方案。
研究人员正在使用能够感知和理解物理世界的计算机视觉模型来满足这一需求。该方法适用于多摄像头追踪等应用，其可以在特定环境中由一个模型追踪多个实体。
为了确保准确性，模型必须针对各种现实场景，在大型真实的数据集上进行训练，但这些数据的采集过程可能十分困难、耗时且成本高昂。
因此，AI 研究人员开始使用基于物理学的仿真（例如物理世界的数字孪生等），来加强 AI 仿真和训练。此类虚拟环境有助于生成用于训练 AI 模型的合成数据，同时，仿真也是一种既能在安全环境中运行多种“假设”场景，又能解决隐私和 AI 偏见问题的方式。
创建合成数据能够获得大量可扩展和可扩充的数据，这对于 AI 训练十分重要。团队可以改变照明、物体位置、纹理、颜色等诸多参数，来生成一个多样化的训练数据集。
为 AI 城市挑战赛
构建合成数据集
今年的 AI 城市挑战赛由五项计算机视觉比赛组成，涵盖了交通管理、工作者安全等领域。
NVIDIA 为第一项比赛——“多摄像头人员追踪”提供了数据集。这项比赛的参与度最高，共有 400 多个队伍参赛。赛事使用了一个基准数据集和一个同类中最大的室内合成数据集（包含 212 小时每秒 30 帧的 1080p 视频，涵盖 6 个虚拟环境中的 90 个场景，这些场景包括仓库、零售店和医院等）。
这些场景均在 Omniverse 中创建而成，仿真了近 1000 台摄像机，并使用了约 2500 个数字人角色。这项比赛还让研究人员了解到如何根据所需要的结果来生成适当大小和保真度的数据。
这些基准数据使用NVIDIA IsaacSim中的Omniverse Replicator创建而成。NVIDIA Isaac Sim 是一款参考应用，借助它，开发者能够在基于 NVIDIA Omniverse 构建的物理仿真环境中设计、仿真和训练适用于机器人、智能空间或自主机器的 AI。
Omniverse Replicator 是一个用于构建合成数据生成管线的 SDK，它能够自动完成高质量合成数据生成所涉及的许多手动任务，包括域随机化、摄像头放置和校准、角色移动、数据语义标注以及基准测试的基准事实等。共有十家机构和组织在本届 AI 城市挑战赛中与 NVIDIA 合作：
澳大利亚国立大学（澳大利亚）
阿联酋移动研究中心（阿联酋）
印度理工学院坎普尔分校（印度）
爱荷华州立大学（美国）
约翰霍普金斯大学（美国）
国立阳明交通大学（中国台湾）
圣塔克拉拉大学（美国）
阿联酋大学（阿联酋）
纽约州立大学奥尔巴尼分校（美国）
Woven by Toyota（日本）
推动生成式物理 AI 的未来
世界各地的研究人员和企业正在开发由物理 AI 赋能的基础设施自动化系统与机器人，这些模型能够理解指令，并在现实世界中自主执行复杂的任务。
生成式物理 AI 利用强化学习，在仿真环境中通过准确仿真的传感器来感知世界、按照物理定律执行动作，并根据接收到的反馈推理下一组动作。
开发者可以使用开发者 SDK 和 API（例如包含多摄像头追踪参考工作流的NVIDIA Metropolis开发者堆栈等）为工厂、仓库和零售业务添加增强感知功能。最新版本的 NVIDIA Isaac Sim 使开发者能够在实际部署之前，先在基于物理学的虚拟空间中仿真和训练 AI 机器人，从而为机器人工作流提供超强助力。
研究人员和开发者还将基于物理学的高保真仿真与先进 AI 相结合，以弥合仿真训练与实际应用之间的差距。这有助于确保合成训练环境与实际情况相吻合，从而更无缝地实现机器人部署。
NVIDIA 最近发布的NVIDIAOmniverse Cloud Sensor RTX进一步提高了仿真的准确性和规模。这套全新的微服务能够实现物理级精确传感器仿真，从而加速全自主机器的开发工作。
凭借这项技术，工厂、车辆、机器人等自主系统将能够采集到有效感知、适应现实世界，并与之交互所必需的数据。开发者可以使用这些微服务，在逼真的虚拟环境中对传感器的感知能力进行大规模测试，这将大大减少与现实世界测试相关的时间和成本。
Omniverse Cloud Sensor RTX 微服务将于今年晚些时候提供。
展示先进的 AI 研究成果
参赛者们为 AI 城市挑战赛提交了研究论文，一些论文获得了最高排名，其中包括：
用于离线多摄像头人物追踪的重叠抑制聚类：本文介绍了一种追踪方法，包括识别单个摄像头视图中的个体、选择清晰的图像以便于识别、对相似外观进行分组，以及在具有挑战性的情况下帮助辨明身份。
具有几何一致性和状态感知的 Re-ID 校正的强大在线多摄像头人体追踪系统：这项研究提出了一种使用几何和外观数据来提高追踪准确性的新系统，并包括一种调整识别特征以修正追踪错误的机制。
增强在线多摄像头人物追踪的集群自细化：这篇研究论文解决了在线追踪面临的具体挑战，例如劣质数据的存储和身份分配错误。
所有被接受的论文将在 6 月 17 日举行的2024 年 AI 城市挑战赛研讨会上发表： https://cvpr.thecvf.com/virtual/2024/workshop/23656
NVIDIA Research将在 CVPR 2024 上发表 50 多篇论文，介绍生成式物理 AI 的突破，以及在自动驾驶汽车开发和机器人等领域的潜在应用。
使用 NVIDIA Omniverse 平台生成合成数据或环境数字孪生以进行模型仿真、测试和验证的论文包括：
FoundationPose：统一的 6D 姿态估计和新物体跟踪：FoundationPose 是一种用于估计并追踪物体 3D 位置和方向的多功能模型。该模型通过使用少量参考图像或 3D 表示来准确地理解物体的形状。
构建未知铰接物体数字孪生的隐式神经表示：该研究论文介绍了一种根据两个 3D 扫描图像创建物体数字模型的方法，该方法可通过分析活动部件的连接方式和在不同位置之间的移动方式来提高准确性。
BEHAVIOR 视觉套件：通过仿真生成可定制数据集：BEHAVIOR 视觉套件可生成适用于计算机视觉研究的可定制合成数据，使研究人员能够调整照明、物体放置等设置。
本文为作者独立观点，不代表躬擐甲胄网立场，未经允许不得转载。
我们致力于提供一个高质量内容的交流平台。为落实国家互联网信息办公室“依法管网、依法办网、依法上网”的要求，为完善跟帖评论自律管理，为了保护用户创造的内容、维护开放、真实、专业的平台氛围，我们团队将依据本公约中的条款对注册用户和发布在本平台的内容进行管理。平台鼓励用户创作、发布优质内容，同时也将采取必要措施管理违法、侵权或有其他不良影响的网络信息。
一、根据《网络信息内容生态治理规定》《中华人民共和国未成年人保护法》等法律法规，对以下违法、不良信息或存在危害的行为进行处理。
1. 违反法律法规的信息，主要表现为：
1)反对宪法所确定的基本原则；
2)危害国家安全，泄露国家秘密，颠覆国家政权，破坏国家统一，损害国家荣誉和利益；
3)侮辱、滥用英烈形象，歪曲、丑化、亵渎、否定英雄烈士事迹和精神，以侮辱、诽谤或者其他方式侵害英雄烈士的姓名、肖像、名誉、荣誉；
4)宣扬恐怖主义、极端主义或者煽动实施恐怖活动、极端主义活动；
5)煽动民族仇恨、民族歧视，破坏民族团结；
6)破坏国家宗教政策，宣扬邪教和封建迷信；
7)散布谣言，扰乱社会秩序，破坏社会稳定；
8)宣扬淫秽、色情、赌博、暴力、凶杀、恐怖或者教唆犯罪；
9)煽动非法集会、结社、游行、示威、聚众扰乱社会秩序；
10)侮辱或者诽谤他人，侵害他人名誉、隐私和其他合法权益；
11)通过网络以文字、图片、音视频等形式，对未成年人实施侮辱、诽谤、威胁或者恶意损害未成年人形象进行网络欺凌的；
12)危害未成年人身心健康的；
13)含有法律、行政法规禁止的其他内容；
2. 不友善：不尊重用户及其所贡献内容的信息或行为。主要表现为：
1)轻蔑：贬低、轻视他人及其劳动成果；
2)诽谤：捏造、散布虚假事实，损害他人名誉；
3)嘲讽：以比喻、夸张、侮辱性的手法对他人或其行为进行揭露或描述，以此来激怒他人；
4)挑衅：以不友好的方式激怒他人，意图使对方对自己的言论作出回应，蓄意制造事端；
5)羞辱：贬低他人的能力、行为、生理或身份特征，让对方难堪；
6)谩骂：以不文明的语言对他人进行负面评价；
7)歧视：煽动人群歧视、地域歧视等，针对他人的民族、种族、宗教、性取向、性别、年龄、地域、生理特征等身份或者归类的攻击；
8)威胁：许诺以不良的后果来迫使他人服从自己的意志；
3. 发布垃圾广告信息：以推广曝光为目的，发布影响用户体验、扰乱本网站秩序的内容，或进行相关行为。主要表现为：
1)多次发布包含售卖产品、提供服务、宣传推广内容的垃圾广告。包括但不限于以下几种形式：
2)单个帐号多次发布包含垃圾广告的内容；
3)多个广告帐号互相配合发布、传播包含垃圾广告的内容；
4)多次发布包含欺骗性外链的内容，如未注明的淘宝客链接、跳转网站等，诱骗用户点击链接
5)发布大量包含推广链接、产品、品牌等内容获取搜索引擎中的不正当曝光；
6)购买或出售帐号之间虚假地互动，发布干扰网站秩序的推广内容及相关交易。
7)发布包含欺骗性的恶意营销内容，如通过伪造经历、冒充他人等方式进行恶意营销；
8)使用特殊符号、图片等方式规避垃圾广告内容审核的广告内容。
4. 色情低俗信息，主要表现为：
1)包含自己或他人性经验的细节描述或露骨的感受描述；
2)涉及色情段子、两性笑话的低俗内容；
3)配图、头图中包含庸俗或挑逗性图片的内容；
4)带有性暗示、性挑逗等易使人产生性联想；
5)展现血腥、惊悚、残忍等致人身心不适；
6)炒作绯闻、丑闻、劣迹等；
7)宣扬低俗、庸俗、媚俗内容。
5. 不实信息，主要表现为：
1)可能存在事实性错误或者造谣等内容；
2)存在事实夸大、伪造虚假经历等误导他人的内容；
3)伪造身份、冒充他人，通过头像、用户名等个人信息暗示自己具有特定身份，或与特定机构或个人存在关联。
6. 传播封建迷信，主要表现为：
1)找人算命、测字、占卜、解梦、化解厄运、使用迷信方式治病；
2)求推荐算命看相大师；
3)针对具体风水等问题进行求助或咨询；
4)问自己或他人的八字、六爻、星盘、手相、面相、五行缺失，包括通过占卜方法问婚姻、前程、运势，东西宠物丢了能不能找回、取名改名等；
7. 文章标题党，主要表现为：
1)以各种夸张、猎奇、不合常理的表现手法等行为来诱导用户；
2)内容与标题之间存在严重不实或者原意扭曲；
3)使用夸张标题，内容与标题严重不符的。
8.「饭圈」乱象行为，主要表现为：
1)诱导未成年人应援集资、高额消费、投票打榜
2)粉丝互撕谩骂、拉踩引战、造谣攻击、人肉搜索、侵犯隐私
3)鼓动「饭圈」粉丝攀比炫富、奢靡享乐等行为
4)以号召粉丝、雇用网络水军、「养号」形式刷量控评等行为
5)通过「蹭热点」、制造话题等形式干扰舆论，影响传播秩序
9. 其他危害行为或内容，主要表现为：
1)可能引发未成年人模仿不安全行为和违反社会公德行为、诱导未成年人不良嗜好影响未成年人身心健康的；
2)不当评述自然灾害、重大事故等灾难的；
3)美化、粉饰侵略战争行为的；
4)法律、行政法规禁止，或可能对网络生态造成不良影响的其他内容。
二、违规处罚
本网站通过主动发现和接受用户举报两种方式收集违规行为信息。所有有意的降低内容质量、伤害平台氛围及欺凌未成年人或危害未成年人身心健康的行为都是不能容忍的。
当一个用户发布违规内容时，本网站将依据相关用户违规情节严重程度，对帐号进行禁言 1 天、7 天、15 天直至永久禁言或封停账号的处罚。当涉及欺凌未成年人、危害未成年人身心健康、通过作弊手段注册、使用帐号，或者滥用多个帐号发布违规内容时，本网站将加重处罚。
三、申诉
随着平台管理经验的不断丰富，本网站出于维护本网站氛围和秩序的目的，将不断完善本公约。
如果本网站用户对本网站基于本公约规定做出的处理有异议，可以通过「建议反馈」功能向本网站进行反馈。
(规则的最终解释权归属本网站所有)
评论
