当今已是信息大爆炸的时代,每天都会产生各种各样的数据。而在众多的数据形态中,图像和视频数据占据的比例最大。与图像数据相比,视频数据除了具有与图像一样的空间特性外,如颜色、边缘和纹理等,还具有时序特性,即视频中存在运动信息,这使得视频数据表达的信息更加丰富。
目前部署在政府机关、公共交通、商业建筑和马路等场景的数十亿台摄像机是获取视频数据的最大来源,这些视频数据包含了大量的行人信息、车辆通行记录信息、路口信息。对这些视频数据的采集,可以让城市变得可视化,而对这些视频数据进行分析和处理,可以让城市具有的“智慧”,从而实现智能视频监控,智慧交通等功能。
基于深度学习的视频分析是目前最常用的视频分析方法之一,它将视频转化为实时有价值的数据。但这类方法从数据采集、存储,到深度学习模型的训练、优化、剪裁、量化、推理,是一个非常复杂的过程。同时,基于深度学习的视频分析应用大多部署在边缘端的摄像头上,而从视频中准确地获取洞察,需要高强度计算和复杂的算法。
NVIDIA Metropolis 是一个端到端应用框架,包含了许多功能强大的 AI 工具,像预训练模型、TAO 工具套件、DeepStream SDK、Triton 推理服务器、TensorRT、Video Codec SDK等。借助 NVIDIA Metropolis 应用框架,开发者可以轻松地将常用视频摄像头和传感器,与支持 AI 的视频分析相结合。此外,在部署上,结合 NVIDIA EGX平台,使开发者能够安全地将AI应用部署到从边缘到云端的任何位置。
7月15日14:00,NVIDIA 联合智东西公开课策划的「NVIDIA Metropolis 开发者在线研讨会」将正式直播。NVIDIA 开发者发展经理崔晓楠、NVIDIA 深度学习技术经理吴永亮、NVIDIA 高级软件测试工程师黄泳均、NVIDIA 解决方案架构师刘洋和 NVIDIA 开发者发展经理雷昊五位主讲人将参与,并围绕 NVIDIA Metropolis、NVIDIA TAO Toolkit 及 Jupyter notebook demo、NVIDIA DeepStream、NVIDIA Triton进行主题分享。
主题介绍
NVIDIA 开发者发展经理崔晓楠:使用 NVIDIA Metropolis 加速端到端视觉AI应用的开发部署
NVIDIA Metropolis SDK 提供了一套端到端的应用开发工具和部署框架,从数据中心到边缘端,实现AI应用的高效开发和加速部署,结合 NVIDIA EGX 企业加速计算平台的云边协同能力,为AI应用的稳定运行提供企业级保障。
本次演讲崔晓楠老师将在对 NVIDIA Metropolis 核心组件与近期更新进行介绍之后,重点讲解基于 NVIDIA Metropolis 的端到端AI视觉应用开发流程,并解读基于 EGX 平台如何实现应用的高效云边协同和轻松部署。
崔晓楠老师曾就读于北京航空航天大学,获得软件工程硕士。2018年加入英伟达,负责开发者生态和行业解决方案的落地,聚焦于 Metropolis SDK 和 EGX 企业加速平台在视频分析领域,智能制造及泛交通等行业的应用和推广。
NVIDIA 深度学习技术经理吴永亮&NVIDIA 高级软件测试工程师黄泳均:NVIDIA TAO Toolkit 及 Jupyter notebook demo 解析
NVIDIA TAO Toolkit 是 NVIDIA 推出的用于深度学习模型训练、优化、剪裁、量化、推理为一体的,零编码的工具包。它提供了 Jupyter notebook ,方便用户运行整个流程和展示结果。
本次演讲吴永亮老师和黄泳均老师将重点讲解 NVIDIA TAO Toolkit 在深度学习模型训练、优化、剪裁、量化、推理等方面的优势,并展示基于Jupyter notebook实现YOLOv4、BYOM、Mask-rcnn、3D目标检测、点云检测、ASR。
吴永亮老师本科毕业于上华东理工大学,硕士毕业于上海大学,2010加入英伟达,有7年深度学习经验。黄泳均老师是北京交通大学硕士,聚焦于模型精度和速度的研究,目前主要负责 TAO 论坛问题的分析与解决。
NVIDIA 解决方案架构师刘洋:基于 NVIDIA DeepStream 的智能视频分析系统开发部署
NVIDIA DeepStream SDK 是由 NVIDIA 推出的完整的流媒体处理工具包,用于基于AI技术的音视频等流媒体处理和分析,可实现IVA智能视频分析系统的高效开发和跨平台部署,为IVA系统的开发落地提供强有力的支持和保障。
本次演讲刘洋老师首先将分析IVA智能视频分析系统现状及挑战,之后讲解 NVIDIA DeepStream 6.1 版本特性,最后对 VST SDK 展开解读。
刘洋老师是早稻田大学硕士,现任 NVIDIA 解决方案架构师,主要负责数据中心产品及AI解决方案的设计和落地。
NVIDIA 开发者发展经理雷昊:NVIDIA Triton 在 Jetson 上的部署实践
NVIDIA Triton 推理服务作为一个支持多框架多模型并发的推理服务框架,能大大简化部署,提高效率。
本次演讲雷昊老师将介绍 NVIDIA Triton 重要功能,并重点解读 NVIDIA Triton 在 Jetson 上的部署实践,最后还会进行Demo演示。
雷昊老师研究生毕业于北京大学,软件工程硕士,多年从事视频编解码算法,机器视觉算法相关工作,目前聚焦于 NVIDIA 多媒体框架应用及多媒体框架与AI推理框架集成和优化等领域。
报名方式
对研讨会感兴趣的朋友,可以扫描下方二维码,添加小助手泡泡进行报名。
同时,为了方便大家交流和咨询,针对「NVIDIA Metropolis 开发者在线研讨会」还设置了专属交流群,将会邀请主讲人加入。希望加入交流群与主讲人直接认识和交流的朋友,也可以向泡泡进行申请。