NVIDIA Jetson Xavier这个摄像头监控在哪里可以买得到,叫什么?

本文作者为西安电子科技大学朱虤明现任西安电子科技大学副教授,其研究领域包含、模式识别、计算朱虎明分别于2001年、2004年和2010年获得西安电子科技大学电子工程本科學位及通信与信息系统研究生、博士学位。作者已授权发布本文章

如果把信息科技产业划分为三个时代:PC 时代、移动互联网时代和()時代。目前我们处于移动互联网时代的末期和下一个时代的早期,即以深度算法为核心的AI 时代

深度神经网络模拟人类大脑的工作原理,是近年来领域最令人瞩目的方向2006年深度学习泰斗Geoffrey Hinton提出了基于“逐层训练”和“精调”的两阶段策略,解决了深度神经网络中参数训练嘚难题后学术界和工业界对深度神经网络的研究热情高涨,并逐渐在识别、图像识别、自然语言处理等领域取得突破性进展2012年深度卷積神经网络在ImageNet图像分类竞赛中取得了世界第一,标志着端到端的方法取得了超越手工设计特征的传统方法此后深度神经网络的发展进入叻快车道。2016年基于深度学习的AlphaGo打败了围棋世界冠军李世石同度举办的人工智能知名学术会议CVPR、NIPS、AAAI和ICLR上深度神经网络的主题占主导地位。2017姩以深度神经网络为核心的DeepStack算法在德州扑克游戏中击败了人类职业玩家2018年,人工智能的已经应用于和移动终端中目前,深度神经网络嘚研究向着更深更广的方向前进一方面深度神经网络的理论研究越来越深入,另外一方面如何开发基于深度神经网络的智能系统成为关鍵特别是如何将人工智能技术与边缘计算结合起来。

云计算作为一种计算模式已经渗透进我们日常生活之中但是有很多很多应用场合,由于网络不可用、网络带宽不足和网络延迟大等原因使得基于云计算的模式不能满足需求这就是边缘计算覆盖的领域。中国边缘计算產业联盟(Edge Computing ConsortiumECC)定义的边缘计算是指在靠近物或数据源头的网络边缘侧,融合网络、计算、存储、应用核心能力的开放平台就近提供边緣智能服务,满足业务在敏捷联接、实时业务、数据优化和应用智能等方面的关键需求由此可见要想在边缘计算中部署人工智能应用,必须要有高性能低功耗的平台NVIDIA最近发布的 就是在边缘计算场景中部署人工智能应用的一个利器。

嵌入式Jetson AGX Xavier可以用于自主物流车、、和其他智能机器从而加速制造、物流、零售、服务、农业、医疗等产业的智能化发展,为智能城市的发展做出贡献

256位LPDDR4x,双深度学习加速器 (DLA)引擎NVIDIA视觉加速器引擎,高清视频编解码器Xavier集成的Volta GPU,具体参数如表1所示GPU架构如图1所示。

用户可根据应用需要配置Xavier工作在10W、15W和30W的模式凭借多种工作模式,Jetson AGX Xavier的能效比其前身Jetson TX2高出10倍以上性能超过20倍。

Xavier内置的 Tensor Core支持混合精度计算可以完成以下的融合乘法加法:执行两个4*4 FP16矩陣相乘,将结果添加到4*4 FP16或FP32矩阵中最终输出新的4*4 FP16或FP32矩阵。深度神经网络最耗时的卷积操作在训练和推理时都可以转成上述的矩阵乘法Tensor Core极夶的提高了计算效率。

Xavier具有两个NVIDIA 深度学习加速器(DLA)引擎可以进行高性能的深度神经网络推理计算,其结构如图2所示这每个DLA具有高达5 TOPS INT8戓2.5 TFLOPS FP16计算性能,功耗仅为0.5-1.5WDLA支持加速层,例如卷积、反卷积、激活函数、最小/最大/平均池化、局部响应归一化和全连接层

图2 深度学习加速器(DLA)架构

Xavier主要用于边缘计算的深度神经网络推理,其支持Caffe、Tensorflow、PyTorch等多种深度学习框架导出的模型为进一步提高计算效率,还可以使用对訓练好的模型利用计算图优化、算子融合、量化等方法精简进行优化Xavier通过TensorRT使开发者能充分的利用GPU中的Tensor core和DLA单元等计算模块。

为了测试Xavier的推悝性能我们使用目标检测算法分别在GeForce 840M、Jetson TX2和Xavier三个计算平台上进行测试。Jetson TX2工作在默认的MAXP_CORE_ARM模式Xavier工作在默认的MODE_15W模式。三个计算平台的关键技术參数如表2所述测试实验场景如图3所示。

表2 三个测试平台参数

(作者朱虎明实景拍摄授权NVIDIA发布)

测试时在TensorRT给出的示例代码sampleFasterR-CNN.cpp上找到推理函數,在其前后添加时间函数gettimeofday()计算其推理时间。在不同的硬件平台上重复实验五次取时间平均值结果如表3所示。

从实验结果表可以看出來Xavier在使用TensorRT进行推理时,性能相比Jetson TX2提升了不少需要注意的是Xavier使用的TensorRT版本相比TX2版本在软件架构上有很大的变化,特别是结构性更好另外,由于时间的原因我们没有测试DLA加速的效果。

表3 不同平台目标检测计算性能对比

Xavier平台配备了完整的 AI 开发软件包NVIDIA JetPack SDK包括最新版本的 CUDA、cuDNN 和 TensorRT等軟件。这些开发软件使用起来非常方便再加上Xavier 平台强大的推理计算能力,Xavier必将在制造、物流、零售、服务等边缘计算人工智能应用场景夶放异彩

【钛媒体瞬眼播报】钛媒体11月21日消息NVIDIA今日宣布京东和美团已京东和美团,为其下一代自主配送机器人提供技术支持下一代配送机器人需要在小型封装中实现大规模计算性能。包括多个高分辨率摄像头监控和激光雷达等的各种传感器必须感知周围世界而Jetson AGX Xavier适用于此类场景 ,其具有高性能和高能效能够實时处理所有这些计算任务,让配送机器人能够安全地自主执行操作

更多精彩内容,关注钛媒体微信号(ID:taimeiti)或者下载钛媒体App

2018年11月21日NVIDIA在苏州举办了GTC China大会。四方赶来的与会者对这场在中国举办的技术大会倍加期待希望黄仁勋在这场技术盛会上能为中国市场带来新鲜劲爆的消息。

10点整一身职業皮夹克装的黄教主准时登上了演讲台,其强大的个人魅力瞬间引来了全场的欢呼和掌声

RTX系列显卡demo:游戏画面表现力达到新高度

作为一镓以高性能计算著称的GPU企业,黄仁勋首先介绍了其全新RTX系列图形处理器的强大能力

黄仁勋在现场宣布与网易建立技术合作,其网络游戏《逆水寒》将成为国内首款应用实时光线追踪技术的游戏

现场还实时演示了《逆水寒》的全新技术demo,依托RTX显卡的全新技术和强大性能遊戏的画面表现力达到了一个新高度。在开启RTX之后游戏的光影的渲染有了脱胎换骨的飞跃,湖面的波光、金属的反射都处理的更加真实虚拟的世界变得更加鲜活。

除了实时光线追踪《逆水寒》也将同时支持基于AI的DLSS高性能抗锯齿技术,黄仁勋表示DLSS可带来1.8倍性能提升

我要回帖

更多关于 摄像头 的文章

 

随机推荐