华为徐汉秋：视频智能分析在智能交通领域的应用

　　谢谢主办方，大家好，今天我分享的主体是"视频智能分析在智能交通领域的应用"。

　　随着城市车辆保有量的不断增加，城市的交通管理将面临严峻的挑战，我们认为在以下三个方面智能交通管理系统会面临挑战：首先是每个城市都有数以万计的摄像头，捕捉的视频数据到数据中心进行存储，这些数据在指挥中心接到电视墙上面，人工查看，这个效率非常差，通过人工监管这些数据，发现路面的紧急状况，这种概率基本上为零，所以我们目前道路上的摄像头，虽然它在工作，但是它不知道路面上到底发生了什么事情。第二，目前视频监控能做的一些分析是非常简单的，比如闯红灯、逆行等抓拍，其它更多的行为是没办法识别的，比如说在红绿灯路口停车后倒车，车上掉落垃圾障碍物等，都不会被抓拍，所以大量的违章行为没有被抓拍到，没有被获取。第三，反应缓慢，很多时候车辆在道路上抛锚了，上方正好有一个摄像头，车辆抛锚造成道路的拥堵，但是系统不知道，还需要车主或行人拿出电话来报警。所以在这种情况下，我们的城市智能交通系统面临严峻的挑战。

　　我们需要一个什么样的系统呢？这个是《指环王》里的魔眼，在影片里大家都没有看到这个人的真实面目，但是他通过他的眼睛可以感知外面的世界，指挥千军万马。我希望智能交通系统也能感知路面发生的一切，而不是说在路上可以看到摄像头，但是感觉摄像头看不到我。

　　我们认为一个好的智能交通系统应该做到三个能力，一个是无处不在的感知，路面上违章的行为是能被智能分析、被智能抓拍的，这是不需要人为干预的，只要在路面上违章了，你的车牌就被记录，你就会受到相应的处罚。其次路面交通流量的采集要能够实时提供给交通的管理者，管理者要知道目前城市的路面情况。第二，要做到城市有效的管控，系统采集了城市的道路交通的流量之后，要做出一个平衡，实施交通诱导，诱导驾驶员避开一些高峰、拥堵路段，走其它更好的路段。第三，要能做到一个高效的共享，要将收集到的数据，包括交通事故数据、交通流量数据及时分享给广电部门，发布给一些电视台，或者发布给一些广播电台，也能及时共享给交通、公安，让他们进行及时的处理。还能共享给一些消防或者急救部门，以实现一个多警种的协同作战，一个高效的协同共享。

　　我们认为全网智能视频分析是未来的发展方向，全网智能讲的是从前端摄像头采集数据进行一个结构化的数据处理，到智能的视频存储云，到后台的智能分析云，全网每个单元都是智能的。比如说前端的智能视频采集，在采集视频的时候，已经对视频数据进行了结构化的处理，所抓拍的车辆信息，对车辆的车牌号码、车辆的颜色、车辆的车速，甚至车辆车标、车的型号都可以进行结构化的处理，把这些标签打到图象里面去。当某一台存储的结点坏了，摄像机会自动将图像分担到其它的结点，每台服务器里面的每一块磁盘损坏之后，都可以自动切换，保证视频数据的不丢失。后面就是智能分析云，现在智能前端的成本还是很高，一个城市部署的智能摄像机的比例不超过10%，部署在小区里面、普通街道上的摄像机90%都不具备智能的功能，它只能做一些数据的抓取。智能分析云可以实时或者非实时的把这些视频数据采集过来，进行一个结构化的处理，分析出里面的车辆的型号、车牌号、车速，人脸、衣服的颜色，还有行为轨迹，都可以做出一些分析。全部网元共同参与的全时段全维度的视频感知和智能分析，将会大幅提升视频分析及应用效率。

　　我详细说一下前端的智能，就是给摄像机装上一个智慧的大脑。现在的智能摄像机不仅仅是捕捉视频这么简单，它在捕捉源数据的时候会对数据进行结构化的处理，对人的人脸、性别、颜色都会识别出来，打入标签，然后传送到视频存储平台，对车牌、车型、车标、物品的大小，对事件我们可以进行绊线、逆行、计数、遗留、轨迹、时间进行分析。（PPT）右边是一些应用的情况，第一个是逆行的抓取，第二个是绊线，当一个嫌疑人闯入一个区域的时候，系统会自动告警，然后采取紧急的措施，以避免事故发生。第三个讲的是物品的保全，某个区域划了一个监控区域，如果这里面的物品发生了移动，系统自动告警。第四个是区域的徘徊，如果超过一定的时间，智能摄像机也会进行告警。第五个是物品的遗留，如果有一个物品遗留在这个区域，可能是一个爆炸品，视频可以马上发现。

　　刚刚说的是前端的智能，下面说一下后端的智能分析云。现在部分前端摄像机都是普通的视频摄像机，它所捕获的大量的数据都是低价值的，都是无效的、杂乱的，这些数据淹没了非常少的一部分有效的数据。大家知道南京的周克华案件，南京警方调了大批的警力看了7天7夜的视频，调出了15秒的有效的视频。因为是普通的摄像机，没有捕捉到有效的信息，能做的只能是按照普通的回放，比如说两倍速的快放，调集了1000多人的精力进行查看，最终调取了15秒的有用数据。而智能云的接入就可以将普通摄像机变成一个智能摄像机。这里讲的是一个虚拟卡口的应用，大家知道卡口是装在城市的主干道路上，对车辆的行为进行抓拍。大部分的摄像机都是普通的摄像机，不具备卡口功能，所以当发生了某个案件的时候，我们往往只能在某一个主要的路口来发现这个车子，一旦离开这个区域就捕捉不到了。智能云的分析，可以进行实时的分析，我们可以把嫌疑车辆的颜色，车速、车牌都抓取出来。虚拟卡口可以实现大范围的布控，提升破案效率。智能分析云的引入，可以将普通的摄像机都变成卡口。其次它是不需要挖沟埋线的，任何第三方拍摄的数据都可以被拿来做分析，进行数据的挖掘。另外，还可以灵活部署，比如说在某个场馆最近会进行一个重大的赛事，之前安装的都是普通的摄像机，这时候可以把这些摄像机捕获的信息传到智能分析平台，这时候所有的摄像机都可以当智能摄像机。当这个比赛结束，就可以把这个部署撤回，再把资源调到其它的地方去。另外，虚拟卡口所实现的功能也比一般的卡口更加丰富，除了可以做车辆实时的布控，特定的目标车辆追踪之外，还可以做到人脸的布控、历史录像的布控。比如说追查到一辆车子是三天前丢失的，可以把三天前道路上拍摄的普通视频进行分析，把这里面的所有的车辆数据信息抓出来，这样对案件的破案，或者对交通管理都是非常有用的。

　　接下来，我讲到是智能分析云的另外两个作用，提供两个功能，一个是视频的摘要和检索，这里举了两个例子，（PPT）左边这个图，在一个道路上，从10点半到12点半，经过了5个人，正常情况下我们要追查这些信息要花两个小时，即使你用4倍速的回放，也要15分钟的时间才能把这5个人抓取出来。但是通过我们的视频摘要数据，可以在5秒钟把这5个人的信息抓取出来。第二是一个路口，一辆嫌疑车辆，我们知道在某一个小时内有一辆嫌疑车辆经过，我们通过传统的方式，通过4倍速的方式，也要15分钟。我们在这里面通过视频摘要的方式，可以把一小时的视频浓缩在两秒钟抓取出来。右边讲的是检索功能，大家检索可能每天都在用，上网使用搜索引擎，因为互联网上有海量的信息，如果那个信息不是你想用的，那就是无用的。同样，我们对视频摄像机所抓取的大量的数据，如果你没有搜索引擎，那也是无效的。目前华为的智能分析平台支持按照方向来检索，支持按照运动轨迹，按照位置检索，还有人车分类检索，可以按照人的减色、车的颜色，还有事件录像的检索。举个例子，某个区域发生了一个案件，我们知道嫌疑人或者嫌疑车辆是红色的，这个时候可以把当地所有的普通摄像头拍的视频数据对接到智能分析平台，平台会把所有穿红色衣服的或者红色车辆的数据在几小时内抓取完，这时候对你的破案或者对你的查证是有大大的好处的。我们凭借视频检索的技术，可以从海量的视频数据里面把有用的信息以最短的时间抓取到。

　　因此，在未来的智能交通的社会，行车的车辆的车速、车牌，还有车辆的颜色，甚至车标、车的型号都将被这个系统所实时的感知，行人的人脸，人的一些行为，比如说他闯红灯，比如说行人闯入了敏感区域，行人闯入了高速公路，这些都会被实时的告警。道路上的行人或者行车，他的违法行为都会被实时的触发告警，被取缔。所以在未来得智能交通的社会，我们的交通应该是更加安全的，我们相信随着更多视频智能分析技术在智能交通领域的应用，整个城市的智能交通管理将更加便捷、高效，我们百姓的出行也将更加和谐、便捷和安全。

　　我的分享就到这里，谢谢。

　　本文为智能交通世界网原创，转载请注明出处，更多内容请访问智能交通世界网（www.its114.com）