IDF16:解决智慧城市交通视频监控大数据分析难题
监控产品供应商和解决方案服务商大华技术股份有限公司作为英特尔在智慧交通领域的重要合作伙伴,在IDF16上接受媒体专访,介绍了双方共同打造的端到端智慧交通大数据解决方案的技术细节与最新实践成果。
英特尔与大华的合作主要针对在交通视频监控、分析领域所面临的困境,英特尔向大华提供了基于英特尔架构的低功耗高性能的嵌入式设备与数据中心全系统的硬件参考平台。
在大数据技术的应用方面,英特尔也针对交通业务的特性与Spark等开源大数据技术的特点,选用Kafka、Spark、SparkStreaming、HBase 等开源大数据技术,并在英特尔构架上针对以上开源技术做了大量优化和功能扩充。
浙江大华副总兼大数据研究院院长许焰
据了解,大华与英特尔的合作是最为广泛的。涉及服务器、存储、大数据、流处理、云部署等端到端,几乎涵盖了所有英特尔的技术支持。
随着智慧交通的迅猛发展,传统的将数据的采集和存储作为前端任务,将数据的分析作为后端任务的交通端到端系统不仅无法满足跨域关联分析和价值深度挖掘的需求,非结构化数据所占比重的快速上升也对原有系统网络传输和后端处理能力造成很大的压力。
据浙江大华副总兼大数据研究院院长许焰介绍。目前,多数公安治安监控是没有智能分析功能的,只是将视频存储下来。交通处罚的监控是有前端智能的。环保水利林业的监控大部分也没有智能功能。
那么,这些存储下来视频到底怎么用?许焰说,现在的做法是先将视频数据存下来,需要分析的时候,用Spark技术就能立即分析,主要是面向后端的分析,如果做实时分析成本太高。
事实上,大华的需求与英特尔SSG部门所能提供的服务不谋而合。英特尔马子雅介绍,他们的主要工作分为三个方面:1、大数据在英特尔硬件平台上的优化;2、开源社区合作;3、分析应用合作,致力于分析应用如何在英特尔平台上跑得更好。在开源社区方面,英特尔绝不停留在Hadoop生态系统,最流行的数据运算Spark和以Spark为基础的分析应用已经在英特尔占据重要地位,英特尔Spark代码贡献率位居全球第三。
大华许焰也对英特尔SSG工作表示认可,他说:“通过与英特尔在Spark开源项目上的合作开发与优化,我们推出的端到端视频分析解决方案能够成功解决海量视频图像数据的内容识别和海量交通数据分析研判等业界难题。目前,在国内已有多个每天处理百万级以上过车数据的成果,运行效果获得高度认可。”