摘要:智能视频监控技术在公共安全、交通管理、智慧城市等方面有着广泛的运用前景,需求日益增长。随着摄像头安装的数量越来越多,采集的图像数据量越来越大,靠单台计算机处理已经远远不能满足需求了。分布式计算的兴起与发展为解决大规模的数据处理问题提供了很好的途径。使用一种基于SparkStreaming的视频/图像流处理的测试平台,阐述了平台的构成和工作流程,深入研究各个参数对集群性能的影响,创新性地提出了CPU时间占用率作为性能评估指标,与总的处理时间结合,更为全面反映集群性能和资源利用率。
关键词:spark streaming cpu时间占用率 分布式
单位:复旦大学计算机科学技术学院 上海201203 上海视频技术与系统工程研究中心 上海201203
注:因版权方要求,不能公开全文,如需全文,请咨询杂志社