华为云AI视频技术白皮书

华为云AI视频 技术白皮书引 言 / 01AI 与视频的碰撞 / 052.1 发展趋势 ........................................................................................................................ 052.2 典型场景 ........................................................................................................................ 07AI 视频介绍 / 093.1 参考架构 ..........................................................................................................................093.2 行业视频管理服务（IVM） ........................................................................................113.3 视频智能分析服务（VIAS） ......................................................................................133.4 盘古CV大模型 ................................................................................................................153.5 盘古视频解译大模型 ...................................................................................................21华为云 AI 视频技术白皮书AI 视频应用案例 / 234.1 华为门店 ..........................................................................................................................234.2 物流 ...................................................................................................................................254.3 铁路 ...................................................................................................................................264.4 矿山 ...................................................................................................................................284.5 电力 ...................................................................................................................................30展望未来，从感知到生成 / 31华为云AI视频技术白皮书0101 | 引 言引 言用摄像机拍摄，记录并播放视频可以回溯到 19 世纪，大家公认的第一部电影是法国影片《工厂的大门》，1895 年由路易斯 • 卢米埃尔摄影。表现当时法国里昂卢米埃尔工厂放工时的情景，片长仅一分多钟。从这以后，摄影技术持续发展，从模拟技术到数字技术，从电影摄像机到家用摄像机，直到电脑，手机等便携终端内置摄像头，摄像已经成为当今社会人们记录信息并传播交流的最重要工具和手段，也是大众百姓所需要和掌握的一项基本生活技能。摄像技术应用也从电影，广播电视发展到生活中的方方面面，包括城市治理、安全防护、工业质检等等。每个城市，每个企业都有大量的摄像机，不断在记录发生的一切。海量的视频数据，在方便大众的生活的同时，也带来了很多管理上的困扰。数据如何有效存储，如何能够感知并记录关键事件，如何能够将屏幕面前的工作人员解放出来或者减轻他们工作的强度，已经成为视频使用者最关心的问题。与此同时，AI 技术虽然起步较晚，但随着其快速的发展，已经在诸多方面与视频技术产生了深度的融合。华为云AI视频技术白皮书02引 言 | 011950 年，艾伦 • 图灵（Alan Turing）在论文《计算机器与智能（Computing Machinery and Intelligence）》中提出了著名的“图灵测试”，给出了判定机器是否有“智能”的试验方法。 1956 年夏，麦卡锡、明斯基等科学家在美国达特茅斯学院开会研讨“如何用机器模拟人的智能”，首次提出“人工智能（Artificial Intelligence，简称 AI）”这一概念，标志着人工智能学科的诞生。人工智能从诞生之初，就希望让机器理解这个世界，将人类从繁琐，重复性的事务中脱离出来。从符号主义、专家系统、神经网络、深度学习、强化学习到预训练大模型，一个又一个技术的突破，让人类看到了通用人工智能的希望。自然而然，用人工智能识别视频数据，甚至生成视频数据成为了技术路线的必然选择。华为公司在视频技术和人工智能技术上都有深厚的积累和丰富的实践，华为云 AI 视频产品正是将 AI 和视频技术相结合的优秀典范。此篇《华为云 AI 视频白皮书》，是我们团队研究和实践经验的总结，希望能够更好地促进产业的发展，让摄像机“看得懂、会说话”。02 | AI 与视频的碰撞华为云AI视频技术白皮书03AI与视频的碰撞没有孤立的技术，融合才能发展。视频技术和 AI 技术虽然起步时间不同，但在发展中却交相辉映，在最需要彼此的时候相遇。如下图所示，人工智能和视频编解码，都经历了漫长的摸索期，并先后于 21 世纪取得突破式发展。深度学习将人工智能带入千行百业的生产流程，H.264 编码技术将视频业务带入移动互联网，成为每个消费者日常的必需品。两条平行发展的技术踩着同样的步点，在视频数据爆发增长，预训练大模型横空出世的时代相遇。AI 和视频的结合是趋势和必然，给所有人，所有行业无限的想象空间和发展潜力。两个超万亿产值的行业相乘，将带来无法估量的产业价值。AI 与视频的碰撞 | 02华为云AI视频技术白皮书04人工智能起步阶段专家系统阶段机器学习 &深度学习阶段大模型 & 通用人工智能使用时间压缩的帧间预测编码DCT 图像压