NB大了，增强现实走进安防行业了！竟然还有智能家居的规划！



增强现实系统故事性功能解说

作者：李欢  
工号：2288 
电话：18938902295
邮箱：lihuan@gosuncn.com

前言：

本文仅适用于2014北京安防展，增强现实展区人员学习使用。本文中有大量的故事及案例，读者能够自行学习并选取使用。

关于文章内有大量的身体动作指引，不用全然遵从。

目的仅是须要通过身体动作吸引听众的注意力。可自由发挥。假设你学习完这些故事后感觉增强现实系统非常强大，让你非常有自信。作为作者，告诉你。以下的文字全是真实的。

• 什么是增强现实

1. （手舞足蹈）你一定看过非常多科幻电影吗吧？眼睛所示一切画面。都有实时的信息数据在画面里面显示。

   比方这个人脸的身份信息。车辆的信息，建筑物的信息等。让你的眼睛在看到画面的同一时候获取到很多其它的数据。这就是增强现实。

2. 对了。你一定听说过GOOGLEGLASS谷歌眼睛吧，戴上之后（做佩戴的动作），能看到画面里面的各种商户的打折信息。事实上它就是一种增强现实的应用。

3. 当然，我们还没有实现科幻片里面那么NB的功能。可是我相信接下来你了解到的一切已经足够让你惊艳了。（气势满满）

1. 物体身份信息显示

1. 画面中车辆行进方向

   （指向画面）如果这是一条公路，上面有车在跑。作为看视频图像的人员，你根本不知道这条路哪边是东哪边是西。也就是说你根本不知道这辆车是往什么方向去。除非你是对当地环境很熟悉的片警，并且一看画面就知道方向。可是绝大部分观看的人员都不知道。这是一个大问题。

2. 画面中行人行进方向

   再举个样例。（指向画面）这里有一排楼。有非常多饭馆。

   假设有一个嫌疑人跑进了当中某一栋楼，看图像的民警能立即知道是哪一栋楼吗？根本不可能。

   假设搞清楚了再去部署抓捕的话。会浪费大量的时间。

   我如今告诉你，如今我摄像机的画面里面就有全部物体的信息。

   比方这栋楼叫什么名字，这家店叫什么名字，这条路叫什么名字是什么方向。

   （打开增强现实开关）这就是增强现实。

   如今你是不是会认为看视频的时候能看到很多其它的信息了？民警办案的效率是不是越来越高了呢？

3. 在工厂中的应用

   这套系统除了在平安城市里面应用，在各行各业中都能够得到非常好的应用。举个样例，富士康的生产线非常的忙碌。工人上厕所的时间都精确到秒钟。我们先无论他是不是血汗工厂，我们来设想一下应用。生产线非常长（用手比划一下），上面站了非常多的工人。如今我用一台增强现实摄像机看着这条线。而且在每个工位上都标上名字。

   监工们，光看着画面就知道谁在岗谁不在岗了。

   你说对吧。

4. 在商场中的应用

   我们再来讲讲室内，比方商场。一般在过道里面都装着半球是吧（作一个手托举安装半球的动作）？那么过道的两边都会有非常多的商户。如今有一个小偷，偷了钱包，向前跑去然后右转进一家商铺了（手势向前向右转）。这个时候你知道他跑进哪家店了吗？肯定不知道。由于眼下的摄像机画面是2D的，是没有深度感的。

   可是假设我们的画面里面清晰的标明了，这是GUCCI，这是PRADA，这是CHANEL。

   你肯定立即就能推断出小偷跑进哪里去了。

5. 在工业中的应用

   除了上述这些应用。增强现实系统在各行各业中都有出色的表现。

   比方说视频画面里面直接就显示出各种仪表读数，第一时间能够发现问题。今天要我全讲给你听，可能讲一天都讲不完。你自己就能够设想出非常多应用了。

6. 故事才刚開始

   如今你大概了解了增强现实系统的样子了。可是你可千万别觉得增强现实系统就是打一堆标签这个样子了。

   如今你了解的东西，是刚刚才開始（微笑）。

1. 信息可选择性开启

1. 传统OSD影响画面

   关于画面上这么多的信息数据，你是否会觉得它们挡住了画面？这个就是跟传统的字符叠加全然不同的地方了（手指指向画面里面OSD叠加的时间和摄像机名）。你看这个时间字符，是内嵌在画面里面的。

   它后面的人，就会被挡住。假设是关键嫌疑人，那也没办法了。看不清。

   如今你别看我的增强系统画面上有这么多的数据信息，挡着了不少地方。没关系。我一个button，就全关掉了。再点一下，就显示出来了！这个数据不是内嵌在视频里面的。而是在视频上面一层。

2. 可依据兴趣显示内容

   当然。不仅仅是能够所有关闭和开启。还能够依据你个人的工作须要。选择性的开启某些信息。或许你仅仅想看楼房的名字，或许你仅仅想看经纬度，或许你仅仅想看仪表数据。

   这些选择性所有都会保存在你的用户配置文件里的。

1. 物体具体信息显示

1. 寻找目击证人

   刚才讲了那么多，仅仅是非常easy的标签名称显示。我们举个样例，（手指指向画面中的某一处）这里发生了一起抢劫案。

   你作为办案民警，你希望能找到目击证人。对吧？你怎么找呢？看着这个路口的画面，周围都是来来往往的人。根本没办法找到一个在场人员的联系方式。

   只是你发现没有，在案发地旁边有一个楼房，顶着一个“工商银行”的标签（展出时可能是某一厂商的名字）。这个标签前面有一个“文档”形状的小图标。表示这个标签是有内容的。

   我们点击这个标签看看（用手去点击标签）。看到没有？这个标签以下还有这么多的丰富内容。

   有具体地址，有图片，有企业联系人。有安保联系人，还有责任派出所以及片区民警的联络电话等。

   这个时候，你点击一下这个电话。就直接拨打出去了。这下就能够了解在案发时，有没有目击证人了。

2. 商场打折信息

   如果这台摄像机是安装在风景区，除了显示漂亮的风景画面以外。还能够看到各种风景的数据，比方历史故事、温湿度、海拔，甚至里面还一些各个商场的商品打折促销数据等等。仅仅有想不到没有做不到。

1. 信息随球机转动精确定位

1. 实时随动

   我们能够想到，在固定的枪机里面实现这些标签很的easy。

   球机行不行呢？当然能够。可是实现难度很的高。每一个标签都拥有一个真实世界里面的3D时空坐标。仅仅有当你画面看见的地方，标签才会显示。并且在你转动球机的时候，标签会跟着转动（现场转动球机）。

2. 精确定位

   为什么刚才说到球机的技术难度较高呢？你想想看，假设我每转动一圈。我的标签就会偏一点，那我转动个几十圈之后。标签都不知道偏到哪里去了，可能已经指到别的楼房上面去了（手指到别的区域）。

   本来就有非常多不精确的因素，可是我们通过一些专利算法（手指到旁边的宣传画板），将精度误差控制在1度下面。也就是说，无论你怎么转动。标签最多偏差1度的位置。

1. 信息随球机拉远拉近分层显示

1. 电子地图的分层显示

   假设这个球机的视野里面有100个标签，所有堆在画面上，你根本就看不了。

   对吧？除了选择性开启标签以外，另一个办法。这个就是如今要说的问题。

   刚才说了球机的转动，那球机另一个拉远拉近的问题。

   还记得我们平时用的电子地图吗？你先看到的是中国，然后放大。广东省出来了，然后再放大。又能看到广州、深圳了，再放大能够看到福田区、南山区了。我们将这个分层显示的技术用到了我们的增强现实球机里面。

   当你拉近时。上一级标签就消失了。你能看到当前画面里面的标签。

   是不是非常酷？

2. 有人跳楼

   我举一个样例。你的球机正看着一条街，旁边有4栋楼，各自是打着ABCD四个标签。

   如今你将画面拉近看A号楼。ABCD四个标签不见了，如今你看到的就是一堆窗户。

   每个窗户上面挂着一个门牌号的标签。

   如果某一个窗户发生了案件。比方说有个人跳了下去。原本的视频画面中。你根本不可能知道那个窗户是几栋几楼几号。你必需要到现场去排查才干了解。如今方便了，你一看到那个窗户。就知道是A栋502室。

   这样极大的提升了民警的办案效率，你说是吧？

3. 城市远处着火

   再说了。假设我这是一个高点监控。突然发现画面里面的远处有一栋楼着火了。

   在传统视频监控领域里面，全然没有办法知道是哪栋楼着火了。如今简单了，把镜头拉过去一看，那栋楼上顶着一个标签“XX大厦”。立即通知火警。

1. 标签可触发响应

1. 标签居中

   没想到这个小小的标签能做这么多事吧？刚才我给你演示了一个功能，就是标签能够点击。展开看到里面的具体信息。包含地址啊，联系人啊，联系电话啊什么的。事实上这表示了一个概念。就是这个标签能够响应点击。点击之后就能够设计出非常多有意思的功能了。

   比方说，你认为你对画面右上角的那栋楼非常感兴趣。你假设要控制云台转动过去，非常麻烦，不好操作。也不准确。

   如今我提供一个简易的方法。你用鼠标点那个标签。以下有个图钉，你再点一下那个图钉（真实去点击演示）。啪的一下，那栋楼就直接转动出如今了画面的中心。

2. 画中画

   再给你讲一个更有意思的应用。如果这里发生案件了（用手指着画面内某处），你发现这个摄像机的视角看不全面，希望知道还有没有别的摄像机能从另外的角度看过来。这时你发现。就在画面里面的一个角度上。另一个监控摄像机。

   这时你有两种方法能够看到它的图像。第一种就是到平台软件上面的摄像机列表里面去查找。然后点开播放。另外一种就是到电子地图上面去找到这个摄像机，然后播放画面。

   你不认为非常麻烦非常复杂吗？

   如今你不用这么麻烦了，看到这个标签没（指向画面里那台摄像机上面的标签）？你点它标签。然后再点击这个播放button。目标摄像机的画面就出现了。这是画中画的模式哦！

   如今为此。我给你讲的应用都是摄像机自带的功能哦，全然不须要平台的參与。（手指向画中画）如今你再也不用到平台界面上去找这个摄像机了，直接就能看到它的图像。非常有意思吧？

   你还能够双击它（双击画中画），能够直接进入其全屏播放的画面。

   当然。右上角有个关闭button。点击它回到原本摄像机界面。

   这种话。极大的方便了办案民警。你认为这个应用有不有价值？

1. 其他应用

   当然，除了上面提到的应用，还有非常多的玩法。比方打电话。弹出网页等等。事实上它的基本原理非常easy，就是全部的标签都能够响应点击。以触发某种自己定义的行为。

1. 标签搜索及定位

1. 颠覆110报警平台

   如今我再给你讲一个非常酷的事儿。我们的增强现实系统的推出。全然有可能颠覆了现有110报警平台的工作。或许不能用颠覆这个词，我们讲极大的促进了110报警平台的工作吧。

   如果你在一家餐厅吃饭，钱包丢了。这个时候你打110报警。

   接警员会问你发生什么事情了，你人在哪里，然后派警察过来。依照眼下的正常情况。你还会在接下来的半个小时里面接到几个问路电话。然后才干看见姗姗来迟的警察叔叔。对吧？除非片警对你所在的区域很很的熟悉，才有可能在10分钟内赶到。谁能轻松的找到一家小餐厅呢？

   如今不一样了，你110一打通，说我在XX路XX饭店门口。接线员就能够把你说的XX路和XX饭店的字样敲进系统里面。刹那间。全部能看到你的，能动的摄像机都齐刷刷地转过来看着你。然后你会听到110接线员这样告诉你，我已经看到你了。请继续讲。

   怎么样？你原来要花半个小时才干等到警察，如今可能仅仅要5秒钟他就能看到你周围的情况了。

   我想，科幻片也只是如此吧。事实上原理也非常easy，刚才我不是给你讲了以标签为中心转动摄像机的功能吗？如今我仅仅须要在后台输入你说的街道名称和饭店名称。后台就会自己主动在系统中搜索匹配的标签。找到它以后，球机都自己主动转过去看着你了，你正站在那标签以下打电话。当然，在平台里面使用时，有可能有多个摄像机都有这个标签，那就更好了。

   多个摄像机在第一时刻。同一时刻一起转过来看着你，多种角度。你认为怎么样？

2. 其他应用

   事实上这个标签搜索及定位的功能不光是用在这里。

   在非常多领域都能够使用。

   当你想看哪里。就看哪里。就有点像球机的预置位功能一样，预置位不都能够取名字吗？可是，增强现实的标签技术全然和预置位不一样。并且技术远远超过预置位功能非常远。

1. 增强的录像回放

1. 录像在画面内实时回放

   不知道你注意到没有，在这个画面里面有一个录像回放的button（手指向那个button）。这是一个非常有意思的事儿，你希望回放当前摄像机的录像时。再也不用去找录像播放工具去查找录像再播放了。就在这儿点一下，看到没（手指向进度条），已经进入录像回放功能了。

   并且你发现没有？你回放的不光是录像。全部的增强现实数据信息也完整的录下来了！是不是特别有意思？刚才给你讲过。不用平台就能够播放还有一台摄像机的图像。如今又给你讲，不用录像回放client，就在画面里面就能回放录像。

   当然，它仅仅能回放本地录像。只是，你一定感受到这一点了，这个增强现实摄像机。不用平台。自己就能组网工作了！

   太强大了是不是？你说得确实是。增强现实摄像机没有平台能用，但假设有了平台，那花样就玩儿大了！

   只是呢。平台的玩法等会儿再给你讲。如今仅仅讲摄像机！

2. 录像可编辑

   既然如今我们讲到了录像的功能。那就不得不讲一下录像功能的颠覆之处了。

   记得最開始的时候，我们提到了，增强现实系统的原理就是将各种信息叠加在视频画面上。那录像除了把实时画面的增强信息录制下来。还能够进行编辑。

   注意看这里，（指向录像界面某处）这里发生了一起案件。你作为一个公安民警，在分析录像时，把各种文字、图片、声音。所有加入进录像里面了。

3. 增强现实录像可传递

   这个时候，你把这份录像文件拷贝给还有一个同事后。他打开录像就能看到全部你做的编辑批注了。这在串并案分析时特别有效。你想想看。不再须要不同的民警分别再去查数据库了。极大的提升了办案效率！

1. 地理信息感知

1. 飞行员座舱

   为了做到这么多标签的精确定位。我的摄像机里面加装了各种各样的传感器。如今我给你展示一个高科技。（点开传感器数据画面）怎么样？是不是有开飞机的感觉了？密密麻麻的各种数据。这是水平倾角，这是垂直倾角，这是方位角，这是磁场。这是经纬度，这是重力加速度。这是海拔等等等等。

2. 森林防火

   刚才我们讲过一个故事。就是城市里面有个楼着火了，我们能够把镜头拉近去看是哪栋楼，还记得吧。如今假设不是城市，而是用来森林防火，怎么办？森林哪有什么标签名字。

   如今我这个展示一个功能，如果这里着火了。我点一下这里（指向画面某处）。測距。看到没，镜头自己主动转到这里了，着火点离我镜头的距离是多远。着火点的经纬度坐标所有都显示出来了。牛吧？这个时候你就能够直接报火警了。

   当然，这些数据还能够有大量的应用。今天没办法一一讲给你听了。

1. 平台应用

1. 平台级标签搜索定位

   这套系统不加平台就能实现这么多的功能特性了。假设加上平台就很多其它的花样了。刚才不是讲了颠覆110的故事了吗？那就是平台的一个应用。在全局里面搜索标签，使多台摄像机设备在第一时间都转过去看着你。

2. 监控无死角覆盖

   全部的精确定位都依赖于摄像机身上的传感器。一旦有了这些传感器，我就能清楚地知道摄像机正在看着什么方向。对吧？这个特性太实用处了！首先在平安城市中我就能实现监控的无死角覆盖。

   在平台的电子地图上，每一个摄像机都有一个扇形标记着它当前实时的监控方向。从电子地图上，一眼就能够看出哪个地方没有被摄像机覆盖到，是否须要添加摄像机。如果这里有一个球机（指向屏幕中某处）。在不停的转动，我们能够看到它的扇形也在地图上转动。

   做平安城市设计的人或实战的公安会发现，当球机转到某一个方向时，它的背后就是一片盲区，没有不论什么别的摄像机能帮它补盲。

   这时，是否要添加摄像机。是否要别的球机转动过来补盲。

   这就是一门科学。

3. 实战布控

   相同的道理，这在实战布控抓捕时很实用。如果这是我的电子地图（指向屏幕），一嫌疑人开着车从左边向右边开过来（手从左到右），在右边这儿（指向某处）你觉得是有一个摄像机的。但是你不知道。这个摄像机根本就没有看着左边！

   怎么办？如今简单了。在地图上面拉一个框，让框里面的摄像机所有向左边看。你会发现，所有球机前面的扇形区域。慢慢都转动到左边来了！

   曾经的你根本办不到这个事！

   你仅仅能点进画面里面去看看是什么方向，还不一定看得出来。看出来后，还得手一步一步的转动云台。是不是这样？这个功能太牛了吧，至少我自己是这么感觉的。

4. 3D全景融合

   不知道你听没听过一种叫3D全景融合的技术。如今国内有几家企业正在做这个事。它这个技术有点意思，比方它要监控天安门广场，它会把整个天安门广场所有3D建模。然后倒处布满了枪机，再把所有枪机的画面拼接到3D场景中的路面上。不知道我说得明确不，这个你没看到东西可能不太好理解。

   总而言之，你作为用户，你看天安门广场。就好像坐在直升飞机上面，能够看到整个场景。

   楼房是假的，人车路都是真的。

   那么这个技术仅仅能用在枪机上，由于球机会转来转去，两个画面之间没办法动态的拼接。

   如今就能够了。全部枪还是球。无论你转到什么地方去，我都能获取摄像机的姿态数据，进行动态拼接。再也不用人工去測量了。

1. 兼容性

1. 传输兼容性

   兼容性是非常重要的一个概念。非常多朋友都问到了这个问题。这次我们推出的增强现实摄像机。没必要要配置我们的平台软件的。你海康的平台能够用，大华的平台也能够用。全然没有兼容性的问题。可是你是看不到增强现实的数据信息了。它在传统平台以下就是一个普通摄像机了。

   首先我们从传输的角度来讲，眼下推出的增强现实摄像机所有是依照28181这个国家标准来的，没有不论什么的不同。

2. 编码兼容性

   编解码方面，我们是标准的H.264和SVAC协议。全部的增强现实数据均智能复合在码流里面的。不影响不论什么标准解码和图像显示。

3. 增强现实数据显示兼容性

   假设你拿到增强现实摄像机的码流数据后希望可以显示增强的信息。

   有三种方法：

   当然第一种就是你用我的平台，什么功能都有了。

   另外一种就是你用我的SDK解码。全部信息都会出来，就跟你如今看到的界面一样。

   第三种就是。假设你想要一个更炫的界面。我们开放码流数据格式，你能够自行开发。

1. 大数据

1. 非结构化数据的结构化描写叙述

   公安部第三研究所提出一个大型的课题叫做“非结构化数据的结构化描写叙述”，简而言之就是做视频的智能分析。视频是非结构化的数据嘛。通过算法尽可能分析出里面的一些信息。这些信息就是结构化的数据了。

2. 前景结构化

   讲这个智能分析就不得不给你普及一下智能分析的基础概念了。如果这个展馆是空的，我先拍一张照。这个叫做背景。这时候你走进来了。在这个背景上面移动，你叫做前景。

   如今的智能分析算法仅仅能计算变化量，也就是正在移动的你。它能分析出你移动的速度，方向，距离。

   最后说你不能越过这条线，这就是行为分析。我们换个语言就是，前景的结构化分析。

3. 背景结构化

   今天，我的增强现实干了一件什么事儿？我把整个视频的背景给结构化了！

   你说对不正确？

4. 为大数据分析提供数据支撑

   这为智能分析开启了一个崭新的方向！这就是兴许大数据时代提供了精确的数据源啊！

1. 安装维护

1. 信息数据从来哪？

   差点儿全部人都问了这个问题。数据从哪来？

   我能够非常肯定的告诉你，依照眼下的科技，全部数据都得人工来录入。

   人工录入有两个方案：

   第一个方案就是。你付服务费给我，我派员工去给你录入。由于我的人不熟悉当地，所以实地调研的成本是很高的。

   这样是很不划算的，我很建议你採纳我的第二个方案。

   就是公安给每个片警下任务，每天完毕一个或两个摄像机的标签配置，由于片警对当地较熟悉，完毕速度是相对较快的。两三个月后。整个城市的标签就打完了。

   这样是成本最低，效率最高的方案。

2. 楼房拆了或者商户换了怎么办？

   楼房拆了或者商户换了这个问题不优点理。眼下的技术而言。仅仅能靠片警来维护和刷新摄像机的数据。

3. 摄像机换了怎么办？

   假设摄像机换了，这个就是技术问题了。全部的数据在配置好了之后会传输到后台，当你换了摄像机后。后台数据会自己主动更新到新摄像机里面的。

1. 未来发展

1. 全球3D空间坐标唯一化

   未来，会使用全球唯一的3D空间坐标，可是如今不行。眼下全部的标签是以摄像机为单位的。由于眼下全部传感器都有精度误差，镜头边缘有畸变。镜头光芯不准确等非常多问题。会导致3D空间在2D平面上的投影不准确，也就是标签跑歪了。

   当然，全球唯一3D坐标是最完美的方案。全部摄像机仅仅须要读取数据库，就能在画面中显示各个标签了。

2. 前景目标历史资料提取

   比方说和人脸识别配合，就跟科幻片是一样的。当画面检測到人脸时，全部这张人脸的信息，比方个人档案，都会在同一个画面里面显示。

3. 丰富图侦手段

   当然，增强现实系统对图侦来讲，是一次质的飞跃。办案民警如今所用的图侦系统只是是行为分析、人脸车牌提取、视频摘要、以图找图等应用。未来，图侦系统将会连背景场景信息都一起分析了。应用之多不可想象。

4. 国家标准甚至全球标准

   公安部第一研究所正与高新兴合作，将增强现实做为中国平安城市建设的标准。眼下。正合作研究增强信息的编码、格式、解码等领域的标准化工作。

5. 智能家居

   如今民用家用安防市场正在如火如荼地发展。

   可是摄像机要想进入智能家居行业，非常难有一个切入点。如今几大互联网厂商都在争夺客厅的入口。

   可是你有没有发现一个问题？当全部家居终端产品都还没有智能化的时候，智能家居中你能控制什么东西？无非就是那些眼下能用红外遥控器控制的东西了。比方电视机，空调等。

   空调就是全部智能家居必讲的故事之中的一个了。

   在下班回家之前。先用手机打开家的空调，回到家以后就会非常舒服了。但这里就有一个非常严重的问题。空调和电视机都是通过红外线进行遥控的。但红外线是单向的。指令发出去后是不会得到回复的。也就是说，空调打开没有，你根本不知道。电视打开没有，你也根本不知道。

   对不正确？

   假设你拥有了我们的增强现实家用摄像机。这一切都变得简单了，增强现实让全部家电控制变成真正的所见即所得！

   我仅仅须要看着家的视频画面，在画面里面点一下电视机，我能够看到电视机打开了。再在画面里面点一下空调。能够看到空调打开了，视频里还能够调温度，最后温度数据有没有设定成功，通过视频也就看到了。

   事实上，当你有了增强现实画面以后。能够玩的东西就太多了。比方电动窗帘，我在视频画面里面滑动窗帘到2/3的位置，能够看到家里的窗帘真正的滑到了2/3的位置。

   我能够开关灯，能够指定开关草地的喷水器等等。

   总之。就是所见即所得！这是在智能家居里面非常重要的一个概念！仅仅有增强现实摄像机能够办到！

   你说炫不炫！

1. 言犹未尽

1. 管中窥豹，可见一斑

   今天讲了这么多增强现实摄像机的能力。注意了。仅仅是讲的摄像机。

   未来我们公司即将公布的是整个增强现实系统！

   到时候会举办真正的正式的公布会，假设今天这些功能都让你晕了，到时候你肯定会吓坏。

   我们一起期待，科幻走进现实！