以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

1、公司介绍

济南纬鸿信息技术有限公司是济南首家以"三维视频融合"技术研发、应用服务为核心的新兴创业科技公司。公司致力于为社会提供以”动态增强虚拟环境”为核心的[1+X]行业应用方案。

纬鸿紧随时代发展,践行新的企业经营发展理念,与时俱进,适时建立科学有效的企业发展机制,诚信邀请有共识的企业、人才携手构建资源互补的纬鸿合作生态圈,共同发展,互利共赢。

2、产品概述

点卯.[增强虚拟全景平台]为用户提供实时三维动态交互场景,让用户从此告别监控画面碎片化的时代,如同身临现场。

三维视频融合技术,无缝融合3DGIS、三维虚拟环境、实时动态图像三大元素,于计算机之上实现如同真实场景的"动态增强虚拟环境",结合5G、人工智能等多种技术,围绕行业特色实际,构建基于动态增强虚拟环境的软件系统集成项目,以满足行业应用需要。

三维视频融合是一种MR(混合现实)技术,MR是"增强现实"(实中有虚)与"增强虚拟环境"(虚中有实)两者的统称, 三维视频融合作为"增强虚拟环境"技术,通过摄相机或投影装置提取真实对象的“二维动态图像”或“三维表面”信息, 实时将"对象图像区域"或"三维表面"以纹理方式注册到三维虚拟环境中,达到增强虚拟环境的效果, 为真实世界和虚拟环境架起一座穿越桥梁。

三维视频融合.[点卯.增强虚拟全景平台].免费版 虚拟现实 监控

3、使用指南

3.0、下载

3.0.1、平台安装包

免费版下载

3.0.2、真人语音库

网盘链接:https://pan.baidu.com/s/1MqYrAviwcjZy-8N2_-pbig

提取码:0pr1

3.0.3、TTS修复工具

网盘链接:https://pan.baidu.com/s/1E2Bc-VB5tpLg1WLmwZr1Jw

提取码:l2wk

3.1、安装

3.1.0、系统要求

1、操作系统:windows7  32/64位

2、硬件:生产环境建议使用图形工作站.

3.1.1、平台安装

1 、鼠标双击软件安装包,如图所示:

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

2、输入安装密码,如图:

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

安装密码:weihong3d

3、选择安装位置:

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

4、创建桌面快捷方式.

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

6、准备安装.

 

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

7、安装完成

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

3.1.2、语音库安装

0、提示:安装路径不可以有汉字出现。

1、鼠标双击语音库安装包,如图:

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

2、安装向导,如图:

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

3、安装位置,如图:

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

注意:路径不可以有中文,此处为默认路径.

4、准备安装.

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

5、正在安装.

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

6、安装完成.

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

3.1.3、TTS引擎修复

1、TTS语音引擎是打包在操作系统内的,有些镜像版系统会把该功能精简,造成TTS引擎失效,需要进行修改.

2、增强虚拟环境中的功能,在运行时具有语音功能,依靠TTS引擎.

3、安装 “TTS语音引擎修复2.0.exe”即可修复.

3.2、使用

3.2.0、平台启动

1、鼠标双击桌面快捷图标:

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

2、启动界面如图:

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

3.2.1、结构组成

1、平台首页

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

首界面当前放置了三个按键,启动、重启、播放器。

在软件启动后,日常第一件工作就是执行“启动”,运行起增强虚拟环境中“虚拟地球”,如下图所示。

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

在“虚拟地球”中通常要做一些设置,如在三维空间中融合摄像机画面,加载三维模型等,都需要重启软件生效。

通常,为了检测网络摄像机视频是否正常,在此处放置了VLC独立播放器。

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

2、增强虚拟环境

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

以上界面是在没有启动“虚拟地球”时的“增强虚拟环境”界面,是本平台的核心模块。

下图是一个示例,呈现的是一个虚拟三维城市,建筑物和路面及周边环境通常是静态的,但是路面的车辆及行人以及室内等活动场景,我需要通过将实时视频融合到该三维场景中,构成增强虚拟环境,这样,我们就有了接近现实的互动立体场景,就可以在此基础上开展工作,管理业务等。

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

提示:虚拟场景的加载需要些时间,时间长短跟电脑和网络有关,请耐心等待。

3、WEB平台容器

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

该模块是本平台的另一大特色,通过借鉴手机APP的设计思路,采用混合模式设计,所谓混合模式可以理解为软件主体及框架采用原生开发,需要展示的业务及内容采用WEB方式开发,这样业务和内容的更新可以更加的*和方便,比较常见的如手机上安装的商城APP。

在这里,客户可以运行现有或新开发的基于B/S架构的web系统,因为这里首先是个浏览器,基于谷歌的嵌入式浏览器,所以,本平台首先充当了一个浏览器的工作,您用别的浏览器和在这里效果一样,况且这是一个特殊的具有增强虚拟环境的加强版浏览器。

另外,我们在浏览器中开放了JS接口,凡是运行在该浏览器中的web系统,可以通过调用JS接口执行虚拟地球,也就是增强虚拟环境,来实现您的业务。

当然,您需要在原生框架上开发,来实现您的业务,我们也提供定制研发服务。

3.2.2、虚拟场景

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

三维模型加载到增强虚拟环境中,首先要确定它的空间位置、姿态,上图界面中的经纬度、海拔、航向、航程、螺距都要提供,这些数据可以手动填写或修改,那如何获取这些数据?通过以下办法获取,自动填写。

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

在用鼠标拖拽虚拟场景时,鼠标拖拽地形位置的坐标、姿态等数据,会在下方地球坐标栏中实时显示。

     我们先在虚拟场景中,添加三维模型,鼠标点击“打开”按钮,弹出“打开”窗口,如图所示。

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

选择合适的三维模型,如下图:

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

场景的路径已经添加完成。

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

现在我们开始添加上述的坐标、姿态数据。

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

鼠标单击下方地球坐标栏中的数据行,数据自动填写到虚拟场景窗口中的对应坐标、姿态位置中,如上图所示。

     手动填写一下三维场景的名称。

再解释一下默认场景,当我们启动“虚拟地球”后,地球在宇宙中由远及近、由小到大的慢慢的漫游、漂浮过来,最后越来越大,停留在地球上某处的一个场景,这个就是我们此处的默认场景;因为在三维场景窗口中,我们可以添加多个场景,但是默认场景只能有一个,选择哪一个在于你。

右上方功能区中,“起点”功能,与此处的默认场景对应,当在操作中虚拟空间漫游到其他地理位置,想要回归的时候,点击“起点”就可回到默认场景。

模型分类有两种,模型和参照物;这里选择“模型”,状态选择“显示”,当然要看的见,不然添加进来干嘛。

还有一个漫游(秒),这里是指速度,地球从宇宙中漫游、漂浮过来的速度,通过滑块指定您的速度。

一切数据设置好之后,鼠标点击“新增”,完成虚拟场景的三维模型添加。

然后,重启软件,启动“虚拟地球”生效。

软件加载三维模型,重启之后的情况如图:

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

隐藏四周之后界面更加简洁,如图:

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

由于三维模型在摆放到地图上的过程中,位置和姿态总会有误差,需要在上方的“虚拟场景”窗口中进行数据的调整、更新,具体坐标数据,可配合放下窗口栏中地球坐标来进行。

3.2.3、网络摄像机

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

网络摄像机视频画面的融合,有些类似三维虚拟模型,需要提供坐标和姿态等数据,需要的数据会多一点。

网络摄像机的厂家、品牌繁多,这里在直连模式中,只提供了海康、大华两大品牌,相关数据按照摄像机的规格填写就行。

在协议模式中,对所有网络摄像机开放了,只要提供访问摄像机的协议地址字符串就可以了。

提示:协议地址栏中,切记要把协议头去掉,代码中已经包括协议头,只填写“//”后面的部分。

     相对位置,是相对于三维模型而言,因为一般情况,视频画面与三维模型进行融合叠加,所以需要提供给视频画面提供相对于三维模型的相对位置坐标。数据从下方栏中物体坐标中取得。用法同虚拟场景窗口介绍。

     缩放比例的调整,会影响视频画面在空间的画面大小尺寸,调整时会有直观感受。

     漫游坐标,也就是视频画面的空间经纬度坐标、姿态等,当我们查看摄像机画面时,就是根据这一坐标的设定,融合三维模型和视频画面的空间场景才漫游至用户视野当中。经纬度等数据也是从下方栏的地球坐标中自动取得。用法同虚拟场景窗口介绍。

    漫游速度,同虚拟场景窗口中相同。

虚拟场景选项,在增强虚拟场景当中,可能会有多个三维模型或参照物(其实也是三维模型,只要用于路面设置视频画面的参照),所以需要选择此处视频画面与哪个三维模型进行融合。

填写完成后,执行“新增”,上方列表窗口会显示您刚提交新增的数据,同样,重启软件,启动虚拟地球生效。

凡是添加成功的摄像机,会在左侧摄像机面板中显示,以树状结构排列,便于操作。

鼠标点击摄像机名称,就会漫游至摄像机画面所在增强虚拟环境,显示摄像机与场景融合画面。

鼠标单击树根节点,摄像机组,会关闭所打开摄像机画面。

     添加视频画面时,坐标、姿态会出现一些误差,这就需要进行精确调整,如何调整呢?

这张图没有显示视频画面,位置是学校大门口。

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

这是将场景姿态通过鼠标拖拽,然后再用键盘方向键调整为俯视的姿态,然后将视频画面融合;由于存在误差,画面的位置可能不在你想要的位置,这就需要微调。

鼠标点击左侧面板摄像机名称,此时显示视频画面,视频画面的有关数据会在右侧面板呈现,那就可以修改这些数据,来矫正摄像机视频画面。

如果想获得新的坐标,点击下方栏经纬度坐标和相对坐标,可自动填充。缩放比,可在三个方向调整画面的尺寸,甚至倾斜。

小技巧:微调右侧坐标时,可删除小数点后数据,将光标放到整数后面,慢慢滚动鼠标滚轮,视频画面就会慢慢向相关方向移动,其他数据操作也可以用这个办法。

提示:做好微调之后,一定要记得保存,点击上方功能区保存按钮。这样,重启后生效。

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

3.3.4、地图

如果对地图有特殊要求,这里提供了可以加载本地地图瓦片的功能,用户只要通过地图下载工具,下载地图瓦片,导出类型一定要选择“Bing Map”类型。目录结构一定要如图所示,文件夹名称如“L10”。

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

然后将下载的瓦片复制到平台安装目录下的“Bing”文件夹下,启动平台生效。

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

3.3.5、自动巡视

这个功能,是可以让用户不用手动点击查看每一路摄像机,设置成自动巡视播放功能。

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

3.3.6、语音设置

以三维视频融合为核心的[点卯.增强虚拟全景平台]免费版,在智慧城市和安防监控行业中的应用

 

如果用户的操作系统中没有TTS语音引擎或者损坏,此处语音下拉框是没有选项的,所以在本文开始的时候提到的,需要进行语音引擎修复。