(12)发明专利申请
(10)申请公布号 CN 112734885 A(43)申请公布日 2021.04.30
(21)申请号 202011353215.3(22)申请日 2020.11.27
(71)申请人 北京顺天立安科技有限公司
地址 100094 北京市海淀区西北旺东路10
号院东区23号楼三层346室(72)发明人 余国军
(74)专利代理机构 北京远立知识产权代理事务
所(普通合伙) 11502
代理人 李海燕(51)Int.Cl.
G06T 13/40(2011.01)G06Q 50/26(2012.01)
权利要求书1页 说明书6页 附图4页
CN 112734885 A(54)发明名称
一种基于政务大厅办事指南的虚拟人像机器人
(57)摘要
本发明公开了一种基于政务大厅办事指南的虚拟人像机器人，该虚拟人像机器人包括：信息及信号获取系统、分析与控制系统、信息存储系统和信息输出系统。所述信息及信号获取系统、信息存储系统和信息输出系统分别与分析与控制系统连接。信息及信号获取系统包括图像获取模块、语音获取模块等；分析与控制系统包括虚拟人像控制模块、图像分析模块等；信息存储系统包括虚拟人像数据存储模块、地图数据存储模块等；所述信息输出系统包括图像显示模块、语音输出模块。运用三维虚拟人像、语音获取分析与合成、路径推荐、智能检索信息、人脸识别等技术，能够为政务大厅中有咨询需求的人提供专业、周到、个性化的服务，能够替代咨询台的作用。
CN 112734885 A
权 利 要 求 书
1/1页
1.一种基于政务大厅办事指南的虚拟人像机器人，其特征在于，所述虚拟人像机器人包括：信息及信号获取系统、分析与控制系统、信息存储系统和信息输出系统；
所述信息及信号获取系统、信息存储系统和信息输出系统分别与分析与控制系统连接；
所述信息及信号获取系统包括图像获取模块、语音获取模块、触摸与动作信号获取模块；
所述分析与控制系统包括虚拟人像控制模块、图像分析模块、语音分析模块、语音合成模块、地图数据分析模块、触摸与动作分析模块、娱乐控制模块；
所述信息存储系统包括虚拟人像数据存储模块、地图数据存储模块、娱乐信息存储模块、视频信息存储模块、政务信息存储模块；
语音输出模块。所述信息输出系统包括图像显示模块、
2.根据权利要求1所述的基于政务大厅办事指南的虚拟人像机器人，其特征在于，所述地图数据分析模块包括地图引擎。
3.根据权利要求1所述的基于政务大厅办事指南的虚拟人像机器人，其特征在于，所述图像获取模块包括摄像头，所述摄像头包括高清摄像头(2)。
4.根据权利要求1所述的基于政务大厅办事指南的虚拟人像机器人，其特征在于，所述图像分析模块包括人脸检测单元。
5.根据权利要求1所述的基于政务大厅办事指南的虚拟人像机器人，其特征在于，所述分析与控制系统还包括智能服务引擎。
6.根据权利要求1所述的基于政务大厅办事指南的虚拟人像机器人，其特征在于，所述语音分析模块包括英文语音识别引擎，所述语音合成模块包括语音合成引擎，所述虚拟人像控制模块包括三维人像引擎。
7.根据权利要求1所述的基于政务大厅办事指南的虚拟人像机器人，其特征在于，所述语音获取模块包括麦克风(1)，所述语音输出模块包括音箱(4)。
8.根据权利要求1所述的基于政务大厅办事指南的虚拟人像机器人，其特征在于，所述触摸与动作信号获取模块包括触摸屏(3)。
9.根据权利要求1所述的基于政务大厅办事指南的虚拟人像机器人，其特征在于，所述图像显示模块包括触摸屏(3)。
10.根据权利要求1‑9任一项所述的基于政务大厅办事指南的虚拟人像机器人，其特征在于，所述虚拟人像机器人还包括扩展接口，所述扩展接口包括打印设备接口、身份证识别设备接口、排队叫号设备接口中的至少一个。
2
CN 112734885 A
说 明 书
一种基于政务大厅办事指南的虚拟人像机器人
1/6页
技术领域
[0001]本发明涉及智能化政务服务技术领域，具体涉及一种基于政务大厅办事指南的虚拟人像机器人。
背景技术
[0002]随着我国经济社会的发展，政府服务的专业化水平不断提高，政务大厅逐渐形成不同的功能区块，各个岗位的分工越来越细化，造成政务大厅不同作用的接待窗口增多，政务大厅的规模逐渐变大。随着我国人工成本快速上涨，按照传统解决方案，单纯增加咨询岗位人员数量，成本压力较大。因此，需要开发一种在政务大厅提供咨询服务的机器人，用于部分替代或者替代传统的咨询人员，提供专业的咨询服务。发明内容
[0003]为此，本发明提供一种基于政务大厅办事指南的虚拟人像机器人，以便能够辅助政务大厅咨询人员，为前来办事的人民群众提供专业、周到的咨询服务。[0004]为了实现上述目的，本发明提供如下技术方案如下：[0005]一种基于政务大厅办事指南的虚拟人像机器人，如图1所示，所述虚拟人像机器人包括：信息及信号获取系统、分析与控制系统、信息存储系统和信息输出系统；[0006]所述信息及信号获取系统、信息存储系统和信息输出系统分别与分析与控制系统连接；
[0007]所述信息及信号获取系统包括图像获取模块、语音获取模块、触摸与动作信号获取模块；
[0008]所述分析与控制系统包括虚拟人像控制模块、图像分析模块、语音分析模块、语音合成模块、地图数据分析模块、触摸与动作分析模块、娱乐控制模块；[0009]所述信息存储系统包括虚拟人像数据存储模块、地图数据存储模块、娱乐信息存
视频信息存储模块、政务信息存储模块；储模块、
[0010]所述信息输出系统包括图像显示模块、语音输出模块。[0011]进一步地，所述地图数据分析模块包括地图引擎。[0012]所述图像获取模块包括摄像头，所述摄像头包括高清摄像头。[0013]所述图像分析模块包括人脸检测单元。[0014]所述分析与控制系统还包括智能服务引擎。[0015]所述语音分析模块包括英文语音识别引擎，所述语音合成模块包括语音合成引擎，所述虚拟人像控制模块包括三维人像引擎。[0016]所述语音获取模块包括麦克风。
[0017]所述触摸与动作信号获取模块包括触摸屏。[0018]所述语音输出模块包括音箱。[0019]所述图像显示模块包括触摸屏。
3
CN 112734885 A[0020]
说 明 书
2/6页
进一步地，所述虚拟人像机器人还包括电源模块。
[0021]进一步地，所述虚拟人像机器人还包括扩展接口。[0022]所述扩展接口包括打印设备接口、身份证识别设备接口、排队叫号设备接口中的至少一个。
[0023]在一种或几种具体实施方式中，本发明所提供的基于政务大厅办事指南的虚拟人像机器人具有以下技术效果：
[0024]本发明所提供的基于政务大厅办事指南的虚拟人像机器人，通过利用三维虚拟人像技术，实现逼真的3D动画形象，使沟通过程中的情绪表达、表情互动、口型同步等最大限度地接近真人；配备了人脸检测、动作捕捉、语音获取、语义分析、声音合成与播报等技术，能够主动与有咨询需求的人开启对话，为服务对象提供个性化咨询服务；同时能够根据业
依靠强大的知识库与有咨询需求的人进行智能且专业的交互沟通；具有务及场景的需求，
功能强大的地图功能，能够提供地图浏览、缩放、旋转、定位、路径规划与导航等功能；配制高分辨率大尺寸触摸屏，支持语音、触摸屏、图像、动作等多种交互方式；还具有娱乐功能；采用固定式位置，硬件损毁风险小；具有多种扩展接口，能够与打印机、身份证识别设备、排队叫号设备等进行连接。能够为政务大厅中有咨询需求的人提供专业、周到、个性化的服务，能够替代咨询台的作用。附图说明
[0025]为了更清楚地说明本发明的实施方式或现有技术中的技术方案，下面将对实施方式或现有技术描述中所需要使用的附图作简单地介绍。显而易见地，下面描述中的附图仅仅是示例性的，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图引伸获得其它的实施附图。[0026]本说明书所绘示的结构、比例、大小等，均仅用以配合说明书所揭示的内容，以供熟悉此技术的人士了解与阅读，并非用以限定本发明可实施的限定条件，故不具技术上的实质意义，任何结构的修饰、比例关系的改变或大小的调整，在不影响本发明所能产生的功效及所能达成的目的下，均应仍落在本发明所揭示的技术内容能涵盖的范围内。
[0027]图1为本发明所提供的基于政务大厅办事指南的虚拟人像机器人系统组成示意图；
[0028]图2为本发明所提供的基于政务大厅办事指南的虚拟人像机器人模块组成示意图；
[0029]图3本发明所提供的一个具体应用场景的虚拟人像机器人结构示意图；[0030]图4为本发明所提供的虚拟人像机器人一个具体示例的外观构成示意图；[0031]图5为本发明所提供的虚拟人像机器人的触摸屏显示界面示意图之一；[0032]图6为本发明所提供的虚拟人像机器人的触摸屏显示界面示意图之二；[0033]其中：[0034]1、麦克风，2、高清摄像头，3、触摸屏，4、音箱，5、基座。具体实施方式
[0035]以下由特定的具体实施例说明本发明的实施方式，熟悉此技术的人士可由本说明
4
CN 112734885 A
说 明 书
3/6页
书所揭露的内容轻易地了解本发明的其他优点及功效，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。[0036]本发明所提供的基于政务大厅办事指南的虚拟人像机器人，具有三维虚拟人像功能，能够进行情绪表达、表情互动、口型同步，具有人脸检测、动作捕捉、语音获取、语义分析、声音合成与播报功能，能够调取强大的知识库，主动与有咨询需求的人开启对话，具有地图功能，能够提供地图浏览、缩放、旋转、定位、路径规划与导航等功能，能够为政务大厅中有咨询需求的人提供专业、周到、个性化的服务，替代咨询台的作用。[0037]在一种具体实施方式中，本发明所提供的基于政务大厅办事指南的虚拟人像机器人，如图1所示，所述虚拟人像机器人包括：信息及信号获取系统、分析与控制系统、信息存储系统和信息输出系统；
[0038]所述信息及信号获取系统、信息存储系统和信息输出系统分别与分析与控制系统连接；
[0039]如图2所示，所述信息及信号获取系统包括图像获取模块、语音获取模块、触摸与动作信号获取模块；
[0040]所述分析与控制系统包括虚拟人像控制模块、图像分析模块、语音分析模块、语音合成模块、地图数据分析模块、触摸与动作分析模块、娱乐控制模块；[0041]所述信息存储系统包括虚拟人像数据存储模块、地图数据存储模块、娱乐信息存储模块、视频信息存储模块、政务信息存储模块；[0042]所述信息输出系统包括图像显示模块、语音输出模块。[0043]在一种具体实施方式中，语音获取模块采用麦克风，触摸与动作信号获取模块采用触摸屏3和摄像头，地图数据分析模块包括地图引擎，图像显示模块采用触摸屏3，语音输出模块采用音箱4，这些与触摸与动作分析模块、语音分析模块、地图数据存储模块配合，使本发明的基于政务大厅办事指南的虚拟人像机器人具有地图功能。具体性能如下：具备三维地图展示功能，支持2D、 2.5D、3D多角度显示，提供地图浏览、缩放、旋转、图层显隐等基础功能；提供信息检索接口，支持根据任意字段及编码进行查询定位、高亮显示；支持各种类型的标注物，并进行灵活的样式配置，支持手势拾取和事件交互；支持自定义室内地图显示风格及样式，并提供丰富的地图主题资源供二次开发调用；支持跨楼层精准的点到点之间的最短、最优路径计算，支持对路算结果进行导航和动画；可自动绘制楼层热力图、散点图等专题地图，快速进行空间大数据分析展示；支持多种坐标系转换和地图配准，便于各种室内外定位技术的集成和对接；支持全离线模式，地图数据可通过在线和离线两种方式加载，查询、路算集成在SDK中离线调用。[0044]在一种具体实施方式中，分析与控制系统中设置智能服务引擎，使本发明的基于政务大厅办事指南的虚拟人像机器人具有智能推荐功能，具体包括为需要咨询服务的人提
预约业务等，根据咨询内容提供业务内容。供等待业务、
[0045]在一种具体实施方式中，图像获取模块采用高清摄像头，图像分析模块中设置有人脸检测单元，通过高清摄像头实时捕捉用户人脸图像，对人脸图像进行矫正和检测；可通过摄像头识别人脸后，主动打招呼，主动迎宾。[0046]在一种具体实施方式中，语音获取模块采用麦克风阵列，语音分析模块设置语音
5
CN 112734885 A
说 明 书
4/6页
识别引擎和/或英文音识别引擎，语音合成模块设置语音合成引擎，语音输出模块采用音箱4，还设置智能服务引擎，能够调取信息存储系统中的任何信息，使其具有自然语言会话功能，具体功能如下：能多方位拾音，可有效将语音转化为文字和命令，与用户以自然语言对话的形式互动，通过复杂的语义分析，虚拟人像机器人能适应语义的变化，根据话题的转变而转变，利用上下文来推出答案；虚拟人像机器人不仅在会话功能上具有领先水平，还能提供给用户额外的信息，为用户提供建议或引导用户。[0047]在一种具体实施方式中，虚拟人像控制模块设置三维人像引擎，调取虚拟人像数据存储模块中的数据，在图像显示模块触摸屏3上显示虚拟人像，为拟人化的机器人虚拟人像，实现逼真的3D动画形象，实现沟通过程中的口型同步、肢体动作等功能，提前设计设定虚拟人像的动作可以作为虚拟服务人员为他人提供服务。[0048]在一种具体实施方式中，触摸与动作信号获取模块和图像显示模块采用虚拟人像大屏，具有交互体验好的优点：集语音语义识别能力，用户可通过自然语言咨询业务，集人脸检测和人脸识别能力，能主动识别用户特征并匹配个性化迎宾和服务；具有展示效果佳的优点：采用55寸高分辨率大屏，支持语音、触摸屏3、图像、动作等多种交互方式，集成三维人像，能够充当虚拟大堂经理角色；服务效果优：快速响应用户咨询，主动引导用户，趣味功能供用户娱乐；具有维护成本低的优势：固定式位置硬件损毁风险低，长期供电，无需充电。[0049]在一种具体实施方式中，语音获取模块采用麦克风、触摸与动作信号获取模块和图像显示模块采用触摸屏3，联合语音分析模块、地图数据分析模块、触摸与动作分析模块、娱乐控制模块，调取地图数据存储模块、娱乐信息存储模块、视频信息存储模块、政务信息存储模块中储存的信息，使虚拟人像机器人具有根据需要咨询服务的人的命令(语音、触摸、动作等信号)在触摸屏3 上通过文字、图片和视频等形式综合展示用户需求。[0050]在一种具体实施方式中，虚拟人像机器人还包括扩展接口，包括打印设备接口、身份证识别设备接口、排队叫号设备接口中的至少一个。可外接打印机、身份证识别设备、排队叫号设备、人脸识别装置、三维地图展示装置、CRM 等。[0051]在一个具体实施方式中，虚拟人像机器人还包括电源模块，可以长期供电，无需充电。
[0052]在一个具体实施方式中，用于工商局政务大厅的虚拟人像机器人结构示意图如图3所示。该虚拟人像机器人的触摸屏3可以显示如下界面或信息：[0053]企业登记：点击企业登记，或者语音控制企业登记，可以打开企业登记功能菜单。企业登记包括：设立类告知单、变更(备案)类告知单、注销类告知单、专项类告知单；[0054]税务指南：点击税务指南，或者语音控制税务指南，可以打开税务指南功能菜单。税务指南包括：信息报告、发票办理、电报纳税、优惠办理、证明办理、出口退(免)税；[0055]信息报告包括：基础信息报告、特殊事项报告、垮区域经营信息报告、社会保险费信息报告；
[0056]发票办理包括：领用发票、发票代开、发票相关服务；[0057]申报纳税包括：增值申报、消费税申报、车辆购置税、企业所得税、个人所得税、房产税等；
[0058]优惠办理包括：增值税优惠、消费税优惠、车辆购置税优惠、企业所得税优惠、个人所得税优惠、房产税优惠等；
6
CN 112734885 A[0059]
说 明 书
5/6页
证明办理可以开具证明；
[0060]出口退(免)税包括：出口退免税备案、出口退抵税办理、出口证明开具；[0061]通知公告：点通知公告，或者语音控制通知公告，可以打开通知公告功能菜单。通知公告包括近期发布的新的通知；[0062]常见问题：点击常见问题，或者语音控制常见问题，可以打开常见问题功能菜单。常见问题包括：企业设立、企业变更、简易注销、内资有限公司及分公司注销登记、外商投资企业及分支机构注销登记、内资非公司企业法人及营业单位注销登记、内资非公司企业法人及营业单位注销登记、个人独资企业及分支机构注销登记等；[0063]排号提醒：虚拟人像定制取号功能，通过取号系统获取用户的取号排名信息，通过虚拟人像人脸识别摄像头，获取用户的身份证信息，告知用户当前排号信息；[0064]我要开办：点击我要开办，或者语音控制我要开办，可以打开我要开办功能菜单。我要开办包括的功能包括：选择申报方式(企业开办“e窗通”服务平台，新企业开办“一窗办
电子营业执照服务专区、设立告知单、设立类表格、开办政策；理”专区(50‑59号窗口))、
[0065]我要咨询：点击我要咨询，或者语音控制我要咨询，可以打开我要咨询功能菜单；[0066]告知单：点击告知单，或者语音控制告知单，可以打开告知单功能菜单。告知单功能包括：设立类告知单、变更(备案)类告知单、注销类告知单、专项类告知单。和告知单二维码；
[0067]我要注销：点击我要注销，或者语音控制我要注销，可以打开我要注销功能菜单。我要注销功能包括：企业注销套餐；[0068]我要下载：点击我要下载，或者语音控制我要下载，可以打开我要下载功能菜单。我要下载功能包括：内资登记表、外资登记表、代表机构登记表、章程合伙协议参考格式、其他表格；
[0069]随便看看：点击随便看看，或者语音控制随便看看，可以打开随便看看功能菜单。随便看看功能包括：登记全程电子化、开办企业20分钟拿营业执照一天全办结和虚拟人像使用帮助。
[0070]在一种具体实施方式中，虚拟人像机器人的尺寸如下：高1800mm，宽824mm，底座厚度490mm。
[0071]在一种具体实施方式中，基于政务大厅办事指南的虚拟人像机器人的外观结构示意图如图4所示，外观可见麦克风1、高清摄像头2、触摸屏3、音箱4 和基座5，麦克风1和高清摄像头2设置于触摸屏3上部，音箱4设置在触摸屏3下部。[0072]在一种具体实施方式中，基于政务大厅办事指南的虚拟人像机器人的触摸屏3显示的一种布局如图5所示，触摸屏3上侧显示政务大厅名称，政务大厅名称显示区域的右下侧显示对话文字，虚拟人像显示在触摸屏3中部的左侧，语音控制开启区域处于触摸屏3中部右侧，服务页面导航区域处于语音控制开启区域的下侧。[0073]在一种具体实施方式中，基于政务大厅办事指南的虚拟人像机器人的触摸屏3显示的另一种布局如图6所示，触摸屏3上侧显示与需要咨询的人的打招呼文字，打招呼文字显示区域的右下侧显示对话文字，虚拟人像显示在触摸屏 3中部的左侧，语音控制开启区域处于触摸屏3中部右侧，服务页面导航区域处于语音控制开启区域的下侧。[0074]本说明书中上述方法的各个实施方式均采用递进的方式描述，各个实施方式之间
7
CN 112734885 A
说 明 书
6/6页
相同相似的部分互相参见即可，每个实施重点说明的都是与其他实施方式的不同之处。相关之处参见方法实施方式的部分说明即可。[0075]需要说明的是，尽管在附图中以特定顺序描述了本发明方法的操作，但这并非要求或者暗示必须按照该特定顺序来执行这些操作，或是必须执行全部所示的操作才能实现期望的结果。附加地或备选地，可以省略某些步骤，将多个步骤合并为一个步骤执行，和/或将一个步骤分解为多个步骤执行。
[0076]虽然本申请提供了如实施例或流程图的方法操作步骤，但基于常规或者无创造性的手段可以包括更多或者更少的操作步骤。实施例中列举的步骤顺序仅仅为众多步骤执行顺序中的一种方式，不代表唯一的执行顺序。在实际中的装置或客户端产品执行时，可以按照实施例或者附图所示的方法顺序执行或者并行执行(例如并行处理器或者多线程处理的环境，甚至为分布式数据处理环境)。术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、产品或者设备不仅包括那些要素，
或者是还包括为这种过程、方法、产品或者设备所固而且还包括没有明确列出的其他要素，
有的要素。在没有更多限制的情况下，并不排除在包括所述要素的过程、方法、产品或者设备中还存在另外的相同或等同要素。[0077]上述实施例阐明的单元、装置或模块等，具体可以由计算机芯片或实体实现，或者由具有某种功能的产品来实现。为了描述的方便，描述以上装置时以功能分为各种模块分别描述。当然，在实施本申请时可以把各模块的功能在同一个或多个软件和/或硬件中实现，也可以将实现同一功能的模块由多个子模块或子单元的组合实现等。以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
[0078]以上所述的具体实施例，对本申请的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本申请的具体实施例而已，并不用于限定本申请的保护范围，凡在本申请的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本申请的保护范围之内。
8
CN 112734885 A
说 明 书 附 图
1/4页
图1
图2
9
CN 112734885 A
说 明 书 附 图
2/4页
图3
图4
10
CN 112734885 A
说 明 书 附 图
3/4页
图5
11
CN 112734885 A
说 明 书 附 图
4/4页
图6
12
因篇幅问题不能全部显示，请点此查看更多更全内容