市场监管业务数据可视化平台研究与实践

市场监管业务数据可视化平台研究与实践

孙占军，傅涵，张稳

自治区市场监督管理干部教育培训中心。

摘要：数据可视化是计算机科学的一个分支，有着悠久的历史。近年来，它得到了迅速的发展和应用，引起了学术界的广泛关注，并掀起了一股研究热潮。随着信息技术在各个行业的普及，业务数据爆炸式增长，物联网和互联网的广泛应用，大数据的出现给人类的数据处理和信息获取带来了诸多便利。然而，面对庞大而复杂的数据，如何快速捕捉其价值成为一个核心问题。本文主要分析了市场监管业务数据可视化平台的研究与实践。

关键词：市场监管;可视化

引言

信息可视化可以利用图形、音频和视频技术对大规模、复杂的数据进行可视化，为人们更快、更深入地理解数据提供了重要途径。随着市场监管体制改革的深入，市场监管业务信息化不断发展和完善。市场监管业务信息系统的部署和应用为市场监管部门的日常工作提供了现代化手段，提高了工作效率和决策水平，改善了用户体验，提高了服务质量。可视化技术在数据处理中起着重要的作用。

1、可视化、数据可视化与可视化技术

可视化是人类的一种认知活动，就是在心理上建立某事物的可视图像或媒体模型，以便利用视觉或听觉等感官经验理解数据、获取信息、丰富知识、增长经验。可视化的基本思想就是用更易理解的形式来表达数据、描述问题，即通过对数据的进一步加工和转换来达到更直观地进行信息启示的目的，其最大的优点是可以降低认知成本，提高认知效率。在实现可视化目标的过程中所采用的方法、手段、工具的总和称为可视化技术。可视化技术历史久远，在计算机领域中最早应用在科学计算上称为科学可视化或数据可视化。随着经济社会的持续高速发展，数据可视化技术逐步扩展到了更多的领域，出现了大量更为复杂的、领域相关的数据集合，使得对信息技术、数据可视化技术的需求日益剧增，对可视化技术的发展起到了极大的推动作用。现代的数据可视化技术在计算机的支撑下得到了前所未有的快速发展，特别是互联网、物联网技术的发展以及大数据、人工智能等的新的应用的普及，使得可视化技术得到了充分的扩展，体现了其广泛的应用价值。当今，可视化数据的数据来源主要有金融、社会、经济、商业等领域，市场监管业务数据就是一个典型的行业数据集合，利用可视化技术对其进行描述和表达有着巨大的应用价值。

2、市场监管大数据平台架构

根据新的海量数据方法，公务员系统可以从最初的业务方向转向数据方向，以前分散的设计结构横向分布在各级不同的部门、部门、垂直线和机构，现在可以转变为包括高级设计在内的统一结构各级用户在实时共享数据的同时，大大提高了大型平台(数据平台)数据合并应用程序的总体水平。体制改革后建立的市场监管机构，包括前质量检查员、企业、药剂师、价格、知识产权等部门。，它们还面临功能整合和系统整合问题。因此，本文将上述系统设计理念应用于统一市场监管体系的构建之上，提出了大型市场监管数据平台的体系结构设计。市场调控大数据平台的整体架构可立足于以下三个领域:一是在系统整合和数据共享的基础上构建市场调控信息基础设施；二是大力建设基础设施和统一管理；第二个步骤是建立一个关于监管问题的基本数据库，以建立一个庞大的数据平台，辅之以部门监管信息和与互联网有关的企业信息，使各级监管机构能够共享和共享数据资源第三是建立一个以社会关切为中心的风险预警系统，辅之以有针对性的检查；利用大数据技术实现统一的数据资源管理、分析和利用；探索一个基于信息共享的新的监管数据应用模式。

3、平台实现

3.1系统架构

系统采用松耦合、高聚合、多层次和面向服务的体系结构，坚持功能实用、接口规范和高响应时效的原则，采用J2EE架构和多服务器、虚拟化和集群化的部署方式。支持主流数据库，支持Hadoop分布式系统基础架构。采用了兼容性较好的B/S模式，并结合当前科技创新工作的要求，支持Linux系统客户端下的火狐、谷歌等主流浏览器。系统的数据源来自原工商、质监、食药监、物价、知识产权等多个部门不同厂家、不同版本的业务软件，经过数据清洗模块对各部门的数据进行整理、清洗，存入数据仓库。

3.2源数据抽取

为不同的多服务数据库系统开发了适当的数据提取数据库接口，未存储在数据库中的数据是从软件客户端接口手动提取的。提取的源数据存储在数据库中。预先定义的资料库提供自订表格结构功能，可让使用者使用「资料汇入」来定义自己(甚至是资料表中栏位的表格结构和性质)，以便汇入非预先定义的资料。例如，市场监管工作中的不公平竞争监管数据通过数据提取模块(案件编号、案件名称、当事人、案件价值、处罚金额、登记时间等)导入系统。)，则数据将自动转换并存储在前置任务数据库的数据库表中，数据表中受影响字段的属性将根据导入的字段类型自动进行判断，如果表中的某些字段缺少内容，系统将首先填充默认值，然后在清理过程中对其进行处理。

3.3基于可视化技术的大数据分析系统

利用数据可视化工具，开发市场调控大数据可视化平台，直观地呈现不同类型的图、表等处理的市场调控数据。，并对所提交的信息进行标记、分析、综合和分析，系统可以直观地显示基本信息、发展趋势、风险警报等。关于市场的话题。数据可视化技术，数据可视化技术是使用算法和工具量化和计算多维信息空间，并在处理大型数据集中的数据后将数据中隐藏的信息直观地表示为图形图像。市场监管大数据分析系统利用大数据技术提高市场监管机构公共服务部门有效收集监管后数据并将其纳入市场主体的能力。该系统利用来自市场监管的元数据制定标准的市场监管制度，利用元数据分析结果作为提高市场监管治理能力的重要手段，并不断提高服务和监管的相关性和有效性。市场规制大数据分析系统主要包括数据仓库平台和分析演示平台。数据仓库平台从原始单元的业务软件中提取数据，执行格式清理和转换，并将数据存储在数据仓库中；大数据分析演示平台对数据仓库中的数据进行建模，直观地向市场监管机构展示结果，提高市场监管机构的公共服务能力和事后监管水平。数据分析平台包括主要功能模块，如综合查询、业务分析、风险警报、决策支持、综合分析以及辅助功能模块，如年度报告监测、统计报告等。

3.4加快数据开发应用，实现精准监管

根据大数据算法，监管机构和执法人员可以及时准确地了解主要市场情况，分析行业发展情况，并明确监管优先事项。发挥大数据预测功能，建立市场风险预警系统，实现市场主体的动态调控，全面监管，提高监管准确性，缩短风险分析时间。一是利用海量数据对市场主体进行动态分析，实时掌握市场运行状况，正确应对潜在风险，实现宏观调控科学。二是构建海量数据监管模式，确定重点领域、重点行业和重点企业，对高风险行业和高风险主体进行关联分析，积极发现违法行为，提高监管相关性。第三，目标是针对具体的犯罪主体，及时控制其剥削行为和不法行为，依法采取适当的行政措施，迅速纠正扰乱市场秩序的违法行为。

结束语

数据可视化不但能够快速反映业务情况，也为数据价值的进一步挖掘提供了简洁明了的形式，是数据处理的一种重要手段，有着很大的研究与应用价值。本文结合市场监管业务系统的数据可视化过程，阐述了数据可视化的基本模式、相关技术等。其中，如何构建一个独立于业务系统的、可灵活适配的可视化框架是一个值得进一步研究的课题。

参考文献：

［1］张瑞，唐旭丽，王定峰，等．基于知识关联的金融数据可视化分析［J］．情报理论与实践，2018，41(10):135-140．

［2］任磊，杜一，马帅，张小龙，戴国忠．大数据可视分析综述［J］．软件学报，2014，9:1909-1936．

［3］叶梦轩，危双丰，张冬梅．基于HTML5和WebGL的三维点云可视化方法［J］．工程勘察，2017，45(1)．

［4］孙宇.走向稳健、包容、审慎和弹性的数据治理［J］．社会治理，2020(9):20-26.［5］刘今超.促进互联网新业态健康发展的思考［J］．信息通信技术与政策，2019(3):29-31.