课程文献中心 更多>>

关键词： 易制毒化学品   数据仓库   ETL   OLAP   可视化  

摘要： 当前,国内共有三家易制毒化学品监管系统,易制毒化学品监管系统成功地实现了线上的业务申请与审批,满足了企业的业务办理需求。操作型监管系统虽然稳定、成熟,却只适用于日常的业务处理操作,并不能够对业务往来所产生的大量历史数据进行多角度、深层次的数据挖掘与分析。为此,河北斯博思创新科技有限公司决定创建基于操作型业务数据的数据仓库,同时进行多维度、多层次、跨主题的数据分析,从而为企业的决策以及政府部门的监管工作提供重要的数据支撑。本论文是在购买主题、机构维、化学品维等已创建,且针对这些主题和维度的简单ETL操作已实现的基础上进行的。本文的主要工作如下:(1)完善维度建模:在熟悉和全面深入理解易制毒化学品监管系统业务流程的基础上,扩展了购买主题,添加了运输、入库、出库、库存、购买退回等主题以及库房、运输工具等维度,构建了完整的易制毒化学品数据仓库维度模型。(2)实现ETL子系统:在理解原操作型业务系统数据结构的基础上,根据所构建数据仓库的数据需要,实现了八省一市数据的ETL处理子系统,使其能够流程式地完成数据周期性的抽取、清洗与转换,以及加载到数据仓库的工作。针对同省以及异省间的信息冗余等噪声数据问题,提出了相应的解决方案,并成功实施,最终按时成功完成数据仓库的数据填充工作。(3)设计并实现数据的多维分析及其可视化展示:以多级联动的方式实现对数据仓库中数据的多维度、多层次查询,并以报表和图表的形式进行数据的可视化展示。在每个分析主题下,都实现了基本查询、横比分析、纵比分析、同比分析、环比分析等操作。除此之外,还实现了跨主题的查询操作,例如实现了对购买主题及购买退回主题的综合分析,为企业的决策和政府部门的监管提供了充分的数据支持。基于数据仓库的易制毒化学品分析系统为企业的决策和政府部门的监管提供了高质量、高效率的数据支持,为大数据分析在全国易制毒化学品监管领域的更好应用打下了坚实基础。

关键词： 数据仓库   Hadoop集群   Hive数据仓库   数据可视化  

摘要： 随着移动互联网的迅速发展,如何通过将互联网与运动相结和的方式来激发人们对户外运动的兴趣变得尤为重要。同时随着互联网产品的功能越来越完善,企业收集了海量的用户数据,如何合理的存储和有效的挖掘这些数据成为了企业的关注重点。通过数据仓库来存储管理数据的方法应运而生,为企业提供分析和决策的功能。然而传统的数据仓库技术存在扩展性不足、数据处理技术落后和存储空间不足的缺陷,无法满足互联网企业对数据仓库的需求。语音导游数据仓库为企业提供决策依据,更好的为企业管理和挖掘数据。首先介绍了语音导游项目和数据仓库建设的背景与意义,通过对国内外研究概况的研究,结合现有的数据开发处理技术,对基于语音导游的数据仓库进行了需求分析和系统设计,可将整个系统划分为:数据处理平台、数据建模、Web可视化系统和数仓管理四个模块。数据处理平台模块使用Apache的开源项目Hadoop用来存储数据,为数据仓库提供了高效廉价的数据存储和处理平台;同时使用Yarn作为资源管理器,提高数据仓库的扩展性和稳定性;使用HIVEQL和SparkSQL简化了数据处理过程。数据建模中使用Ralph Kimall的维度建模方法,解决互联网行业需要快速交付、敏捷迭代的问题,保证了数据仓库的数据质量;同时使用数据分层的方法,将数据清洗合理的存储,明确数据结构。Web可视化系统使用SSM框架作为后台架构,使用Echarts数据可视化技术向企业和用户直观展示最有价值的数据。基于大数据的数据仓库建设已在企业内上线运行,得到了各大企业的认可,帮助数据仓库研发人员更高效的进行数据开发,增加了数据仓库的可扩展性和稳定性,让数据可以更好的为企业和用户服务。

关键词： 仓库设计   证券监管   数据仓库   Teradata   风险监测   证券市场  

摘要： 我国证券市场蓬勃发展，高效发挥市场配置的同时，证券市场风险也随之加深。有效的风险防范和化解工作，才能有助于资本市场的健康稳步发展，因此，通过信息技术开展风险监管的支持系统建设工作十分必要，实现风险及时监测、客观反映，为防范和化解风险提供依据，为证券市场风险的监测和防控工作的规范化、常态化、智能化奠定基础。　　本文研究的内容，以实际的工程为背景，分析了证券市场的监管支持需求，明确了系统的建设原则和目标，以此为基础，论文阐述了多层次、模块化系统的总体框架设计，详细介绍了应用功能与数据处理的设计与实现。本文完成的主要工作如下:　　(1)研究了证券市场风险监测的体系、数据仓库建设方法、ETL(Extract-Transform-Load)技术实现方法及Teradata数据库技术特性。　　(2)分析系统需求并明确了建设原则和目标，提出了模块化、分层设计的系统总体框架，设计多层次、可扩展且相对稳定的数据集市架构，并设计基于元数据的ETL处理。　　(3)详细介绍了数据仓库以数据集市模型为基础，结合应用需求要求，满足风险监管支持的模型设计、ETL规范化处理以及应用功能设计与实现。　　(4)针对Teradata数据库给出了的多项系统性能优化的策略，并得以在系统中应用，使得执行效率得到有效提升。　　(5)对系统的功能和非功能性需求进行全面测试和分析，使得上线的系统即高效且有质量保障。　　目前，本文的设计已在实际环境上得到了应用并且运行良好，对于提升证券监管支持工作效率，降低信息建设和维护成本，提高数据质量保障，更好地提供风险监管支持和服务，具有十分重要的意义。

关键词： 银行数据仓库   元数据管理系统   分析  

摘要： 随着我国现代化建设水平的不断提升,当前银行数据仓库系统的建设工作也获得了业内人士的广泛关注,特别是元数据管理系统在数据仓库建设中的价值得到了重视与肯定.本文立足于银行数据仓库元数据管理系统的建设现状,首先对银行数据仓库元数据的相关理论概念进行了分析与分类,接着对银行数据仓库的元数据作用和价值进行了分析,最后结合上述内容对银行数据仓库元数据系统的设计与优化进行了判断,希望能够为元数据在银行数据仓库中应用水平的全面提升创设条件.

关键词： 电力营销   决策支持系统   数据仓库   决策支持工具  

摘要： 电力工业在时代的长河当中进行了不断的改变,传统的信息管理模式已经无法适应目前的市场需求,在未来的某一阶段传统的信息管理模式很可能被淘汰.所以,目前对一种系统的处理方式是十分需要的,而这时,电力营销决策支持系统就应运而生.本篇文章系统地对电力营销决策系统进行阐述,明确表明了各项的设计思路.该系统由数据仓库、决策支持工事务处理三部分进行组合,业务员和使人以策者可以任意对部门信息进行了解和掌握,并且能够有效的做出决断.

关键词： 糖尿病   健康教育   数据仓库   智能分析   挖掘  

摘要： 阐述糖尿病健康教育对糖尿病病情治疗的作用,介绍了数据仓库技术和数据挖掘的概念及工作原理,探讨数据仓库技术在糖尿病健康教育系统中的智能分析与挖掘,以便为患者寻找最适合的健康教育方案,增强患者对病情的自我管理能力,从而提高糖尿病患者的生活质量。

关键词： 电力勘察设计   数据仓库   数据资源   信息化  

摘要： 随着我国电力行业的快速发展,电力勘察设计工作已经步入了信息化时代,并且通过多年来的建设和发展,目前已经形成初具规模的应用数据仓库,为了保证电力勘察设计企业数据信息得以有效的利用,实现数据资源利用率的提升,需要对电力勘察设计企业的数据仓库进行科学有效的构建,从而满足使用者的需求.所以本文主要对电力勘察设计企业数据仓库的有效构建进行探究,从而为电力勘察设计企业的健康稳定发展创造条件.

关键词： 决策支持系统   数据仓库   数据抽取  

摘要： '两法衔接'决策支持系统主要以数据仓库作为底层基础进行构建,以实现'两法衔接'业务管理模式和决策方面的创新.本文从'两法衔接'决策支持系统产生的背景、系统结构和功能模块的设计等方面对'两法衔接'决策支持系统的构建进行了研究与设计,同时对系统设计中所涉及的关键技术问题进行了论述.'两法衔接'决策支持系统可实现从多维度对数据仓库的数据进行分析,辅助领导进行管理、决策工作.

关键词： 决策分析   数据仓库   应用   创新  

摘要： 随着计算机信息化技术普及应用于各个领域,现代计算机信息化技术也渗透到企业各部门的管理系统之中,通过对各部门信息系统数据的分析和利用,可以建构适宜于决策分析的数据仓库,它是对数据进行组织和管理的技术,是面向主题、集成而稳定的数据集合,通过对数据的抽取、清洗和转换,可以较好地将其应用于分析决策型应用环境,实现决策分析在数据仓库中的应用创新。