课程文献中心 更多>>

关键词： 电力信息应用综合查询分析系统   数据仓库   需求分析   架构设计  

摘要： 随着国家电网公司SG-ERP(State Grid-Enterprise Resource Planning,国家电网企业资源计划)建设工作的逐步推进,电力信息综合查询与分析的要求越来越高,现有的综合查询分析系统、专业分析系统多为针对某一特定需求而制定,而且没有对多种需求数据进行整合,从而不能反应用户对信息综合查询的总体需求,现有综合查询分析系统存在着对信息进行深度、多方位、细粒度的分析能力不足的问题。因此,国网眉山供电公司原有的综合查询系统已无法有效满足数据综合查询及智能决策的需要。针对这一现状,本文对公司电力信息应用综合查询分析系统的各方面需求进行详细分析,根据国网眉山供电公司信息系统发展现状和未来需求分析,在充分考虑现有综合查询分析系统的基础上,充分利用信息技术的处理和分析功能,并结合企业经营实际情况以及总体需求情况,提出基于“SG186”工程数据中心典型设计技术架构。本文采用ETL(Extract-Transform-Load)工具、sybaseIQ数据仓库、数据集市技术,实现数据从营销、生产、交易等多个业务应用获取进入数据中心ODS(Operational Data Store,操作数据存储)、数据仓库、数据集市,并运用FLEX、AMCHART等技术实现数据分析展现,对公司人力资源、财务管理、电力生产、安全监督、营销服务等多个模块进行设计,以提升公司查询分析平台的综合查询能力,满足战略层、管理层和操作层对业务综合展现和分析决策的需求。本文设计的电力信息应用综合查询分析系统具有两方面特点。一方面,能够提升公司信息综合查询分析能力,支持指标细粒度查询分析、明细数据查询分析,有效支撑公司查询分析应用灵活扩展、规范且快速构建,切实有效满足各单位人员公司业务综合查询及分析决策需求,为智能分析决策应用建设奠定基础。另一方面,能够实现各单位生产经营指标与基建综合查询指标的查询分析展现,让公司各层次人员能够在各自权限范围内,即时“看到”同自己有关的业务信息,及时做出业务决策,为公司各层面的决策提供智力支持。

关键词： 数据分析   集中化   财务大数据   健康度评估   自助分析   数据仓库   MPP数据库  

摘要： 近年来随着云计算和大数据等信息技术的不断发展，移动互联网及电子商务应用不断向传统行业渗透，导致企业面临的跨行业市场竞争压力巨大。由于受到投资成本的限制以及网络技术快速发展的冲击，很多企业中早期建设的财务信息化系统普遍欠缺整体规划，系统呈“烟囱”式建设，存在信息孤岛，难以适应企业的快速变化与发展需求。因此，为了提升企业价值与运营效率，有必要构建一套集中化的财务大数据分析与决策系统，以全面覆盖各级业务人员，并实现信息高度共享和数据价值的快速聚焦。　　为了满足某电信运营商企业财务需求，本文设计并实现了一个集中化财务大数据分析与决策系统。本文的主要研究内容包括:　　(1)对财务信息化系统国内外热点与应用现状进行了研究，并对财务分析方法、系统集中化、混搭架构大数据平台等进行研究，为构建集中化财务大数据分析与决策系统提供了理论与技术支撑。　　(2)对集中化财务大数据分析与决策系统的建设背景与需求进行了分析，并由此提出了系统的建设原则与总体设计思路。　　(3)对系统中的关键模块，如数据采集与跨平台协同模块、业务运营健康度分析模块、综合统计报表模块、自助报表分析与共享模块等的主要功能及业务流程进行了详细设计与实现。　　(4)对系统的软硬件部署环境进行描述，并对系统功能及影响性能的关键点进行了测试与分析。　　本文实现的集中化财务大数据分析与决策系统能够快速、全面地覆盖某电信运营商集团内各组织机构，为各级财务人员提供一体化的应用支撑，并对集团内外数据进行统一采集与融合建模，提升了分析与决策的科学性，推进了企业的财务管理效率与价值提升。

关键词： 卷烟生产模型   数据仓库   多维度分析  

摘要： 近年来,随着互联网+工业4.0如火如荼的发展,烟草行业越发注意到数据管理在企业精益化上的重要地位,提高信息化对工业生产资源的配置效率,能在更高层次上促进供给侧结构性改革,通过数据来衡量管理水平的高低,进而用数据倒逼管理。山东中烟滕州卷烟厂易地技改后存在海量的卷烟生产数据,但数据利用价值并不高,不能真正实现用数据指导生产管理。基于烟草行业卷烟生产产生的实时数据,采取了数据仓库用于决策分析。对比了范式建模法、实体建模法和维度建模法的优劣,选取了维度建模法的星型模型,结合了多维度数据处理思想,建立了卷烟生产多维度分析模型。设计与开发了以此模型为蓝本的滕州卷烟厂生产多维度分析系统,沟通了系统设计的需求,搭建了完备的系统架构,划分了数据采集控制台(DAC)、集中监控系统(ISP)、车间协同终端(WCT)、生产管理系统(PMS)四大功能模块,实现了卷烟生产DAC实时采集数据存储到数据仓库中,强化了 ISP生产实时监视动态更新卷烟生产数据,给予了 WCT操作人员、PMS管理人员等不同的权限,分析了卷烟产量、卷烟成本、卷烟设备和卷烟质量四个维度的海量数据,输出了与生产管理和过程调度相关的实时监控图、统计分析、报表等,实现了厂级、车间级、班组级三级生产管理功能和现场协同调度功能,满足了滕州卷烟厂对卷烟生产数据的管理需求。滕州卷烟厂卷烟生产多维度分析系统的实现,深入了工业化和信息化融合的程度,大大提高了车间的数据管理水平。本文提出的卷烟生产多维度分析的实现,在工业企业生产数据管理方向具有一定的借鉴价值。

关键词： 银行数据仓库   默认值   基金销售   测试方法  

摘要： 信息技术的广泛应用使得商业银行的经营管理变得更加高效快捷,与此同时也沉淀了大量的数据。数据仓库作为一种高效集成的数据管理技术,能够帮助决策者提高金融决策水平,在复杂的经济局势和商业环境中做出精确的判断。数据质量是数据仓库建设中的重中之重,数据仓库的测试应成为确保数据质量、满足上层应用需求的关键环节,应该得到足够的重视。本文以某大型商业银行

关键词： 数据仓库   物化视图   动态选择   查询聚类   属性字段相似性  

摘要： 随着信息时代的到来,数据仓库被广泛使用,然而对数据仓库进行联机分析处理等操作非常耗时,为此,物化视图技术应运而生。物化视图指的是将数据仓库中可能的查询结果预先进行物理存储,以提高数据仓库的查询响应性能。但在一定的存储空间内,物化所有视图是不切实际的。因此,本文研究重点是在某一存储空间限定内选择价值较高的视图进行物化,以提升数据仓库的响应性能。主要工作内容如下:数据仓库在运行期间积累了大量的用户查询记录,这些记录直观反应了用户对数据的关注点,因此,本文提出一种基于关联规则挖掘的属性字段相似性计算方法,基于属性字段相似性计算方法,提出一种查询语句相似性计算方法,进而将查询语句聚类,生成候选物化视图集。当候选物化视图的数量较多时,在某个特定存储资源限定内,只能对部分视图进行物化。此外,多维数据集固有的稀疏性导致部分候选物化视图物化价值较小,基于上述描述,本文提出一种适用于等尺寸视图集的物化效益模型。将候选视图对应子视图的用户查询频数与候选视图记录数的差值相结合,计算候选视图集中各个视图的效益值,进而选出最价值较高的视图进行物化。考虑到数据仓库时变性的特点,本文提出一种物化视图动态调整策略,定期收集用户查询语句并将其聚类,生成候选视图集。根据效益模型衡量候选视图集中视图的效益值。在一定存储空间限制内,利用某种淘汰规则动态对视图进行调整。基于全国航空公司机票结算数据的实验表明,该策略使数据仓库在不同阶段保持了较高的查询响应性能。

关键词： 数据仓库   海量存储   数据恢复  

摘要： TD(Teradata Data Warehouse Appliance)广泛适用于新采用数据仓库或想要补充现有企业级数据仓库的公司.该平台可用作整合数据仓库、周期性数据集市、灾难恢复或应用程序实施于EDW中前的测试分析沙箱.是数据仓库一体机,能对数据仓库的海量和长期存储,并增加您的数据和分析功能.

关键词： 电力公司   数据仓库   CRM系统   ERP系统  

摘要： 电力资源需求随着社会的发展不断扩大。电力是一种清洁能源，使用方便，干净，也可以通过无污染的方式获得，通过水力、风力等方式产生的电力资源是无法大量储存的，并且运输线路的长短直接决定了其损耗程度，这些对电力的调度和合理分配都提出了很高的要求。电力公司在发展其业务，处理其业务的过程中产生了海量的数据，如何发挥这些数据的潜力，为电力的调度与分配服务是电力公司的工作重点，既要考虑电力资源的特殊性，又要考虑顾客的满意度。论文以A公司为例，构建统一的数据储存系统——数据仓库系统，并将之与ERP系统、CRM系统进行整合，确保数据仓库能够储存并且处理系统的数据，并能提供使用。　　本文通过查阅相关资料，了解到数据仓库技术在CRM系统与ERP系统方面的应用，国内的研究都集中在数据仓库与CRM系统或者与ERP系统的结合，而关于三者的结合方面的研究非常少。也发现国内对于数据仓库发展还主要出于储存阶段，数据仓库与其他储存数据系统的最大不同在于对数据的处理，经过不同程度处理的数据会有区别的储存，而国内电力行业大部分研究对于数据的处理、分析都比较薄弱。同时，ERP系统与CRM系统是大多数企业最核心的两个系统，一个是产品端，一个是销售端，这三者的结合是十分必要的。　　论文在对ERP系统和CRM系统产生的数据的基础上，对电力行业数据仓库的构建、功能、系统的安全性做了全面的介绍。首先论文从基础理论展开，详细介绍了数据仓库理论，ERP理论以及CRM理论及其发展意义。其次，对于国内外有关理论的综合应用也做了介绍。接着对A公司的信息系统发展现状做了介绍和分析，再此基础上展开了系统总体的设计。数据仓库的构建主要从概念模型入手，从软硬件平台的搭建开始，主要采用SAP特有的ABAP/4开发平台，为保证数据的一致性和相关性，所有的应用程序系统的网络环境主要使用A公司现有的广域网环境，接着介绍了系统的基本功能，包括联机帮助、多语言支持、搜索帮助等等，并在功能介绍中详细讲解了系统的搭建以及运用的方法。系统的安全性主要从数据储存安全(RAID技术、数据备份两方面)、数据库服务器安全、系统变更安全、权限安全(权限对象控制来实现)、密码安全、安全审计、网络安全、七个方面进行设计。作为投资巨大、应用周期长的系统而言，一定要具备很好的拓展性，在论文最后对系统的拓展性进行了介绍。　　通过本文的研究，为A公司运营搭建了一个数据仓库系统，结合CRM系统以及ERP系统，有利于电力公司的发展，对于电力公司对电力资源的调度和分配能力也无疑是一个极大的提升，本文对以后的数据仓库应用也有着很好的参考价值。

关键词： 数据仓库   局部莫兰指数   数据采集   WebGIS   校验与分析  

摘要： 水文遥测数据是水文研究工作的基础,实时水文数据的校验和分析在洪水预警与抗灾指挥工作当中至关重要,本文针对目前水文遥测数据采集与实时计算分析中面临的问题和挑战,结合当前先进的云计算技术,开展基于混合云平台的水文遥测站点数据校验与分析系统的集成研究,并对传统遥测降雨数据校验方法加以改进,引入空间关系概念,建立基于局部莫兰指数的遥测降雨数据校验方法。具体研究内容和结论如下:(1)针对目前庞大的水文数据和复杂的数据类型,以阿里云服务提供的公有云存储结合私有云的存储方式构建混合云存储,并提供安全的VPC专用数据通道用于公有云和私有云的数据互换,实现了水文数据存储容量的弹性扩容,解决了以往水文数据存储紧张时的扩容成本高,操作繁复问题。(2)针对各地水文遥测站点分布面广而分散、数据采集要求高的特点,构建了分布式的遥测数据采集子系统,设计了遥测数据表单与存储格式,实现了各野外水文遥测站点数据的统一收集,加快了数据入库的进程。(3)构建了遥测水文数据分发子系统,采用CDN联合P2P加速分发技术,使实时遥测数据绕过忙碌的互联网络节点,通过附近闲置的服务器资源实现数据的快速传输。同时丰富的自定义用户配置权限,大大便利了对于数据使用权限的管理与分配。(4)应对防灾抗灾工作的数据分析需求,构建遥测数据分析子系统,实现了遥测数据的站点实时动态监控和预警降雨量值的实时预警,同时利用HTML5技术和ECharts提供应用程序接口,开发各式图表样式,来直观展示水文分析结果。(5)利用局部莫兰指数进行水文遥测数据的校验,并与传统的三倍方差异常数据分析方法进行对比,表明局部莫兰指数分析效果更佳,可以有效提高遥测水文站点数据校验的精度。

关键词： 数据仓库   数据集成   ETL   社会保险  

摘要： 该文主要通过研究社保系统数据集成中使用的ETL方法，并结合同煤集团社会保险管理信息系统的现状，提出了采用数据仓库法实现同煤集团社保系统的数据集成。重点介绍了社保系统数据集成中ETL的开发。经过验证能够建立统一的、完整的、高质量的社保系统数据仓库。

关键词： 社会保障卡管理系统   B/S架构   J2EE框架   数据仓库  

摘要： 社会保障卡全称“中华人民共和国社会保障卡(People's Republic of China social security card)”，由人力资源和社会保障部统一规划，应用于劳动和社会保障各项业务领域的集成电路卡，作为劳动者在劳动保障领域办事的电子凭证[1]。应人社部要求，黑龙江省力争用5年左右的时间，实现金融功能社会保障卡全覆盖目标。　　本课题的研究内容是黑龙江省社会保障卡管理系统的设计与实现，在金保工程“数据大集中”的模式下，本文当中详细的进行了社会保障卡管理系统的整体详细的需求方面的研究和技术方面的可行性。　　省社会保障卡管理系统系统采用B/S架构，以J2EE为框架标准，在“省级大集中”的建设模式下，部署在以Weblogic12C、Websphere和Tomcat7.0做集群的Web应用服务器上;其中业务系统数据存储在SybaseASE12.5数据库中，非结构化数据保存到MongoDb中。通过在Struts框架下开发业务逻辑模型、JavaScript前台技术支撑整个系统的流转运行。对于系统性能提升发面，由于该业务系统的业务并发量及数据量较大，为了降低数据库、服务器压力，提升用户满意度，集成Memcache缓存系统提升了照片查询的响应速度。此外，该项目通过oracle数据仓库建设提供给决策者一种全新的方式，系统通过嵌入saikuOLAP(联机分析处理)展现工具提供了多种图表形式，将数据以不同维度不同形式进行展示，易于决策者分析。最后，通过对系统进行功能测试，确认系统满足用户需求和系统可执行性要求，同时通过性能测试验证了系统的稳定性和并发性，最终实现了系统的建设目标。该系统已经在实际应用环境部署，实现发卡地区全覆盖，用户反馈系统体验良好，已经达到了既定目标。