课程文献中心 更多>>

关键词： ETL   数据仓库   数据抽取   数据转换  

摘要： 随着信息化建设的开展,政府加大投资力度进行信息系统建设,以帮助政府进行电子政务处理和管理工作。这些系统的运行,积累了大量的业务数据;但各个系统的业务数据分布在各自的系统中(操作系统、数据库管理系统和数据标准都不相同)。这些数据之间缺乏对应和转换关系,协同能力较差,形成“信息孤岛”。信息虽然可以在本系统中进行流转,但与其他系统的交互性较差。各自孤立运作的系统将会产生大量的冗余数据和造成业务人员的重复劳动,而采用传统点对点的数据交换方式将使得系统的集成费用和维护成本成倍增加。构建公共数据中心成为当务之急。 ETL(Extractio、Transform and Load,数据抽取、转换和装载)是构建公共数据中心的关键环节。ETL系统将一个机构的所有的信息资源集成到一个无缝的、并列的、易于访问的数据资产中;这样可使一个功能强大的数据资产运作起来就像一个单一系统。ETL通过建立底层数据交换平台来联系整个部门机构的异构系统、应用、数据源等。该平台用于满足机构内部的业务系统、数据库、数据仓库,以及其它重要的内部系统之间无缝地共享和交换数据的需要。 本文以本人参与的上海市浦东新区政府公共数据中心信息系统项目为依托。先分析和设计公共数据中心信息系统,再按照公共数据中心的实际需求,对公共数据中心的ETL工作过程进行设计和实现。首先,鉴于公共数据保密性的特点,设计了数据不同的获取方式。公共数据中心支持在线数据采集,也支持数据从光盘等介质上传到数据中心。其次,在设置数据转换规则的过程中结合相应领域知识,保证数据质量。再次,前置机之间实行负载均衡,保证数据抽取效率,提高系统的可用性和可扩展性。最后,将数据转换的不同步骤分配到两台ETL服务器来完成,保证转换效率。 本文主要内容如下： (1)数据仓库技术基本理论;(2)公共数据中心信息系统总体需求分析;(3)公共数据中心信息系统总体设计;(4)公共数据中心信息系统ETL的设计与实现：ETL过程设计、ETL环境准备、ETL实现、ETL测试、异常处理、ETL日常管理。

关键词： ERP   商务智能   数据仓库   ETL   联机分析处理  

摘要： 企业管理对决策提出了越来越高的要求，而决策的正确性及决策效率依赖于数据的支持。传统的ERP系统是当今被普遍采用的一种企业级管理软件，然而，它以面向事务处理为特点，很难为决策支持提供强有力的保障。采用数据仓库技术的商务智能理论为决策的数据支持提供了完整的解决方案，它提供使企业迅速分析数据的技术和方法，包括收集、管理和分析数据，将这些数据转化为有用的信息，然后分发到企业各处。 从某企业的实际需求出发，提出了一套应用数据仓库技术的产品销售系统的解决方案。该系统能够管理日常销售数据，根据销售报表分析销售业绩并制定销售战略，为公司的销售部提供了智能的市场销售策略分析方法，从根本上解决了销售数据不能成为制定销售战略依据的问题。 首先论述了商务智能的理论基础，然后介绍ERP系统中销售模块的概况，分析出业务需求和数据源，在此基础上，提出了数据仓库的总体设计。以Oracle11g为主要平台和工具一层一层地搭建数据仓库。采用Oracle Warehouse Builder集成工具实现数据的提取转换加载，最后，在保障了数据质量的基础上使用Analysis Services工具进行联机分析处理，同时结合多维数据集技术扩展OLAP的分析功能，得到销售分析的结果，作为制定销售方案的依据。为公司管理决策层分析市场动向、制定销售策略提供了有力的数据支持，对ERP系统中其他决策支持模块的研发具有一定的理论价值和现实应用价值。

关键词： 客户关系管理(CRM)   数据仓库技术   意义   应用原则  

摘要： 在客户资源越来越受重视的今天,客户关系管理(CRM)作为一种"以客户为中心"的营销理念,正被越来越多的企业所采用。而随着客户数据的不断扩充和膨胀,要求有一种更为有效的工具对这些数据进行采集和管理,这一有效手段就是数据仓库技术。文章论述了数据仓库的内涵及其对CRM的重要意义,并对如何运用数据仓库技术为CRM服务提出了一些看法和见解。

关键词： 数据共享   数据仓库   OLAP   数据安全  

摘要： 目前,国内各城市交通信息网络平台的各个子系统只是在单个城市交通平台中局部的、小范围的、比较单一的、相对较为独立的进行运转。不同交通管理、规划部门在开发交通网络信息平台时委托不同的开发商或公司,其建立起来的各种交通信息子系统的信息表现形式也各不相同;不同时期,不同阶段交通信息平台的开发需求不一样,导致各信息子系统中的数据存储格式也不能达到一致;交通信息子系统涉及计算机、通信等许多领域,各种规范之间也造成了数据规则的不一致,等等。这就必然造成各个信息子系统之间无法实现有效的连接,综合交通信息系统也无法实现各个信息子系统之间信息的有效整合。 多城市、多平台交通信息网络平台的研究主要用于实现各个信息子系统之间能够有效进行连接,并在已有子系统的基础上建立起相对完善的多城市、多平台交通信息共用平台,使这些信息子系统能够实现资源共享、信息共用,相互协调工作,实现全面、准确、高效地对交通信息进行综合管理和控制。从而在减少交通拥堵、降低资源浪费、增加经济效益、促进社会发展和城市交通规划统筹兼顾,综合治理,标本兼治上起到积极的推进作用,多城市、多平台交通信息平台的建立与完善也必将在实现高效、便捷、舒适的交通社会中发挥重要作用。 论文整体结构是以多城市、多平台交通网络结构关键技术为基础进行论述的,首先对比各种关键技术,提出适合本平台实现的方法,而后结合项目需求进行关键技术的实现,在论文的最后,整合各种技术搭建多城市、多平台交通信息网络平台。 论文首先在简要介绍国内、国外城市交通信息系统的发展现状的基础上,通过对比分析多个城市交通信息网络平台数据信息建设现状,提出适合多城市、多平台交通信息网络平台需要,构建以数据共享、信息提取、分析服务和决策支持为主体的信息网络平台总体构架和适合在多城市、多平台交通信息网络结构中应用的关键技术及提供多城市、多平台交通信息网络搭建所需的技术手段。 论文第二部分重点对数据库访问接口技术进行了研究,通过对ODBC和JDBC的数据接口方式进行简要介绍和对比分析的基础上,重点对多城市的数据库数据抽取、转换、清洗、装载的Transact-SQL、调用命令行工具BCP和使用数据转换服务DTS对数据进行处理的三种方法进行了探讨和分析。通过Access、Oracle、txt与SQL Server之间数据的迁移三种具体转换实例的介绍,提出了适合本平台数据转换的方法。 论文第三部分在数据信息转换迁移功能实现的基础上,主要对数据信息、的整合分析以及形成OLAP多维分析报表的基本分析操作、存储方式和逻辑建模进行了具体的研究和探讨。通过对多维OLAP报表工具：开源项目OLAP引擎Mondrian的具体实现方法,提出了适合项目的多维分析技术,并在此基础上,对Mondrian的API、schema和MDX语言进一步进行了探讨和研究。 完成多城市、多平台交通信息网络平台的数据抽取、转换、清洗、装载过程和基于OLAP技术的多维数据信息分析功能后,论文对数据信息的关联分析、预测等数据挖掘技术进行了概要的介绍,并对挖掘功能进行了简要的介绍和实现。 论文最后整合了上述关键技术,搭建了多城市、多平台交通信息网络平台。重点对多城市、多平台交通信息网络平台的信息发布功能、信息检索功能、信息分析功能、数据挖掘功能等各个模块进行了介绍。最后一节结合系统平台用例图,系统直观地展示了平台的具体实现过程。通过平台的搭建和关键技术的应用,基本实现了多城市、多平台交通通信息网络平台开发的目的。

关键词： 数据仓库   数据挖掘   开放式基金   投资决策  

摘要： 今天科学技术发展迅猛,产生了大量的数据,对于数据的存储、处理、应用都面临了巨大的挑战。数据仓库技术的提出对于数据的处理、应用给出了新的方向。金融投资现今遍布全球,使用数据仓库技术对金融投资进行决策分析,是金融投资和计算机技术融合的热点问题。 针对当前的金融热点问题之一的开放式基金的投资决策,设计出基于数据仓库技术的开放式基金投资决策支持系统。应用数据挖掘、模糊数学等知识构建了一种新的决策投资模型和评测体系。在该模型中,添加了非文本数据作为新的数据变量,同时根据对关联规则方法、模糊处理技术的研究,采用了新的数据仓库模型对数据进行计算,还采用了一种新的基金评估的计算方法,设计基金决策支持系统。 通过对基金公司的实地考察,挑选出具有代表性的相关因子构建出基金投资评估体系,对所收集到的数据,应用关联规则方法、模糊处理技术等知识对各项指标进行分析,得到了基金投资各因素的相关关系。根据数据挖掘分析得出的结果,以及对基金投资现存的投资风险、服务理念、公司团队等分析,同时探讨基金产品的关注度、服务等方面的问题。最后对投资者所关注的基金的风险度、投研能力等给出综合分析结果,给管理者和投资者相应的建议。本系统在理论和实践上为管理者和投资者基金投资决策提供了分析工具和方法。基金决策系统的建立,结合了中国的实际,是符合我国企业需要﹑行业需要﹑部门需要﹑国家需要、消费者需要的基金评估体系。

关键词： 数据挖掘   数据仓库   关联规则  

摘要： 随着人才市场竞争日益激烈,学生的教育素质是衡量各高校的一项重要标志,因此教学质量是关键。如今多数高校都有相应的教学管理系统,并累积了大量教学过程中的数据,如学籍数据,成绩数据,教师数据,评教数据,排课数据等,但通常教学管理系统只会对这些数据做一些简单的统计分析,无法发掘数据背后的一些宝贵信息来指导教学。课程体系的设置,人才培养方案的制定是否真的合适,只能通过调研这唯一途径。各个科目的成绩参差不齐,教师的评教成绩处于不稳定状态,怎样将教学效果达到最优,这些都是教学管理人员一直思考的问题[1]。 20世纪80年代中期以来,数据挖掘成为一个相对发展较快的产业。该技术是从大量的、不完全的、模糊的、随机的数据中提取隐含在其中,且人们事先不知道的、但又是潜在有用的信息和知识。通过挖掘出来的信息,为教学管理者提供更为全面的分析,运用于教学管理的各个方面。关联规则挖掘比较,是数据挖掘中研究比较多的一个方向,将研究的数据进行关联规则处理,查找出这些数据之间的潜在联系。 本文首先对数据挖掘进行基本的介绍,从数据挖掘的产生,到如今数据挖掘的广泛应用。对数据挖掘的不同算法分别进行讨论,简单分析各种算法的特点。结合实际教学管理情况,选择其中的一个关联规则算法——Apriori算法进行数据挖掘。文中详细讲解了Apriori算法频繁项集挖掘的过程,并针对其不足进行改进。同时利用Microsoft SQL Server 2005建立教学管理数据仓库,结合使用改进后的关联规则算法Apriori算法进行教学管理信息挖掘系统的建立。 通过数据挖掘,查找出教学过程中教学相关信息之间的联系,具体在教学管理过程中主要应用于以下几个方面: 1、从学生评教数据各项指标中得出任课教师、及其所授课程获得学生认可、喜爱并能很好掌握的关键因素。 2、学生在学习过程中,课程与课程之间的一些潜在联系。根据课程之间的潜在联系,及专业侧重点的不同,有针对性的对某些课程进行调整。 3、教学安排过程中课室、安排的周学时等对学生学习该门课程的影响。

关键词： 事项法   数据仓库   会计信息系统  

摘要： 二十世纪末至今,信息技术革命和经济全球一体化趋势使企业面临着前所未有的竞争。企业要适应现代市场竞争就必须进行企业信息化。会计信息系统是企业信息系统的一个重要部分。其在企业管理和经营框架中处于一个基础性和关键性的地位,为企业信息化战略提供了最基本和关键的数据。环境是科学研究的逻辑起点,在信息化环境下,会计信息系统所依存的环境发生了巨变,传统会计理论面临着严峻挑战,传统会计信息系统的弊端也开始凸现,会计信息不能满足信息使用者的多样化需求,这与会计信息的决策有用性目标出现背离。因此,有必要重构新型的会计信息系统。本文所构筑的会计信息系统是建立在事项法理论基础上,并引进了数据仓库技术作为构建支持。 本文首先对环境进行分析,说明了会计信息系统重构的必要性,然后阐述了会计信息系统重构的理论基础事项法,以及会计信息系统重构的技术支持数据仓库及XBRL技术。本文对传统会计信息系统的构建原理及其局限性进行了分析,并提出了建立一个决策导向型的智能型会计信息系统的构想,在此基础上,分层次的介绍了基于事项法的会计信息系统构建的原理,以及对会计信息系统的逻辑结构提出设想,最后对会计信息系统效用进行定位分析。

关键词： 数据库系统  

ISBN: (纸本)9787302247012

关键词： 质量守恒定律   金属平衡   数据仓库   应用解决方案  

摘要： 在钢铁企业生产中,根据质量守恒定律,所有的金属应该在其准备投入生产开始,一直到完成整个生产结束,在理论上质量时刻保持一个平衡关系,这里称其为“金属平衡”,而基于此原理对于钢铁企业内部金属料进行有效统计分析、发现并改进各工序金属损失率、提高金属利用率等工作的称之为“金属平衡管理”,它是钢铁企业一项综合性技术管理工作,是冶炼、轧钢工艺技术和管理水平的重要标志。 本文从质量守恒定律出发,总结提炼出金属平衡模型,根据钢铁企业生产管理的特点和难点,结合数据仓库原理和开发的方法,以实际的钢铁公司炼铁、炼钢、轧钢产线为原型,提出了一套实用的基于数据仓库技术的金属平衡管理应用解决方案,包括系统架构、ETL过程、指标体系以及数据呈现与统计分析。 该解决方案可以改进企业管理的基础工作、加强企业的生产管理,提高管理水平,还可以为企业的计划部门制定作业计划和财务部门进行决算提供数据支持,并为企业领导决策提供重要参考。

关键词： 数据挖掘   数据仓库   直接数据挖掘   间接数据挖掘  

摘要： 近年来,数据挖掘引起了社会各界特别是信息产业界的极大关注,其主要原因是在统计学和数据库知识高速发展的今天,以前积累了大量数据,迫切需要将这些数据转换成有用的信息和知识。通过数据挖掘技术获取的信息和知识可以广泛用于各个领域,包括商务管理、生产控制、市场分析、工程设计和科学探索等。