课程文献中心 更多>>

关键词： 数据仓库   数据集市   OLAP   粒度划分   EDW  

摘要： 数据仓库技术是基于数学及统计学严谨逻辑思维的并达成“科学的判断、有效的行为”的一个工具。数据仓库技术也是一种达成“数据整合、知识管理”的有效手段。它从不同视角对企业经营各方面的信息进行精确分析,准确判断,为企业的决策者做出正确的决策提供了重要的支撑。典型的数据仓库系统,比如:经营分析系统,决策支持系统等等。也随着数据仓库系统带来的良好效果,各行各业的单位,已经能很好的接受“整合数据,从数据中找知识,运用数据知识、用数据说话”等新的关系到改良生产活动各环节、提高生产效率、发展生产力的理念。 本文结合已有的数据仓库技术理论,对河北网通的基于数据仓库的账务决策分析系统项目进行了设计与实施。提出了面向数据仓库的账务决策分析的体系结构及相关主题域,并根据“从一个简明主题开始实施”的原则,采用自底向上的方法进行构建,首先建立部门数据集市,实现区域自治,对相关部门的应用进行分类复制,对每个数据集市进行数据重构,逐步扩展到企业数据仓库（EDW）。重点工作是在账务主题域的数据集市构建过程中实现了客户、账户、用户实体,帐单、欠费、存款、清单、产品、优惠实体等主题域信息,根据不同分析需求实现不同汇总粒度的划分和数据的分割,实现了不同数据源数据的集成等,并针对收益分析构造了多维模型,基于此模型利用固定（预定义）报表、图表、即席查询（Ad-Hoc）、EIS（Executive Information System）、多维动态分析、数据挖掘等展现方式,从不同维度、不同粒度、多种视角形象直观地显示分析数据。重点对计费系统账单数据进行OLAP分析,建立了面向计费系统的财务决策的数据集市。 通过该项目的设计与实施,探索出了一种将数据仓库技术与具体应用相结合的有效的方法,以业务支撑系统的数据以及其他相关数据作为基础数据源,采用科学的数据抽取、整理、存储等方法,挖掘数据内部蕴藏的大量有用信息,通过科学的分析,做出可信的预测,从而为市场决策管理者和市场经营工作提供及时、准确、科学的辅助决策依据。 本项目的应用为提高公司整体管理效率,确定决策分析方向提供了数据依据。本文的经验可供其它数据仓库项目的实施借鉴,研究成果经进一步完善和扩充可推广到与通信行业相关的各企业应用。

关键词： 数据仓库   数据挖掘   关联规则   零售业  

摘要： 信息作为现代企业的宝贵资源,占据着越来越重要的地位,成为科学管理的基础,正确决策的前提,有效调控的手段。在零售行业,随着电子商务和商业POS系统的广泛应用,数据库中收集了大量关于商品销售情况的数据,为商家提供了更为深入地了解客户需求信息和购物行为特征的可能性。而大多数由过去遗留下来的异构的系统、应用、业务流程以及数据源构成的应用环境已经不能满足这样的需求。 论文以大商集团决策支持系统项目为依托,通过对零售行业的背景与操作流程的分析,提出了建立基于数据仓库的零售决策支持系统,在一定程度上应用改进的Apriori算法关联规则技术来解决现实商业问题,使其能够协助企业领导作出决策,以提高企业自身的竞争力。 首先介绍了本系统的研究背景、研究内容和研究意义,论述数据仓库和联机分析处理技术在同行业的应用现状。然后讨论了Apriori算法基本技术和方法,尤其侧重于该算法在零售业的数据挖掘技术的分析说明。 其次,解释了数据仓库的基本原理,并对它的体系结构、数据组织、开发设计进行详细地阐述。介绍数据仓库开发过程中的数据模型设计技术和设计步骤,详述了数据的抽取、净化和加载过程。 第三,详细论述从数据仓库数据库、多维数据集的构建方面设计一个基于数据仓库的零售行业决策支持系统的过程,并将Apriori算法进行相应的改进并应用到系统中,取得了很好的效果。

关键词： 数据仓库   公安行业   数据模型   ETL  

摘要： 随着全球信息化的快速发展,数据仓库系统在国内外各行各业的应用也越来越多。公安行业,随着信息化工作的逐步推进、现代计算机网络的普及与延伸,“金盾工程”的全面实施,仅仅通过业务数据库来处理警情、案件办理、治安等业务工作已经不能完全满足需求,如何更好地利用这不断增长的数据,如何有效地建设与实施数据仓库系统,以实现公安数据资源的高效使用,进行预警发布和警务协作,为警务工作提供决策服务;为提高“打”、“防”、“管”、“控”工作效率提供支撑,已经是公安行业所关注的一个重要问题。 本文描述了XX省公安行业警务综合信息系统数据仓库的建设过程,针对公安行业特定的特点,给出了一个适合公安行业数据仓库系统的解决方案。 本文首先介绍了数据仓库概念及其相关技术、包括数据仓库概念、数据仓库ETL过程、OLAP技术等概念,随后着重描述了XX省公安行业警务综合信息系统数据仓库的整个建设过程。在需求分析、总体设计与系统实现等阶段,详细分析了各个阶段的工作内容及使用的相关技术与方法,结合警务综合信息系统数据仓库的实现过程,研究了数据仓库相关技术在项目中的各种应用。在本项目总体设计与实现阶段,重点阐述了数据仓库系统的数据抽取、转换和加载,多维模型的建立、数据仓库前端应用的展现。 通过本课题的研究,得到一个适合公安行业数据仓库的可行性解决方案,与“金盾工程”建设相结合,把公安情报信息资源作为新时期公安工作的重要战略资源。本课题的研究已经在实际应用中广泛推广,且成效显著。

关键词： 数据中心   金税三期   同步技术   数据仓库  

摘要： 在近三年内,贵州地税省、市两级数据中心得到了快速发展,已经实现了从县地税局到市级地税局的数据的大集中,同时各市级地税数据中心都根据自己的需求开发了相应的软件来服务税务部门,并且具有国内同行业的先进水平,实现了高效、可持续、稳定和24x7小时的不间断运行,贵州地税数据中心的快速发展,对其税务相关的业务和上级税务部门对数据深度利用以及相关政策的制定发挥着巨大的作用,本人也有幸参与了该项目。同时该项目正处在金税三期工程阶段,金税三期工程是一项投资规模大、包含项目多、持续时间长、影响面广的重要的电子政务工程,建设的内容简称为“一个平台,两级处理,三个覆盖,四个系统”。为加大地税系统数据向税务总局集中的力度,进一步提高税务系统税源监控和分析的能力,不断深化“信息管税”工作,税务总局于2010年5月底下发了《国家税务总局关于做好抽取全国地方税务系统税收征管有关数据准备工作的通知》（国税函[2010]235号）,税务总局决定近期开始进行地税系统数据向税务总局集中的实施任务。所以贵州地市级数据向省局数据集中是当前的必要的任务。 本论文分析了贵州9个市地方税务局数据中心存在的问题,对Oracle关键性技术进行详细介绍;并结合贵州省9个地方税务局的具体情况推出相应的技术选型;参照贵州省9个市地方税务局数据中心构建的成功案例,规划出省局数据中心可选的方案;同时结合当前国内外流行的数据库同步技术,推荐适合贵州9个市地方税务局到省局数据中心的同步技术及省局数据中心的数据仓库技术。

关键词： 数据仓库   数据挖掘   质量分析   关联规则   决策树算法  

摘要： 随着计算机技术和数据库技术的快速发展,人们采集数据的能力有了很大的提高,并积累了大量的数据。通常仅仅对这些数据做简单的查询、编辑工作,然而这些数据中隐含了大量对人们有价值的知识、模式以及规律等。人们为了获取这些潜在的信息以指导生产、生活,应运产生了数据挖掘技术。数据挖掘又称为数据库中的知识发现,是指从大量的、不完全的、有噪声的、模糊的、随机的数据中提取人们感兴趣的知识。从数据挖掘概念的提出到现在,数据挖掘技术已得到了广泛研究,并且已经在商业、金融、医疗等领域得到了成功地应用。 近年来,随着高校研究生教育制度的改革与发展,以及大学生就业难的问题日益突出,导致了全国各高校研究生招生规模的不断扩大,招生方式也趋于多元化、自主化,而且各高校之间的竞争也日益激烈。为了扩大学校的规模,高校纷纷降低录取门槛,导致出现社会对研究生教育质量的不信任态度。因此,如何提高高校研究生质量已经成为招生单位急于解决的问题。研究生招生是研究生教育整个周期的最初阶段,其招生质量为提高后续研究生培养阶段质量奠定了基础。因此,可以借助于数据仓库和数据挖掘技术,通过其中的关联分析和决策树分类算法,找出研究生招生质量中有价值的信息,为高校的决策者提供有力的支持。 本文在分析数据挖掘的研究现状、数据仓库技术、关联规则算法以及决策树算法的基础上,主要进行了以下几方面的研究工作： 1)研究学习了数据仓库和数据挖掘的理论知识,主要包括数据仓库中数据的组织、数据仓库的构建、数据挖掘概念、数据挖掘技术的主要内容、处理过程、应用领域以及数据挖掘技术的各种算法,并选取适合于本课题的数据挖掘算法。 2)结合主题“D大学考生来源分析”详细地介绍了数据仓库的构建、基础数据的准备,包括数据抽取、数据清洗、数据转换,以及多维数据集的建立。 3)介绍了数据挖掘技术在考生对初试科目的选择、某大学的调剂生以及推免生分类中的应用。通过分析考生对初试科目的选择,以期发现每门科目的设置是否具有合理性以及预测考生的选择结果;通过对某大学的调剂生和推免生的分类,可以得出哪些地区或者高校的考生是重点招生对象,用于辅助招生宣传方案的制定。 4)介绍了关联规则算法在影响考生录取因素中的分析,分析结果可以辅助高校选拔优秀的考生。 本文根据决策树算法和关联规则算法的理论,最后得出理想的、有价值的规则及结论,从而实现了数据挖掘技术在某大学研究生招生质量分析中的应用。

关键词： 行为分析   数据仓库   数据挖掘   业务支撑   网厅   Oracle   Cognos   Clementine  

摘要： 南京电信网厅行为分析系统的设计是以数据仓库（DW, Data Warehouse）为基础,以数据挖掘（DM, Data Mining）为工具,最终实现辅助完成电信营销决策,解决网厅业务发展问题。 传统的业务支撑系统（Business Support System, BSS）作为电信业务受理的支撑系统,在过去承担了相当一部分客户关系管理功能。但随着业务的拓展,电信客户群的日益复杂,BSS系统不能及时获得用户信息,不能进行数据实时分析,无法根据市场情况随时调整营销策略的弱点越发明显。市场要求引入新系统,来实现实时分析功能需求。 本文主要阐述南京电信网厅行为分析系统的设计、实现与应用。从课题背景和意义的着手,分析了项目的背景和创新意义,简述了系统设计的理论基础,通过项目需求分析,确定了设计和实现方案,并对数据架构和报表做了详细介绍。 在系统设计中使用了Java、Oracle作为数据库基础开发工具,使用Cognos作为用户界面设计,使用Clementine进行流程控制。整个设计界面操作方便、查询效率高,在提升实时分析的速度的前提下,保证了营销分析数据的有效准确。此系统经过调试和验收后,现已交付使用。系统运行稳定、可靠,达到系统开发要求的技术指标。 本系统投入使用以来,重点提升网厅活跃度,提高网厅业务受理量,提升企业营销的发展量和成功率。网厅用户行为分析系统项目的实施,填补了全省在行为分析系统方面自动化处理的空白,给企业带来每年百万元以上的经济效益。

关键词： 数据仓库   多维分析   联机分析处理   数据分析   决策支持  

摘要： 近年来严峻的煤矿安全生产形势已经成为我国社会广泛关注的一件大事,而设计和使用煤矿安全信息管理系统则是各级煤矿管理部门为应对这一问题而使用的主要技术手段之一。随着数据仓库及其相关技术在各领域的研究推广,运用这一技术完善和改进煤矿安全信息管理系统则可以更好的应对日趋复杂的安全生产环境。 随着煤矿企业信息化的发展以及对安全生产重要性的认识有所加强,在过去积累起来的与安全生产有关的数据正在被广泛的应用于各种决策分析之中。特别是近年来数据仓库技术的发展,使得对数据进行分析,从而为企业经营决策做出辅助建议成为可能。 本文重点论述的是基于鸡西市煤矿管理的有关特点设计开发煤矿安全信息网络管理系统及其决策分析系统。论文首先阐述了构建数据仓库的一般步骤及进行多维分析时的注意事项,紧接着讨论了如何设计鸡西市煤矿安全信息网络管理系统,并以该系统为基础,提出了煤炭局下属部门——煤矿行业管理处进行决策分析时的解决方案。该项目试运行,业务系统稳定可靠,决策分析系统较好的满足了煤矿管理部门的智能化决策。鸡西市煤炭局煤矿管理的实际要求为目标,重新设计煤矿安全信息管理系统,并且利用数据仓库技术和OLAP技术实现在该系统中的应用。 该系统投入运行后不但能满足煤矿管理部门的业务要求,同时还具备强大的数据分析处理能力,为领导者的决策提供科学的数据支持。

关键词： 数据仓库   数据挖掘   教务管理   聚类算法  

摘要： 职业学院招生规模在今天被扩大了几倍,为适应发展以及信息技术的进步,促使各学院纷纷建起自己的教务管理系统,系统的应用逐步的提高了教学及管理的水平。系统运行多年,历年来积累了非常多的教学和管理数据。目前这些管理系统多半是参与事务处理,基本缺乏综合分析和辅助决策的能力,更不能对积存的数据进行归纳与深层次挖掘,这使得管理人员在面对复杂情况时不能及时了解相关信息,领导在决策时也没有切实的数据支持。 对教学管理的深入细致分析是学院教学评估的最重要手段,数据仓库技术已经非常成熟,数据挖掘应用目前也极其活跃,数据仓库和数据挖掘技术的结合为决策及教学评估提供了必要的技术手段。本文是在搜集并深入了解了大量的数据仓库和有关的数据挖掘的相关文章,试图通过构建实用数据仓库并采用数据挖掘技术对教务数据进行一次多层次的、多角度的分析和挖掘,并利用挖掘结果来辅助教学决策,从而促进教学质量提高、学生素质提升。 本文首先从决策分析出发,构建数据仓库,探讨了数据仓库和数据挖掘的基本理论和方法,研究了数据挖掘中的聚类算法,结合教务系统的实际情况应用聚类算法中的k平均算法分析了学生成绩的分布情况,从而对试卷质量、教学效果进行有效评估。 在具体挖掘实践中,我们得到了许多的极其有价值的信息,这些信息的发掘对帮助学院了解学生对知识的掌握程度以及课程开发方面需要加强的环节,从而使学院更好地对学生的进行培养,无疑具有重要的指导意义。

关键词： 综合测评   数据仓库   数据挖掘   分类   算法  

摘要： 高校教育体制改革的逐步进行和高校学分制体系的不断完善,对学生管理工作提出了新要求。如何有效的分析和管理学生海量数据,提高管理水平和效率,对高校各项工作起到辅助决策的作用,成为当前学生管理系统亟待解决的问题。本文是用数据库系统和数据库应用中一个非常新颖,并且有很大发展前景的学科——数据挖掘来作为开发工具,以现有的学生测评系统为基础,探讨并构建了一套完整的高校学生综合测评体系,内容涵盖了综合测评过程的各个环节。 第一,本文分析了学生综合评价体系现状及不足,提出了综合测评的新思路,即从学生数据库到数据仓库再到数据挖掘模型的完整测评过程,奠定了测评体系的总体框架。 第二,研究了数据仓库和OLAP的理论和方法,构建了适合于综合测评的学生数据仓库和数据立方体。 第三,研究了数据挖掘的技术和工具,并应用决策树分类法构建了学生综合测评模型。 第四,本文对现有综合测评体系的不足之处提出了有效的改进方法,尤其是针对原有的低效算法提出了一个高效的改进算法。 最后,本文还对所构建的这套测评体系的应用提出了展望,为日后体系功能的进一步扩展指出了新的方向。

关键词： 教育数据仓库   学生评估数据   Cognos系统   Oracle系统  

摘要： 本文介绍了美国马萨诸塞州的教育数据仓库建立的背景、各种功能、存在的问题、重新规划的原因以及未来的发展方向。这些经验表明，教育数据仓库可以很好地为教学评估和提高教学水平服务，但必须经过缜密的规划，需要技术人员与教育专业人员密切合怍，为数据仓库搭建合理的构架，才有可能满足不断增长的数据量和日益复杂的数据分析的需要。