课程文献中心 更多>>

关键词： 列车调度指挥系统   列车运行实绩   数据仓库   体系结构   数据服务  

摘要： 为促进铁路运输信息化管理和智能调度的发展,结合我国铁路列车调度指挥系统的结构,在分析列车运行实绩数据的构成和信息流的基础上,提出由数据采集层、数据服务层、业务逻辑层和应用层组成的铁路列车调度指挥系统数据仓库的体系结构。以铁路列车调度指挥系统的基础数据、列车运行实绩和行车操作数据为数据源,通过操作数据库实现数据的预处理、转换和加载。通过建立概念模型,建立维度表和事实表,设计星型结构的数据仓库。基于业务逻辑和需求分析,构建列车运行实绩数据立方体,实现不同层次的数据分析和展现,为铁路列车调度指挥系统数据仓库的设计和方案提供参考。

关键词： 关系数据库   多维数据模型   数据仓库  

摘要： 讨论数据仓库逻辑模型构建方法和模型,分析在关系数据库上构造的多维数据模型在进行常规的OLAP处理时的存储和时间开销。

关键词： 高速列车   谱系化   数据仓库   数据管理  

摘要： 高速列车谱系化数据仓库是面向主题的、集成的、时变的、相对稳定的,并集合了高速列车空间数据和非空间数据。如今的高速列车谱系化研制平台已经在谱系化理论的基础上,构建了虚拟可视化、快速工艺文件生成等八项子系统为核心的一体化平台。高速列车谱系化数据管理平台是该一体化平台流畅、高效运行的基础。本文基于高速列车谱系化相关理论研究,设计并构建了高速列车谱系化数据管理平台。系统阐述了平台的整体架构、模块组成以及各个模块的功能,界面和用途,为高速列车谱系化平台的运行和管理提供了基础支撑。

关键词： 数据采集   数据对照   数据仓库  

摘要： 针对厦门市儿童就医人群疾病谱及变化趋势和就诊行为进行分析,研究样本不够全面,或仅分析医保数据,缺少自费病人数据,或仅分析住院数据,缺少门急诊数据,且缺少地区较具代表性的全样本数据,无法完整、客观地反映儿童疾病谱构成以及分析结果。采取全样本量分析,需要保证原始数据源可靠、安全传输、全量采集,进行数据对照,清洗成标准化数据集,并构建数据仓库。

关键词： 大数据   ETL   Kafka   数据仓库   Disruptor  

摘要： ETL系统是构建和维护数据仓库的基本构件,对异构数据源中的业务数据进行抽取、清洗、转换可通过ETL工具将其装载到数据仓库中。但是,当数据量上升到一定程度时,传统的ETL在数据处理速度以及数据的准确性方面会大大降低,并且不能满足数据源多种多样的变化需求。针对如何同时具有高效的数据处理能力和通用的数据源访问能力的问题,提出一种对传统ETL进行改进的方案。利用Kafka和Disruptor并发框架相结合,从数据源中抽取数据放入Kafka集群,结合Disruptor高吞吐和低延迟的特点,实现了数据高效的传输,使数据可以在不同数据源之间进行清洗和转换,同时在数据传输准确性方面有了极大的改进,保证了数据传输的一致性。

关键词： 数据仓库   抽取-转换-加载   quartz集群调度   贪婪调度算法   Kettle  

摘要： 随着数据仓库规模越来越大,ETL任务也不断增多,单机调度ETL任务导致多数ETL任务不能按时运行或者不能运行情况时常发生。对基于Kettle的ETL任务调度方法进行了研究,根据这种ETL任务特性,ETL任务调度方法作用的对象是一批相互没有制约的任务。把ETL任务调度分为两个阶段:任务分配与任务执行。为了避免集群负载的不均衡,根据ETL任务的关键特性数据源的数据量,使用贪婪调度算法进行ETL任务分配。为了避免一些ETL任务获取不到机会执行,采用动态调整任务优先级的方法,使用高响应比优先调度算法执行ETL任务。通过ETL任务测试该集群调度方法的效率,主要比较ETL任务执行时所消耗的CPU、内存,以及一次全部的ETL任务执行完成后使用的总时间,并与轮转调度算法进行对比,结果表明效率高于轮转算法。

关键词： 数据仓库   ETL   商业银行   商业智能  

摘要： 本文基于国内某商业银行数据中心的新核心系统项目,首先介绍近年来数据仓库的国内外发展状况,其次根据商业银行各业务系统的特点,分析出建设商业银行数据仓库的重大意义和存储规划。最后详细介绍了数据调度ETL系统的开发与设计,从各个源系统中抽取数据到数据仓库的实现方法,对银行数据仓库的设计与实现有一定的参考应用价值。

关键词： 医院信息化   数据仓库   技术  

摘要： 目前,互联网业务正在不断发展,而医疗数据分析业务也是互联网业务中的一个非常重要的环节,数据仓库是面向主题的集成的相对稳定的反映历史变化的数据集合,作用是为经营管理者决策提供支持。建设一个提升医院运营能力的数据仓库,对于提高医院管理决策水平,加快医院科研进程,提高医院诊疗水平和教学质量,提升医院的品牌服务能力都将产生深远的影响。同时其带宽的需求量比较大,对用户进行网络行为的监测是医疗数据分析进行精准推送的关键前提,只有对于用户的观看进行不断的研究分析,才能对自身功能进行较为科学的改进。

关键词： 数据仓库技术   地理信息系统   应用数据应用不充分  

摘要： 首先对数据仓库技术的基本含义进行概述,从数据量大、数据结构不合理、数据应用不充分三个方面入手,对地理信息系统数据处理存在的问题进行解析,并以此为依据,提出数据仓库技术在地理信息系统中的应用对策。