课程文献中心 更多>>

关键词： 物化视图   数据仓库   数据库   业务成果   Star   数据湖  

摘要： 在纳入存算分离、湖仓分析、物化视图等功能后,StarRocks兼具了数据湖和数据仓库的优势。目前,已有数十家企业采用了StarRocks湖仓新范式,并取得了较好的业务成果。2001年11月,一部名为《反恐24小时》的美剧在美国Fox电视台首播。《反恐24小时》采用多线条叙事,各条故事线纵横交错,一经播出就广受好评,让无数剧迷“废寝忘食”“欲罢不能”,但对于镜舟科技CEO孙文现而言,《反恐24小时》代表了另一种意义。

关键词： 大数据中心   数据仓库   HL7  

摘要： 福建省福州儿童医院基于面向服务的体系架构(SOA),以临床数据仓库为核心,采用HL7、IHE等国际标准和规范,构建标准化医院大数据中心,实现了医院内部各信息系统的数据整合、信息共享,满足临床、管理、科研等对数据分析利用的需求,提高了医院精细化管理水平,促进了临床业务的协同发展。

关键词： Greenplum   数据仓库   数据分析   自主可控  

摘要： 针对海量数据分析需求,设计并建设了一套基于Greenplum分析型数据库的数据分析平台,通过数据采集、数据加工建立数据仓库,利用综合分析系统、清单查询系统、数据推送系统和数据服务接口提供多层次的数据服务。Greenplum数据库的采用,大幅提升了数据处理效率,保证了数据处理时效。平台建设过程中采用了诸多的自研工具,基本实现了系统的自主可控。

关键词： 数据湖   数据存储   数据仓库   数据分析  

摘要： 数据湖作为一种新兴的数据处理和分析技术,在处理大规模数据集方面表现出了显著的性能优势。国内外相关文献对数据湖的架构、关键技术和应用进行了全面而深入的研究,为相关研究人员提供了有价值的参考。文章首先对数据湖与数据仓库的概念进行了辨析,明确了两者的区别;其次概述了当前流行的数据湖框架和架构,并详细阐述了数据湖的核心功能,包括多源数据的集成、高效的数据存储和计算能力,以及有效的数据治理等;最后探讨了数据湖研究未来的发展方向,如存算分离技术和云原生应用等。

关键词： Python语言   Hive数据仓库   Hadoop环境   加载数据  

摘要： Hive数据仓库存储着海量用户数据,如何加载并分析处理这些数据,显得尤为重要。着重介绍了3种技术,即通过查询加载数据、查询语句中创建表并加载数据、import导入Hive表数据加载数据。利用文中技术,可以十分方便地在Hive数据仓库中对数据进行加载,进而达到分析处理海量数据的目的。同时,使用Python语言可以编写脚本或者使用调度工具实现自动化操作和批处理任务,这对于Hive数据仓库的维护、数据清洗和报表生成等任务非常有帮助,可以提高工作效率和准确性。

关键词： 客户信息   融合管理   供用电合同   供电公司   数据仓库   供电所   自动筛选   生产作业  

摘要： 数字技术的引入给能源电力行业带来深远变革,通过数字化智能化技术融合应用,为能源高质量发展提供了有效支撑。近年来,国网洛阳供电公司以解决基层生产作业和企业管理中的痛点难点问题为出发点,融合管理、技术、业务等要素,围绕核心业务开发7项共性数据集、6项数据场景推广应用,切实提升了基层数字化能力和员工获得感。搭建数据仓库基层减负更务实“古安供电所,你们本月即将超期的供用电合同有4份,请尽快联系客户完成续签。”11月7日,国网洛阳供电公司合同管理专责使用“数智豫电”平台基层数据服务专区“供用电合同有效性分析报表”工具,自动筛选临期供用电合同明细,通知相关供电所及班组及时续签合同并完善客户信息,效率较以往人工筛选提升3倍以上。

关键词： 试飞数据   数据架构   湖仓一体   流批一体   按秒聚合   数据仓库  

摘要： 试飞数据是民机飞行试验的重要产物,具有测量参数数量大,数据体量大,飞行试验数据与试飞任务信息关联性强等特征,支撑飞机型号取证与设计优化等任务;试飞数据平台数据架构对多源异构数据集成接入、多类形态数据存储管理、多种层次数据处理分析等技术进行了研究,采用湖仓一体的关键技术和方法打造试飞数据全集;试飞数据接入采用流批一体的数据处理技术,融合Spark和Flink主流数据处理引擎,具备试飞数据快速入库能力;提出按秒聚合方法,具备PB级多维度试飞数据压缩存储功能,存储性能提升近10倍;采用以秒为索引条件支持快速检索,强化数据湖查询能力;研究数据仓库技术,设计试飞数据多层数据模型,具备多维信息精细查询,多层数据灵活钻取,多功能自定义函数集成等功能,并成功应用在某型国产民机的飞行试验数据管理中,服务于试飞数据用户,提高了试飞数据管理效率与试飞数据应用价值。

关键词： 大数据技术   税收信用   智慧税务   税收治理   数据仓库   信用评级  

摘要： 大数据技术与税收信用管理存在天然的契合性。本文从改善税收信用数据质量、推动税收信用动态管理、构建税收信用协同共治机制三个维度探索大数据技术驱动税收信用管理的底层逻辑,基于大数据技术驱动税收信用管理创新过程中面临的税收信用数据治理未成体系、税收信用评价指标体系尚不完善、缺乏共享机制与数据标准、税收信用体系缺乏动态评价与反馈机制等挑战,提出涵盖税收信用数据仓库、税收信用数据溯源机制、税收信用动态评价机制等在内的大数据税收信用管理应用架构。在此基础上,从实践层面探索税收信用管理创新的实现路径,即构建税收信用数据中枢、设计嵌入大数据技术的税收信用体系行动方案、建立税收信用评级动态调整与反馈制度、构建税收信用动态管理模式以及保障税收信用体系运维安全。

关键词： 乙烯项目   工程建设   示范样板   智慧工地   项目管理   数据仓库   数据集成   效能提升  

摘要： 中国石油网消息11月中旬,位于塔克拉玛干沙漠边缘的独山子石化塔里木1200 kt/a二期乙烯项目正加速推进。独石化聚焦“数智工程”领题破题,研究提出建设炼化工程项目管理、智慧工地、互联网+安全、数据仓库"四大平台",深入推进数据集成、场景拓展和效能提升,打造数智化工程建设新样板。

关键词： 精细化管理   财务综合分析   数据仓库  

摘要： 加强精细化管理是推动公立医院高质量发展的重要引擎。S医院通过建立业财融合的多维度财务综合分析体系,从精准核算、数据挖掘和分析、经济运营成果可视化展示等方面提高管理水平,为管理者科学决策、改善医疗服务质量提供数据支撑,取得了初步成效。