可扩展数据仓库性能管理的研究与设计

可扩展数据仓库性能管理的研究与设计

秦学勇[1]2003年在《可扩展数据仓库性能管理的研究与设计》文中研究说明在信息技术高速发展和激烈市场竞争的今天,企业管理者如何从来自不同数据源的大量的数据中得到良好的决策支持,这就产生了数据仓库技术。本文从数据集成、查询优化和并行技术叁个方面、对数据仓库的性能进行了研究和讨论。在进行数据集成的时候对不同的数据源采用不同的策略,对数据仓库平台中休眠数据的处理我们要根据其产生的特点,预先评估数据的可靠性和价值方面的问题,可以在数据集成的时候将不必要的数据拒之门外,对查找出的休眠数据采用不同的方法从数据仓库中删除它们。当大量的企业内部数据和复杂的外部数据不断进入数据仓库以后,如果用软件的方法和现有的条件已经无法改善它的性能的时候,则必须通过使用并行硬件和并行软件技术来扩展原有的结构以适应新环境要求。本文的第五章中我们建立了一个考试数据仓库平台,通过使用该平台,管理者和用户可以很方便地查询考试方面的信息,我们在数据集成时对文本文件等信息处理和休眠数据的处理、数据的分割和布纹等方面取得了较好的效果。

王志宏[2]2006年在《面向产品族的供应链管理中若干关键技术研究》文中研究说明论文依托国家863高科技计划制造业信息化典型应用示范项目:服装企业CAD/PDM/ERP集成与电子商务(2005AA415140)和浙江省重大攻关项目:快速响应客户需求的产品设计和生产管理信息系统研究及其在汽车配件制造业中的应用(2005AA415280),以及国家863高科技计划项目:哈航汽车协同供应链管理与客户关系管理系统(2004AA413030),对大批量定制环境下面向产品族的供应链管理的若干关键技术进行了深入的研究,并结合某汽车零部件制造企业信息化工程项目,对论文所取得的研究成果进行了应用。第一章阐述了大批量定制和供应链管理产生的背景,明确了大批量定制和产品族的联系。回顾了产品族和供应链管理的研究现状。给出了论文研究的主要内容和论文的整体框架结构。第二章讨论了产品族的模块化和标准化。研究了面向产品族的供应链管理的特点,建立了面向产品族的供应链模型。第叁章提出了主任务点概念,以描述产品族主BOM中的节点信息。以产品族主BOM为统一框架,以供应链的整体成本和交货期为优化目标,建立了数学模型来优化面向产品族的供应链计划。并运用加权有向图描述数学模型,利用动态规划方法来求解模型。第四章提出了产品族中通用模块在同级供应网络中的协同调剂,以解决面向产品族的供应链中同一层次的不同成员之间计划和需求之间的偏差。分析了在大批量定制的不同定制层次下通用模块具体代表的含义。针对通用模块协同调剂的目标,建立了相应的有向赋权二部图,并转化为网络流模型求解最优调剂方案。第五章分析了面向产品族的供应链性能管理系统的需求和特点。基于数据仓库技术将产品族中具有相似性的多种产品以及产品族的通用模块和定制模块、供应链的各节点和各环节等的数据和信息有效集成起来。结合本文的研究重点,给出了数据仓库的数据来源和分析主题。提出了面向产品族的供应链性能管理系统的逻辑流程。建立了面向产品族的供应链性能管理系统体系结构。第六章结合某汽车零部件制造企业信息化工程项目,对论文所取得的研究成果进行了应用。第七章对全文研究工作进行了总结,并展望了后续研究工作。

李睿[3]2004年在《制造网格系统可靠性管理研究》文中进行了进一步梳理随着计算机技术、网络(Grid)技术的发展,制造业信息化的深入,制造网格(Manufacturing Grid, MG)作为信息技术和制造技术结合的产物应运而生,为网络化制造提供了一个通用的协作平台。制造网格系统是分布式异构平台,是网格技术在制造业的具体应用,其复杂性主要体现在资源的异构性和多样性以及活动的复杂性。在网格的应用过程中,网格系统的可靠性问题更多地关注于网络的连通性,而缺乏对系统内资源的工作状态的监控和管理。随着网格应用在各个领域内的扩展,这个问题越来越举足轻重。为保障系统内的各种异质资源,乃至整个系统能够稳定地、持续地、高效地提供服务,本文提出对制造网格系统可靠性进行集成化管理,并对相关技术和理论进行了论述。 首先对制造网格进行系统可靠性分析,探讨制造网格系统可靠性内涵,确定其系统可靠性特征量,为本文的管理内容做一个界定;针对制造网格系统的多态性,提出相应的可靠性指标层次;分析制造网格体系结构及运行模式,得出其可靠性框图,定义其可靠性评价模型,为有效地实施管理提供理论指导。 在制造网格系统可靠性分析的基础上,确定制造网格系统可靠性管理策略,构建制造网格可靠性管理体系(Reliability Management for MG, MGRM),从概念模型、过程模型及功能层次模型等方面进行了详细描述,阐述其体系特征及实现的关键技术。 系统运行的状态数据是进行系统可靠性管理和评价的依据,如何从分散在制造网格系统中的资源获得其相关的状态数据是有效实施系统可靠性管理的基础。由此,在被管理对象的性能数据采集和系统恢复中引入代理(Agent)技术,提出基于代理的数据采集和系统恢复策略;设计代理的结构模型、通讯模型及通讯机制和编码等,将静念代理(Static Agent, SA)与动态代理(Mobile Agent, MA)有机结合,增强可靠性管理系统的可扩展性,提高代理的重用性,降低被管理资源的系统消耗,探讨智能化代理实现机制。 完善的数据管理和系统可靠性分析及评价是进行制造网格系统可靠性管理的关键。在数据管理中引入数据仓库(Data Warehouse, DW)技术,有效管理可靠性管理过程中产生的大量数据,并为高效的数据检索和分析的提供支持;为从大量的、层次结构复杂的管理数据中得出有用的知识和信息,用于优化或确定监控与管理策略,在数据分析中引入数据挖掘(Data Mining, DM)技术。在研究实时数据分析的特点的基础上,通过改进数据挖掘的过程模型,构建由成功案例库、数据仓库、数据挖掘工具集及方法库协同工作的数据分析子系统,探讨如何将数据挖掘技术应用于实时系统数据分析。 最后,以快速制造为对象,分析具体的制造网格系统可靠性管理的目的和需求,针对不同层次的资源,采取相应的管理措施,实现快速制造领域内制造网格的系统可靠性管理,验证其理论的正确性和方法的可行性。

李波[4]2015年在《基于SaaS的商品溯源平台的研究与实现》文中研究说明商品质量问题是关系国计民生的大事,它与每个人的日常生活息息相关。目前在商品交易的过程中,有很多假冒伪劣商品,给广大的消费者和国家经济造成巨大地损失。为了尽量避免此类情况的发生,必须加强商品供应链的安全风险控制,保证商品质量和流通过程安全。因此建立和发展商品溯源体系显得非常必要,这也是全球商品贸易管理的发展趋势。现今的溯源系统存在溯源对象少和溯源信息不完整的问题,给监管部门带来了很大的困难。为了解决这些问题,需要建立一个可以容纳更多企业和商品种类的商品溯源平台。本文结合这些实际需求,设计并实现了一个基于SaaS的商品溯源平台。主要工作内容如下:(1)分析了SaaS的相关理论,包括SaaS的基本概念和优势、SaaS的成熟度模型和数据模型。通过对商品溯源平台需求的详细分析,构建了基于SaaS的商品溯源平台总体架构。(2)对基于SaaS的应用服务可配置方法进行研究。首先针对应用服务多租户数据存储的特点,给出了一种面向多租户的应用服务数据可配置方法。然后分析了基于RBAC的SaaS应用访问控制方法。最后依据工作流理论,通过对业务流程的分析和建模,提出了一种业务流程配置的实现方法,解决了应用服务流程配置问题。(3)针对基于SaaS的商品溯源平台总体架构的数据交换问题,结合中间件和Web Service技术,设计了一种基于Web Service数据访问中间件的商品溯源平台数据交换模型,从而解决异构溯源信息存储在不同的数据库系统中而难以集成整合的问题。(4)基于以上研究成果,对基于SaaS的商品溯源管理平台和各个应用服务子系统的功能模块进行了设计;利用UML建模工具对管理平台和应用服务子系统进行建模;最后在.NET Framework 3.5框架下,采用ASP.NET开发技术和SQL Server数据库,实现了基于SaaS的商品溯源平台,并对其运行性能进行了测试,符合用户的体验需求。

姜梅[5]2003年在《基于数据仓库、数据挖掘的人力资源决策支持系统》文中研究表明管理学界的一个基本共识是,人力资源将会成为21世纪企业管理的所在。21世纪新经济的时代背景下,知识化、信息化、全球化的特点,使得知识工作者及企业领导者为代表的人力资源成为企业发展的主力,企业的人力资源管理转变为以知识员工为核心的战略型人力资源管理。面对新经济环境、入世、人力资源管理管理性质的巨大的变化,战略型人力资源管理使我国企业的管理决策的影响因素更加复杂。 为此,本文提出:通过建立企业级数据仓库、数据挖掘的商业智能决策支持系统为我国企业的人力资源管理提供了科学化的决策支持。 基于企业级数据仓库的人力资源决策支持系统,不仅突破了企业人力资源的管理信息系统的信息分散、冗余、不全面、无模型库、无方法库支持的局限性,而且将人力资源的决策问题设定为数据仓库的主题,对来自企业各个业务处理系统的信息,包括内部经营ERP系统、客户管理的CRM系统、财务管理系统、人力资源管理系统,以及企业外的市场调查信息,进行加工、汇总和整理集成整个企业人力资源管理的全局信息,通过查询检索工具、多维数据的OLAP分析工具、数据挖掘等分析工具,实现从企业人力资源个体的内在需求、劳动生产率、业绩,到企业的吸引、激励、发展员工的方式,直至企业人力资源战略的价值等决策问题及未来趋势的定量分析和预测,并在企业智能平台中心以报表等方式呈现。 为建立人力资源决策支持系统,本文指出我国企业可通过专业的决策支持系统厂商的产品,采用单点产品解决方案、部分产品解决方案、全面解决方案实现基于企业级数据仓库的人力资源决策支持。实施中依据以下的步骤:(1)项目规划:(2)建立技术环境:(3)确定系统主题;(4)数据库的逻辑设计;(5)数据库的物理设计;(6)源数据获取、一清洗、整理及装载设计;(7)数据表达及访问设计;(8)维护方案的设计;(8)编码、测试;(9)实施。同时本文对MM公司个人业绩与企业业绩的因果分析为主题的数据仓库决策支持系统建立过程的实例研究,进一步说明我国企业如何建立人力资源决策支持系统。 最后,本文提出人力资源决策支持系统的应用服务提供商(ASP)服务形态的拓展,解决数据仓库的高成本、人力、技术投入的问题,为我国企业的人力资源决策支持系统应用提供了更为有效的实现方法,使更多的企业有可能利用决策支持系统进行人力资源的决策。 本文通过对基于企业级数据仓库的人力资源的决策支持系统的建立思路、方法、步骤及其拓展的讨论,向我国企业的战略型人力资源的管理提供了有效的方法,推动了我国企业中管理信息建设、决策支持系统建设、人力资源的管理建设,使我国企业更好地发挥人力资源管理的效益,获取企业竞争优势,在全球激烈的竞争环境中生存与发展。

姜文举[6]2015年在《基于Teradata的零售行业数据模型的研究》文中进行了进一步梳理随着信息技术的普及与发展,越来越多的信息系统被应用在各个现实的生活领域。随之而来的便是大量的信息数据被不断的堆积。堆积的数据里面蕴含着丰富的信息宝藏:个人信息,消费习惯信息,购买能力信息等等。而这些丰富的信息宝藏又不是显而易见的,它需要人们从堆积的信息里,通过科学的方法进行提取,再以优秀的方法论加以加工,形成稳定的数据模型,通过可视化的智能分析工具来呈现给需要了解它的人们。因此,高效准确的模型数据,变成了企业突破藩篱,取得竞争优势的有力武器。因此,对于那些想使用大数据有所作为的零售企业,数据仓库则是必要的不可或缺的一个措施。在实际的情况中,很多企业虽然花费了大量的人力物力,却没有得到预期的回报。问题之一就在于,数据仓库的数据模型和现实的数据不能形成有力的统一。其中包括,业务模型的统一和数据仓库性能优化等等。为了解决以上的问题,本文重点研究了基于Teradata的数据模型。以Teradata零售行业的数据模型为蓝本,有效的组织了某企业的多来源数据,并且使用统一的业务语言来描述业务。从建立逻辑数据模型的方法论着手,通过具体的实例,阐述了逻辑数据模型建立的过程,以及依据逻辑数据模型建立物理数据模型的过程和方法,总结了在模型建立过程中必须遵守的规则。由于在物理模型的建立过程中,性能问题经常被忽略,所以本文从几个角度对物理模型的优化进行了一些探讨和研究,总结了一些优化的方法,并且取得了初步的效果。最后,介绍了一个使用了Teradata零售数据模型的成功案例。

刘叁军[7]2004年在《基于移动通信网络的网管系统研究与设计》文中研究表明随着移动通信的广泛应用,网络的规模不断扩大,网络的复杂性不断增加,网络管理日益受到人们的重视。为了提高全网综合经济效益和网络资源利用度,使已建成的设备和网络充分发挥最大的效能,避免条块分割,改善服务质量,需要对全网进行有效的管理和维护,网络管理系统的建设已是电信网络发展的必然。 本文针对湖南联通移动网络分散监控、分散管理的现状,提出了统一网管系统的建设目标与原则。本文基于TMN的指导思想,结合湖南联通的实际,论述了移动网管系统的总体结构,提出了系统软硬件体系结构的设计方案,进行了系统局域网和广域网组网设计。同时,结合实际工作经验,对网管系统服务器处理能力和数据储存量进行了测算。在对性能管理子系统的体系结构和工作流程研究分析基础上,本文探讨了数据采集模块的详细设计和实现,并介绍了其中的关键技术。本文还介绍了网优支持子系统小区监控模块,经过对其内部结构的研究,详细介绍了各子模块、用户界面和数据库结构等的研究和设计。本文最后对整个网管系统所采用的基于面向服务的设计思想及XML技术、J2EE中间件技术、二次开发支持策略等关键技术进行了详细介绍和分析。

易锋[8]2006年在《基于WebService的宽带网络性能管理系统研究与实现》文中指出网络性能管理可以给网络管理员提供良好的信息来源,有助于减少网络故障,缩短网络失效时间,最大程度地提高企业利润。在日益复杂的网络环境中,如何准确地监测网络性能并有效地管理网络资源,以满足多变的用户需求,是网络运营商们面临的主要难题。随着网络规模的扩大、结构的复杂,传统的集中式的管理模式已经越来越不能满足网络性能管理的要求。采用分布式对象技术的分布式网络性能管理虽然在一定程度上提高了系统的开放性、可扩展性,但由于互操作性差,不能适用于异构性很强的宽带网络环境。因此,宽带网络性能管理系统不仅要实现全面的网络性能管理功能,更要在系统结构上注重开放性、可扩展性和互操作性。如何解决这些问题,是本论文研究工作的出发点。Web Service(网络服务)是近两年提出的一种新的面向服务的体系结构,它结合了面向组件方法和Web技术,利用标准的Internet协议,具有完全的平台、语言独立性,在Internet这个巨大的虚拟计算环境中,任何支持这些标准的系统都可以被动态定位,并与网络上的其它Web Service交互,突破了传统的分布式计算模型在通信、应用范围等方面的限制,允许企业和个人快速、廉价建立和部署全球性应用。本文通过深入分析和研究网络性能管理的发展及有关Web Service技术的应用,明确了目前的网络性能管理系统存在的问题以及Web Service与网络性能管理相结合的优势,研究设计了基于Web Service的网络性能管理系统的整体结构,并以网络性能管理中最关键的部分“网络性能分析”为切入点,实现了网络性能分析服务,为能将网络性能管理真正在Internet上实现进行了初步的研究与探索。本文主要的工作和取得的成果包括:根据目前网络的现状和发展趋势,结合实际网络性能管理系统建设经验,对网络性能指标、网络性能管理方式、管理功能需求等方面进行分析和研究。设计

施晓煌[9]2004年在《基于策略的网络管理体系结构研究及其在QoS上的应用》文中指出网络的重要性在于人们可以通过它对远在异地的信息进行快速访问,由于各种原因而导致的网络故障或失败会给我们的生活和工作带来许多不便,因此保持网络的正常运行是至关重要的,这就要求对网络进行管理。随着网络变得越来越大、越来越复杂、越来越富于变化,传统的网络管理技术已经很难满足网络快速发展的需求。在新一代的网络管理技术中,基于的策略的网络管理已经成为最有发展前景的网管技术。本文在现有基于策略的网络管理思想方法上,提出了一种具有可扩展性的可应用于QoS管理的基于策略的网络管理体系结构。首先介绍了网络管理的相关知识,并对网络管理理论进行了综述,包括网络管理产生背景、概念、一般的模型结构、功能和协议,之后引出了本文研究的新一代网络管理技术――基于策略的网络管理。接着,从总体上介绍了网络服务质量QoS,这是本文研究的新网管技术的主要应用领域之一。主要内容涉及QoS的产生背景、体系结构和相关的国际标准,其中着重讨论了区分业务(Diffserv)的相关内容。其次,在论述了网络管理和QoS的相关内容的基础上,提出了一种具有可扩展性的可应用于QoS管理的基于策略的网络管理体系结构,并选择Java语言,结合PCIM和PCIMe等技术在J2EE平台上对所提出的基于策略的网络管理体系结构进行了实现,并通过仿真实验进行了测试。最后,对本文提出的具有可扩展性的可应用于QoS管理的基于策略的网络管理体系结构的研究进行总结,并给出今后进一步研究的期望。

闫爱文[10]2008年在《浪潮通信软件公司数据管理平台分析与设计》文中研究指明浪潮通信软件公司是一家从事通信行业集中网络管理软件开发的公司,随着通讯行业的快速发展,业务需求不断增加,而公司现有的软件产品,由于缺乏统一的规划,数据维护功能根据用户既定的业务模型开发,每次数据模型的变化都要进行程序的修改,由于扩展性、配置性不强,无法快速适应用户业务的变化。为了解决这些问题,通过对面向对象理论进行深入研究,借鉴了MDA模型驱动的软件开发思想,结合多年通信行业软件开发的经验,提出了建设基于动态模型的数据管理平台的构想。本文研究的数据管理平台,通过数据对象的动态建模,满足数据模型灵活扩展的需要,并可根据数据对象模型的定义,不用修改任何代码,即可实现数据对象实例维护功能的动态变更,并且提供了统一的数据访问接口服务,实现了应用与数据的分离。通过本文研究的数据管理平台,解决了原有系统扩展性不高、配置性不强、没有提供统一数据接口的问题,取得了较好的应用效果。

参考文献:

[1]. 可扩展数据仓库性能管理的研究与设计[D]. 秦学勇. 合肥工业大学. 2003

[2]. 面向产品族的供应链管理中若干关键技术研究[D]. 王志宏. 浙江大学. 2006

[3]. 制造网格系统可靠性管理研究[D]. 李睿. 上海大学. 2004

[4]. 基于SaaS的商品溯源平台的研究与实现[D]. 李波. 武汉理工大学. 2015

[5]. 基于数据仓库、数据挖掘的人力资源决策支持系统[D]. 姜梅. 四川大学. 2003

[6]. 基于Teradata的零售行业数据模型的研究[D]. 姜文举. 大连海事大学. 2015

[7]. 基于移动通信网络的网管系统研究与设计[D]. 刘叁军. 中南大学. 2004

[8]. 基于WebService的宽带网络性能管理系统研究与实现[D]. 易锋. 上海交通大学. 2006

[9]. 基于策略的网络管理体系结构研究及其在QoS上的应用[D]. 施晓煌. 福州大学. 2004

[10]. 浪潮通信软件公司数据管理平台分析与设计[D]. 闫爱文. 合肥工业大学. 2008

标签:;  ;  ;  ;  ;  ;  ;  ;  ;  ;  ;  

可扩展数据仓库性能管理的研究与设计
下载Doc文档

猜你喜欢