鱼和熊掌如何兼得?

【前言】鱼和熊掌如何兼得?由文秘帮小编整理而成，但愿对你的学习工作带来帮助。但是随着ERP系统在企业管理过程中的应用，也出现了十分严重的问题，尤其是系统并发访问性能严重下降，例如在处理数据查询、统计分析时候，业务人员在执行诸如订单查询等操作的时候需要等候相当长的时间，造成这种现象的主要原因是数据量的快速增长。经过我们统计分析...

如何提升数据管理效率，提升信息系统绩效是当前企业IT管理的重要内容。济南钢铁股份有限公司借助数据存档技术实现了对OraCle ERP数据库的完美塑身，这无疑对全行业具有良好的借鉴意义。

21世纪是信息社会，信息为企业的经营和发展提供了关键的管理决策依据，但是规模庞大的数据也给信息系统带来了性能缓慢、效率低下等严重问题，而传统的备份、数据迁移甚至删除等手段，就像是使用了不好的减肥方法一样，会给信息系统带来了严重危害，那么如何健康的为数据库进行塑身成为很多企业关注的问题，而济钢集团有限公司(以下简称：济钢)借助数据存档技术实现了对ERP数据库的完美塑身，对整个行业有良好的借鉴意义。

济钢是山东省最大的钢铁制造企业，也是中国最大的板材制造及出口基地。为进一步提升企业整体竞争力，近十年来，济钢大力推进信息化建设。1999年至今，陆续建设了公司内部骨干网络、OA、ERP、BI等核心应用信息系统。其中ERP系统的成功实施，使济钢实现了信息的全面共享，极大地减少了信息不对称的情况，为企业减少管理层次、推行扁平化管理、提高管理效率创造了条件。目前，ERP系统已成为济钢不可或缺的有力管理工具，但随着ERP的深化应用，问题也逐渐产生。数据量的快速增长极大制约了信息系统的深化应用。随着时间的推移，系统压力越来越大，仅靠增加硬件投资将会是一个没有止境且无法控制的无底洞。

数据的困扰

济钢ERP系统于2004年1月1日正式上线运行，ERP的上线使得济钢的生产管理、物料管理、库存管理、财务管理一级质量管理等管理水平都上了一个重要层次，各部门间的数据可以无缝连接，能够为企业管理层提供准确及时的企业数据和状况分析，实现了企业管理的科学化、现代化。

但是随着ERP系统在企业管理过程中的应用，也出现了十分严重的问题，尤其是系统并发访问性能严重下降，例如在处理数据查询、统计分析时候，业务人员在执行诸如订单查询等操作的时候需要等候相当长的时间，造成这种现象的主要原因是数据量的快速增长。经过我们统计分析，截至2009年7月，系统数据已由上线初期的46GB增长到600GB，并且以每月13GB的速度快速增长。

这些数据是企业管理的财富，但是也造成ERP系统的并发性能严重下降，为了应对出现的这些问题，企业也曾经做过多次的系统调优，软硬件升级等工作，但是这些方法一方面只能治标不能治本，虽然短时间内性能得到提升但一段时间后性能又会出现拐点，另一方面这些方法的时间成本、资金成本投入过大，从管理角度来说是企业无法接受的。

根本解决之道

在冷静下来以后，笔者对济钢600G的数据库进行了数据分析，分析的过程中，发现库存、成本管理、生产、销售这四个数据量大，交互性非常强的模块在ERP运行过程中会产生大量的过程临时数据或历史数据，数据量接近总数量的50％(300G)，这些数据均是过程数据，一旦一项事务完成，这些数据基本上再访问的频率会非常低。

这些数据负载过重，导致系统性能下降、稳定性得不到保证，数据交互的及时性受到很大影响。为了从根本上解决这一问题，济钢自动化部经过大量的考察交流、技术论证，决定采用惠普数据库归档解决方案(HP DBA)，对济钢ERP系统进行塑身。从而实现历史数据与业务数据的分离，减轻业务系统压力，提高业务系统各方面性能。

数据库塑身之路

HP DBA由一组集成组件组成，这些组件配合使用时，可在应用程序和数据的生命周期内促进存档流程的设计、部署和现行管理。这些组件提供的功能可满足不同级别的应用程序复杂性、数据量和存档访问的要求。这些组件包括：数据管理、存档访问、作业引擎、管理控制台以及设计器。

借助HP DBA产品和技术支持，济钢ERP系统走上了塑身之路，通过数据分析、模型建立、归档测试、系统测试以及效果的评估，彻底改善了系统的并发访问性能。

数据分析：经过分析，济钢ERP系统数据库中库存、成本管理、生产、销售四个模块数据量非常大，构成总体数据大小的52.43％，其中库存事务处理模块(Inventory Transactions)最大，约占总体数据的34％，标准成本历史(Standard CostHistory)8％，生产制造模块(Work In ProcessTransactions)7％，销售订单模块(Sales OrderTransactions)3％。这四个模块历史数据占有率比较高，同时这些模块的操作频率高，数据及时f生要求高，因此实施范围主要集中在库存、成本管理、生产、销售这四个模块。

模型建立：根据数据分析的接过并结合业务情况和系统负载，与库存、成本、wip及销售业务相关人员讨论确定在线数据保留期限，并形成数据访问模型。

系统集成：在济钢自动化部和HP支持工程师共同努力下，对系统的软硬件环境进行合理改造，使业务数据与历史数据进行分离，并部署HP DBA，用于归档数据的管理。

归档测试；归档测试阶段是整个项目的关键所在。在这一阶段，我们在搭建的归档专用测试环境中进行归档工作流程的整体测试，记录归档前后在线数据库与归档历史数据库的变化，确认归档程序的有效性及稳定性。进行了系统功能测试、系统压力测试及相关报表系统的运行测试。确认归档程序可靠后又进一步进行了Reload测试，确保归档过程的可逆性。经过全面测试，HP DBA安全可靠，我们在ERP正式环境进行了最终的归档操作，并形成了正式的归档记录文档。

鱼和熊掌兼得

HP DBA成功实施后，释放了40％存储空间，系统的运行能力(Performance)和稳定度(stability)得到了明显提高、保证了数据的完整性、加强数据系统管理的能力、缩短系统的备份时间、降低了系统的维护成本。彻底解决了数据库效能及存储空间的问题，足可以应付企业未来2年内的存储成长需求，在提升了效率的同时也节省了未来的硬件投资，并且相关业务人员仍可通过专用职责根据需要查看历史业务数据，实现了鱼和熊掌兼得的最佳方式。

济钢是国内钢铁行业第一家成功实施数据归档项目的企业，目前许多国内钢铁企业都遇到了数据困扰，该项目为全行业其它企业实施数据存档提供了成功经验。

数据存档简介：

数据存档(archive)和数据备份是不同的，因为数据可能几个月甚至几年都不会被使用，但是当我们需要的时候应该可以非常快的访问这些存档的数据。后来，由于数据存档的大小变得越来越大，每年以90％甚至更高的比率增长，数据存档变得更加复杂。在一个磁带或者光纤介质的卷中去搜索一个很重要的文件是非常耗时间的。传统的备份平台是不适合数据存档存储的，所以用户需要依靠磁盘存储系统来达到性能和可靠性的一种折衷。文件可以被存档到任意的磁盘存储系统中，但是最近出现的基于内容的存储(CAS)技术已经开始支持存档了。

应用相关策略控制数据库数据的增长，将访问次数较少的数据从过载的生产数据库上精确转移到不同的存储层，进行长期归档，从而显著提升关键任务数据库应用的性能和可用性，大幅降低总体拥有成本。

归档系统的核心技术是透明访问技术，其技术主要涉及如何同时访问在线数据库及归档后的历史数据库的问题，从用户的视点来看，将不受到任何数据访问的影响。