智能生活

什么是“数据管理”真正的理解应该是什么

字号+ 作者:猫舍云 来源:挖洞家 2018-08-19 21:37 我要评论( )

数据管理是利用计算机硬件和软件技术对数据进行有效的收集、存储、处理和应用的过程。其目的在于充分、有效地发挥数据的作用。实现数据有效管理的关键是数据组织。随着计

  数据管理是利用计算机硬件和软件技术对数据进行有效的收集、存储、处理和应用的过程。其目的在于充分、有效地发挥数据的作用。实现数据有效管理的关键是数据组织。随着计算机技术的发展,数据管理经历了人工管理、文件系统、数据库系统三个发展阶段。在数据库系统中所建立的数据结构,更充分地描述了数据间的内在联系,便于数据修改、更新与扩充,同时保证了数据的独立性、可靠性、安全性与完整性,减少了数据冗余,故提高了数据共享程度及数据管理效率。

  面向数据应用的数据管理, 即对数据资源的管理。“数据资源是利用计算机硬件和软件技术对数据进行有效的收集、存储、处理和应用的过程。与百度百科的定义比较,百度百科的定义针对的是数据应用过程中数据的管理,即传统的数据管理,而维基百科的定义针对的企业数据全生命周期所涉及应用过程数据的管理,即对数据变化的管理,或者说是针对描述数据的数据(元数据)的管理,在此称之为“面向应用的数据管理”。

  根据管理学理论,几个人的团队可以靠自觉、 自律,几十个人就要有人管理,几百个人就要有一个团队管理,几千或几万人就必须要依靠计算机辅助团队管理。通常覆盖全国的企业和机构,其整个组织的管理分为总部机构、省级机构、市级机构、基层机构等各层级机构;在每个层级机构中还设置了直接从事相应业务的管理和职能部门和非直接从事业务的管理和职能部门(如人事、办公、后勤、审计等);每个部门又是由若干员工为管理刑豫构成的。同时,还制订了一系列的制度去规范和约束机构、部门、人员等管理对象的活动、行为等。

  同样,数据管理随着管理对象(数据)的增加,管理的方式(阶段)也会随之提升。对于常见的大型管理信息系统,其整个项目分为总集成、分项目及子项目,每个子项目又有若干内部项目组等管理层级;在每个管理层级中都涉及直接服务于业务的功能(如业务交易、账务处理、行政管理、结果展现等)和非直接服务于业务的非业务功能(如定义、配置、监控、分析、记录、调度等);每个业务和非业务性质的功能又分别由若干数据集合为对象(如流程、表单、数据项、算法、元数据、日志等)所构成的。同时,也需要制订一系列制度、规则和标准去约束项目、功能、数据等管理对象的活动和变化。

  由此可见,传统的数据管理侧重的数据对象是流程、表单、数据项、算法等直接面向具体业务需求的数据;面向应用的数据管理所涉及的数据对象,还增加了通过标准化的手段,描述流程、表单、数据项、算法等应用对象的数据(即它们对应的元数据),以及记录各类数据变化结果的档案、记录运行状态的日志等非直接面向业务的数据,以实现对各类应用业务需求的加载、变化、记录、复用等过程的管理。

  1.面向数据应用的数据管理对象

  面向数据应用的数据管理对象,主要是那些描述构成应用系统构件属性的元数据,这些应用系统构件包括流程、文件、档案、数据元(项)、代码、算法(规则、脚本)、模型、指标、物理表、ETL过程、运行状态记录等。

  通常意义的元数据( Metadata)指的是描述数据的数据,主要是描述数据属性的信息。这些信息包括数据的标识类属性,如命名。标识符等:技术类属性,如数据类型、数据格式等;管理类属性,如版本、注册机构等;关系类属性,如分类、关系、流程等。而面向数据应用的数据管理所涉及的元数据,主要是描述那些应用系统构件属性的信息。除了传统元数据属性以外,每个不同的构件还有其特有的属性,比如流程要有参与者和环节的属性、物理表要有部署的属性、 ETL要有源和目标的属性、指标要有算法和因子的属性等。

  每一个构件必然对应一个或多个(一个构件的不同分类)元模型,元模型是元数据的标准,每一个元数据都应该遵循其对应元模型的定义。比如每个数据项(元)都有自己的名字、标识符、数据类型、数据格式、发布状态、注册机构等属性,这些属性的集合就是这个数据项的元数据。而约束每个数据项元数据的属性描述以及描述的规则等称为“元模型”。电子政务数据元标准( GB/T 19488.1-2004)就是电子政务数据项(元)的元模型。

  传统的元数据管理通常均在相关业务实现后,通过专门元数据管理系统的抽取功能加载元数据,由于需要在事后人工地启动加载或维护(事后补录业务属性)元数据的过程,这种方式往往很难及时获取元数据的变化,确保元数据与实际情况的一致性。在实现面向应用的数据管理时,应该采用主动的元数据管理模式,即遵循元模型的标准,通过人机交互过程加载元数据(本地元数据),在可能的情况下同时产生数据对象(应用系统构件)的配置或可执行脚本(如果条件不具备,也要利用人机交互所产生的元数据,作为其他相关工具产生可执行脚本的依据)。每当需要变更配置或修改脚本时,也是通过这个人机交互过程实现,同步产生新的元数据,以保证元数据与实际的一致性。

  2.面向数据应用的数据管理的意义和方法

  传统应用系统(Application Systems)往往是针对特定应用的,需要固化需求的,难以支持变化的管理信息系统。而“金税三期”项目是建立针对全国性的组织,覆盖整个组织所有管理业务和所有用户的管理信息系统。对于这样的应用系统,其业务需求的“变化”是常态的,“不变”是暂时的;面对整个组织,各部门和层级的业务“不同”是客观存在的,“统一”是逐步实现的,继而持续拓展(开始新的不同)的。为此,必须要有一个不仅能提供业务需求的实现,更要能够提供可支持业务需求的变化,可对它们变化进行跟踪和管理,可以支持持续优化的用户体验的,企业化生产的新型应用系统(AS 2.0)产品集合作为支撑。AS 2.0中必须对整个组织业务需求的变化过程和结果加以控制、记录和管理,面向数据应用的数据管理就是AS 2.0关键基础构件的一个产品,并且是其可行性的基础。

  传统应用系统的数据管理所关注的是数据的增值过程,其功能的实现重在关注和强调业务需求内容的加载、内容的ETL、内容的组织、内容的加工以及内容的反映。这些功能都是通过编码实现的,即固化的软件代码。AS 2.0的数据管理所关注的对象增加了元数据的集合、历史数据的集合和状态数据的集合,并且利用主动的元数据管理工具进行配置和加载实现的软件代码。同时,将其对应的本地元数据汇集形成元数据集合,实现对各种业务需求的变化实施加载,加以捕获,进行记录, 实现跟踪达到对变化的管理;将与内容和变化相关的历史记录加以标准化的封装形成档案,实现历史资料的组织、复用和卸载等功能达到对历史记录的管理;将AS 2.0各种构件运行状态信息实时捕获,加以记录,综合分析,及时反映,实现整个系统运行状态的综合管理。

  综上所述,随着数据对象拓展了变化的记录、历史的记录、状态的记录,标志着数据:理进入了新的阶段——面向数据应用的数据管理,也标志着应用系统开始进入AS2.0代。

转载请注明出处。

1.本站遵循行业规范,任何转载的稿件都会明确标注作者和来源;2.本站的原创文章,请转载时务必注明文章作者和来源,不尊重原创的行为我们将追究责任;3.作者投稿可能会经我们编辑修改或补充。

相关文章
  • 祝贺广州赛克斯电子科技有限公司成功挂牌上市!

    祝贺广州赛克斯电子科技有限公司成功挂牌上市!

    2018-08-20 20:04

  • 智悦顶级私人影院装修设计案例--能体现出电影院的感觉

    智悦顶级私人影院装修设计案例--能体现出电影院的感觉

    2018-08-20 20:03

  • 智能灯光控制系统有什么功能 智能照明的优势

    智能灯光控制系统有什么功能 智能照明的优势

    2018-08-20 20:03

  • 智能电动窗帘控制系统工作原理及优势分析

    智能电动窗帘控制系统工作原理及优势分析

    2018-08-20 20:02

精彩导读