- 相关推荐
数据管理培训心得
在平日里，心中难免会有一些新的想法，不妨将其写成一篇心得体会，让自己铭记于心，这么做能够提升我们的书面表达能力。那么要如何写呢？下面是小编为大家整理的数据管理培训心得，欢迎阅读，希望大家能够喜欢。
8月16日至19日，我有幸参加了在哈尔滨举办的数据集成与数据分析的高级培训班。报完名后，工作人员给我发放了本次培训教材。拿到培训教材后，我赶紧浏览了一遍，对本次培训的全部知识点有了大致了解，这次培训内容主要包括如下内容：商业智能、数据集成实战、数据仓库与多维数据建模、数据分析方法以及OLAP分析演示。本次培训方式采取老师在每介绍完相关知识后，再介绍微软在该方面的解决方案，如：SQL数据库中的SSAS、SSRS等。通过三天紧张的培训，主要的心得体会是商业智能核心技术—数据仓库的功能非常强大，具有数据抽取、清洗、加载、集成、分析以及将快速得出的分析结果进行各种图形化展示功能，可以通过MS Excel将数据库中的图形效果直接展示给用户，也可以通过Servlet和FLASH技术在门户或决策支持系统进行展示。
一、数据仓库与主数据管理的关系
(一)共同之处：
减少数据冗余和不一致性，提升对数据的洞察力，都是跨业务系统的。
依赖很多相同的技术手段，都涉及到ETL技术、都强调数据质量。
建设方法类似，都需要数据规范作指导，都需要统一的安全策略。
(二)不同之处：
处理类型不同：主数据管理(MDM)系统是偏实时交互的应用，为各个业务系统提供联机交易服务;而数据仓库是面向是分析型的应用，是在大量历史数据的基础上进行多维分析。
实时性不同：主数据管理在运行中要大量依赖实时整合的方式来进行主数据的集成和同步，对实时性要求高，而数据仓库存储的是历史数据，对实时性要求较低。
数据量不同：数据仓库存储的是海量的历史数据和各个维度的汇总数据，而主数据管理存储的仅仅是组织机构、项目工程等基本信息，存储的数据量较小。
服务对象不同：主数据管理的服务对象是服务对象是OA、人力资源、供应链、财务等业务系统，而数据仓库的服务对象是各层领导和业务分析、业务决策人员等。
二、数据仓库与数据集市、ODS(操作数据仓库)的关系
数据仓库：存储历史的业务处理明细数据和维度的汇总数据。
数据集市：为满足各种特定分析需要，存储个性化分析汇总后的数据，为用户提供快捷的访问。
ODS：存储实时的业务数据。
三、数据仓库的设计
(1)数据仓库的设计不可能一步到位，应按用户需求和业务需要逐步完善。
(2)数据仓库的设计范式应满足第三范式，即雪花型数据模型设计。
(3)数据仓库的设计尽量不使用视图，而使用事实表，并且表之间一定要有严格的约束。
(4)数据仓库事实表中要设置自身的主键(建议创建数字主键)，不建议使用业务系统中的主键，尽管可能是一样的，可以将其设置为事实表的代理健;尽量不用业务系统中的“备注”字段，避免引用描述性属性;字段类型为字符类型的，使用nvarchar，而不用varchar。
(5)数据权限的控制：数据库角色的权限只能控制到表的操作权限，而数据仓库的角色可以控制到数据仓库中字段的操作权限。
(6)根据业务分析需要，当数据仓库中的数据超过了分析周期时，可以将其迁移到磁带库中。
四、数据抽取和数据挖掘
(1)数据抽取有两种方式：增量抽取和完全抽取。增量抽取中推荐采用时间戳法抽取，当数据更新量不大时，可以采用触发器法抽取。增量抽取方法并不一定优于完全抽取方法，需要根据实际情况进行选择。
(2)数据抽取ETL的过程需要被监控，对抽取失败的数据应重新同步。
(3)数据挖掘的方法有：决策树、聚类、时间序列、贝叶斯、关联、神经网络、逻辑回归、线性回归、文本挖掘。
五、数据分析SSAS
(1)OLAP分析的维度、层次、Cube的了解
根据Cube新建向导，创建Cube，将维度和层次引入，利用MDX查询多维数据，并根据需要，可以选择KPI中的“值”、“目标”、“状态指示灯”、“趋势”、“趋势信号灯”方式进行展示，展示后，可以对其单元格中的数据进行数据钻取获取明细数据，每次钻取都会向数据仓库发出一条查询语句。
(2)聚类分析
聚类分析有三种：MOLAP、ROLAP、HOLAP。MOLAP是将聚合数据和明细数据都存放在Cube中，是非实时的，存放于一个文本文件;ROLAP是实时的，只存放Cube框架，包括层次、维度等，用户在进行分析时，数据需要进行实时统计分析;HOLAP介于MOLAP与ROLAP之间，聚合数据存放在Cube中，明细数据仍存放在数据仓库中。推荐使用MOLAP。
(3)报表分析SSRS
可以通过报表分析对事实表或数据表以及矩阵进行任意的集成，展示后，不能对其单元格中的数据进行数据钻取获取明细数据。
【数据管理培训心得】相关文章：
师德培训培训心得06-01
岗前培训培训心得07-20
培训心得范文 销售培训心得范文04-02
学习培训心得09-25
消防培训的心得11-23
公司培训心得11-12
员工的培训心得11-13
员工培训心得11-27
驾驶培训心得11-15