数仓-维度建模之拉链表

上一篇整体介绍了下在数仓建设中常用到的数据表类型，其中有一种比较特殊，是跟数据的历史状态相关联的。

在我从事的医疗大数据领域，有一个场景是需要考虑。

就是很多医院会改名，今天叫第一人民医院、过两年就叫上海市第一人民医院，再过几年可能叫红房子医院。这些随着时间推移的记录一般我们也会将其进行保存，那怎么保存这些变更记录呢，或者在数仓体系里面，这些属于变更记录的数据应该怎么来设计表更合适，有没有对应的方法论支撑呢？

这篇文章就是来说说这个问题的。

more >>

展开全文 >>

大数据技术-数据资产

在数据治理架构中，数据资产管理位于底层数据和数据管理与应用之间，处于承上启下的重要地位。对上支撑数据安全管理等职能建设以价值发掘为导向的数据应用，对下实现底层数据的梳理、对接数据标准，达成企业内部“统一数据标准”的目标。

more >>

展开全文 >>

大数据技术-数据血缘-如何做好数据血缘分析

中国人的家族意识比较强，很多家庭里一直保存着家谱，家谱里记录着你的父辈是谁，你父辈的父辈是谁？从而可以查找到你是哪来的，也详细记录着你的血缘关系。

大数据时代，数据的来源极其广泛，各种类型的数据在快速产生，也在爆发性增长，这导致了数据之间的关系也变得越发复杂。

因此对数据工程师来说，如何管理表之间、代码之间的复杂关系，从而更好地认识和理解业务系统与底层表的关系、底层表的表间关系，理清当前数据（字段、关键指标或者数据标签）从哪里来？到哪里去？搞清楚哪些下游系统在使用这些数据等成为一件很重要的事。

more >>

展开全文 >>

大数据技术-主数据管理MDM

我目前从事医疗行业，在医疗行业里最典型的主数据就是患者，各个医院里可能存在不同的供应商、不同历史阶段建设的不同的业务系统，其对患者的标识号不可能做到统一，而此时如果想要将各个业务系统的患者信息拉通，就需要建设所谓的患者主索引管理(EMPI)系统。

某种意义上来讲，患者信息对于医院就是主数据，主数据管理系统就是实现主数据的识别、抽取、审核、发布、生成、变更、失效的全生命周期管理。

more >>

展开全文 >>

大数据技术栈-OceanBase

OceanBase是一款由阿里巴巴/蚂蚁集团完全自主研发的企业级分布式关系数据库，始创于2010年。OceanBase具有数据强一致、高可用、高性能、在线扩展、高度兼容SQL标准和主流关系数据库、低成本等特点。2020 年 5 月，OceanBase 以 7.07亿 tpmC 的在线事务处理性能，打破了 OceanBase 自己在 2019 年创造的 6088万 tpmC 的 TPC-C 世界纪录。截止至目前，OceanBase是第一个也是唯一一个上榜的中国数据库。目前，OceanBase已应用于很多金融行业企业，在南京银行、人保健康险、西安银行、广东农信、天津银行等多家商业银行和保险机构上线。

more >>

展开全文 >>

tag:

    缺失模块。
    1、请确保node版本大于6.2
    2、在博客根目录（注意不是yilia根目录）执行以下命令：
    npm i hexo-generator-json-content --save

    3、在根目录_config.yml里添加配置： 

      jsonContent:
    meta: false
    pages: false
    posts:
      title: true
      date: true
      path: true
      text: false
      raw: false
      content: false
      slug: false
      updated: false
      comments: false
      link: false
      permalink: false
      excerpt: false
      categories: false
      tags: true

"我是小猪.2012年硕士毕业后一直从事软件开发工作,先后从事互联网应用开发,IOT平台开发,目前在上海从事医疗大数据行业. <br><br>\n 这个站点作为个人站点,不定期更新自己的一些技术笔记,技术教程,生活感悟. <br><br>\n 茫茫互联网,我不会主动在任何社区推广本站,如果缘分至此,有幸得到您的拜访,何不为这份缘分留下一些印记."