白杨Shayne的博客

规范性：数据内容、命名、格式、取值等规范统一。如时间信息都以yyyy-mm-dd格式存储，或者“性别”属性中，应使用“M”、“F”表示，还是用“1”，“0”表示，还是用“男”、“女”表示。 完整性：数据完整、没有缺失（包括看得见的缺失和看不见的缺失）。如人员信息完整涵盖性别、年龄等，或者身份证号码不能为空。 唯一性：同源或跨源的数据在信息含义上是一致不冲突的。如同一个人的性别都是一致的。 一致性：记录和字段都没有重复。如同一个ID没有重复记录。 准确性：数据内容及其含义是正确的。例如年龄在合理范

1.为安全起见，进行数据备份2.备份旧版本MySQL： mv /usr/local/mysql /usr/local/msyql5.7.183.安装新版本Mysql： cp /data/software/mysql-5.7.28-el7-x86_64 /usr/local/msyql chown -R mysql:mysql /usr/local/msyql...

原文地址：https://blog.csdn.net/xiepeifeng/article/details/42431027在数据仓库的数据模型设计过程中，经常会遇到这样的需求：1. 数据量比较大;2. 表中的部分字段会被update,如用户的地址，产品的描述信息，订单的状态等等;3. 需要查看某一个时间点或者时间段的历史快照信息，比如，查看某一个订单在历史某一个时间点的状态，   比如，查看某一...

原文地址：http://lxw1234.com/archives/2015/08/473.htm这里简单介绍一下这种历史拉链表的更新方法。本文中假设：数据仓库中订单历史表的刷新频率为一天，当天更新前一天的增量数据；如果一个订单在一天内有多次状态变化，则只会记录最后一个状态的历史；订单状态包括三个：创建、支付、完成；创建时间和修改时间只取到天，如果源订单表中没有状态修改时间，那么抽取增量就比较麻烦，...