一个数据架构师做什么？只是设计表？那是我能第一时间想的。但事实证明，这并不是。数据架构师的主要职责是： 数据建模与分析（45%） 数据加载和交付（25%） 数据可用性，性能，安全性保证（15%） 数据质量与治理（10%） 其他（5%） 1. 数据建模与分析 了解数据(Understand the d...
分类：
其他好文 时间：
2015-10-09 09:18:29
阅读次数：
179
1. 从财务的角度上如何定义“资产”？信息在哪些角度符合这样的定义？又在哪些角度不符合？
2. 信息质量的度量单位是什么？
3. 举例来说明这样一种情况：同一条信息在它的其中一个应用中具有较高质量，在另一个应用中的质量则较低。
4. 找到一篇关于信息质量或数据质量的多维度框架的文章或书籍。解释它与Wang-Strong框架的区别以及相同之处。
5. ...
分类：
其他好文 时间：
2015-07-06 12:30:07
阅读次数：
123
信息质量的基本原则，就是为了将组织中的信息的价值最大化。信息的质量水平也直接与信息在其应用中所产生的价值关联。而数据质量则是信息质量的一个重要组成部分，它是根据预定义好的规格及需求，如何对数据进行评估，优化以及维护的实践。作为一种原则，信息质量覆盖了范围很广的知识以及技能的因素。IAIDQ IQ框架乃是由六个领域的内容所组成，其中包括：信息质量策略，政策以及监管；创建可推动信息质量发展的企业文化和...
分类：
其他好文 时间：
2015-06-29 10:02:13
阅读次数：
103
在训练集上有个好的效果不见得在测试集中效果就好，因为可能存在过拟合(over-fitting)的问题。如果训练集的数据质量很好，那我们只需对这些有效数据训练处一堆模型，或者对一个模型给定系列的参数值，然后再根据测试集进行验证，选择效果最好的即可；大多数情况下，数据集大小是有限的或质量不高，那么需要有...
分类：
其他好文 时间：
2015-06-16 16:33:09
阅读次数：
210
优化前注意事项1、数据质量。数据仓库中维度表的数据质量要严格保证。比如店仓的大区、省区、管理城市等属性和店仓代码没有一对多的上下级关系，这样在设计店仓维度时，就无法建立有效的层次结构。这会拖慢查询时的性能。2、对报表分类。可按报表的使用方式和体积对用户报表进行分类。1)有的报表侧重分析，维度汇总程度...
分类：
其他好文 时间：
2015-06-08 11:27:23
阅读次数：
197
现在对数据质量的要求越来越高，面对一个动辄上亿条数据的报表如何快速对它的数据质量做出分析呢？给大家分享下我们测试时用到的Data Profiling方法。 ? ? Data Profiling，可以大概翻译“数据概要分析”...
分类：
其他好文 时间：
2015-06-01 06:15:46
阅读次数：
235
信息质量管理
在上一节，我们介绍了有关员工工资事务以及往年销售业绩报告的信息产品的例子。从这两个例子中，我们还可以发现两种在信息质量领域广泛使用的信息产品。在第一个例子中，有关员工工资事务的讨论激发了关于信息系统与工厂的生产流程之间的类比，并促使我们从“适用性”的角度来看待数据质量。在这种类比当中，数据的来源如同原材料一样进入系统，而IT过程就如工程中的机械和铸造过程一般，将这些原材料打造成符合...
分类：
其他好文 时间：
2015-05-20 18:29:27
阅读次数：
200
HealthKit开发快速入门教程之HealthKit的主要类型数据 在HealthKit中，我们将最常用到的数据称之为主要数据。主要数据基本上有三种：长度类型的数据、质量类型的数据、能量类型的数据。本节将主要对这三种主要数据...
分类：
其他好文 时间：
2015-05-04 15:58:10
阅读次数：
109
JPG的特性 ----有损压缩1、支持摄影图像或写实图像的高级压缩，并且可利用压缩比例控制图像文件大小。2、有损压缩会使图像数据质量下降，并且在编辑和重新保存JPG格式图像时，这种下降损失会累积。3、JPG不适用于所含颜色很少、具有大块颜色相近的区域或亮度差异十分明显的较简单的图片。PNG的特性 ....
分类：
其他好文 时间：
2015-04-09 19:46:45
阅读次数：
173
数据项目确保数据质量是最重要的事。 但作为开发人员的我，一直对代码的热情远高于数据，这是不应该的。 因为凡是涉及到数据的项目，数据质量的重要性远远比代码重要。 理解数据，比优化代码更重要，只有在保证数据质量的前提下，再优化代码才是锦上添花。 责任心是安全之魂，标准化是安全之本。 还有时候，开发周期比...
分类：
其他好文 时间：
2015-04-04 06:52:14
阅读次数：
144
