学习 Griffin(二):部署

Apache Griffin 版本:0.4.0 架构 Griffin 架构如下所示: 技术组件包括: Apache Hadoop 批量数据源,存储指标数据 Apache Kafka 实时数据源 Apache Hive Hive Metastore Apache Spark 计算批量、实时指标 Apache »

学习 Griffin(一):简介

Apache Griffin 是构建在 Apache Hadoop 和 Apache Spark 之上的数据质量平台。 支持对批量数据和实时数据。 最初由 eBay 公司开发,2016 年 12 月 7 日成为 Apache 孵化项目,2018 年 11 月 21 »

学习 HDFS(七):权限

权限模型 HDFS 文件和目录权限模型的实现与 POSIX 模型相似,文件和目录都关联到一个 owner 和一个 group。 执行命令 hadoop fs -ls / 显示: drwxr-x---+ - hdfs supergroup 0 2019-01-15 09:00 /data 第一位 d 说明 »

学习 Kylin(五):集成 LDAP

Apache Kylin 版本:2.5.2 在生产环境下,通过集成 LDAP 实现了 Apache Kylin 的身份认证。 生成密码 为了安全起见,conf/kylin.properties 配置文件中的密码是通过 AES 算法加密的。 将密码明文加密为密文,执行命令: cd $KYLIN_HOME/ »