分布式基础设施

2020-01-14mlkui阅读(96)评论(0)

Chronograf的定位是： Chronograf is the user interface component of the InfluxData time series platform. It makes the monitori...

2020-01-13mlkui阅读(90)评论(0)

Grafana是在互联网架构和应用分析中最流行的时序数据可视化工具，并且也在工业监控、气象监控、家居自动化和过程管理等领域有着广泛的应用。 我们可以访问Grafana官方网站的下载地址https://grafana.com/grafana/...

2020-01-12mlkui阅读(114)评论(0)

一、安装 CentOS用户可以直接用yum包管理来安装最新版本的InfluxDB。 [crayon-5e515e162811d836030695/] 加如yum源后，运行下面的命令来安装和启动InfluxDB服务： [crayon-5e51...

2019-12-15mlkui阅读(131)评论(0)

1、查看表行数 将运行一个MR任务： [crayon-5e515e162811d598500325/] 2、查看表占用空间 实际是查看HDFS文件系统占用空间： [crayon-5e515e162811d520101948/]  ...

2019-12-13mlkui阅读(200)评论(0)

一、Parquet基础 Parquet是Apache的顶级项目，Parquet是一种面向分析的、平台/语言无关的、支持嵌套数据的列式存储格式，兼容Spark、Hive、Impala等，Parquet作为HDFS存储格式的事实标准之一（其他常...

2019-12-11mlkui阅读(173)评论(0)

一、parquet-tools 首先考虑使用parquet-tools。根据参考文档0和参考文档1中的说法： parquet-tools version 1.8.2 supports merge command. 其使用的命令为： [cra...

2019-12-09mlkui阅读(195)评论(0)

Hive执行结果导出到本地INSERT OVERWRITE LOCAL DIRECTORY时报错： 将$HADOOP_HOME/share/hadoop/tools/lib/hadoop-distcp-${version}.jar放入Hiv...

2019-12-08mlkui阅读(130)评论(0)

Hive导入数据有四种方式： 1、从本地文件系统导入数据 2、从HDFS中导入数据 3、从其他的Hive表中导入数据 4、创建表的同时导入数据（CTAS结构） 在使用导入数据时，通常会用到INTO和OVERWRITE INTO两个关键字。其...

2019-12-08mlkui阅读(132)评论(0)

在Hive中使用ALTER修改列类型时长餐刚看到如下的错误： [crayon-5e515e162be26705270148/] 问题在于在Hive中执行ALTER列操作时只能按照如下的强制类型转换规则进行： 转载时请保留出处，违法转载追究到...

2019-12-07mlkui阅读(202)评论(0)

考虑到扩展性，使用Apache Ambari构建Hadoop stack。Ambari基本上没有考虑对存量集群进行管理，基本考虑需要新装集群。 对于Apache Ambari而言，基本上根据官网的《Installation Guide》进行...