Logo

ClouderaManager部署

概述CDH (Cloudera’s Distribution, including Apache Hadoop),是Hadoop众多分支中的一种,由Cloudera维护,基于稳定版本的Apache Hadoop构建,并集成了很多补丁,可直接用于生产环境。Cloudera Manager则是为了便于在...

Doris编译与安装

背景Apache Doris是目前新兴的OLAP数据库,前身是百度开源的PALO项目,从命名就可看出,目的是要颠覆OLAP。官方如此介绍:Apache Doris是一个现代化的MPP分析型数据库产品。仅需亚秒级响应时间即可获得查询结果,有效地支持实时数据分析。Apache Doris的分布式架构非常...

FlinkOnYarn日志对接ELK

背景Flink支持多种部署模式,其中on Yarn模式是目前最成熟也是生产环境使用最多的部署方式。但在Flink on Yarn模式下,Flink任务会在不同的NodeManager节点上执行,所以Flink的执行日志会分散在不同机器上。我们通过FlinkWeb页面和YarnHistory页面是可以...

Docker使用过程中的一些tips【持续更新】

记录一下docker使用过程中用到的一些小技巧...

ES远程集群设置与使用

0 背景在生产环境中,我们先后搭建了两套ES集群,一套用于系统日志的采集,包括k8s组件的日志、网关日志、服务pod日志等;另一套用于业务系统信息的存储,如埋点信息、业务日志等。现在,我们想要统一的将两套集群管理起来,使用统一的Kibana面板对外做数据展示。在网上搜索解决方案,看到了ES的远程集群...

Git常用指令

Git常用指令git clone 地址git checkout -b development 创建本地分支并切换到这个分支git checkout --track origin/test-dev 从远程拉分支git push origin development 创建远程分支git branch -...