首页 > TAG信息列表 > CDH6.2
CDH6.2离线安装
# CDH6.2离线安装 ## 1.概述 本人最近对大数据进行了部分研究，绝大部分都是将各种组件先讲一遍，然后再讲集成工具。但是这种讲述的方式并不太友好。在我们系统组经过沟通，现在采用的组件时CDH，这个工具用起来比较方便。下面对其进行安装部署。本文采用4个节点，其中一个节点是manager节hive锁 导致 hive select、alter、sqoop表异常
环境：CDH6.2.1，Java8 HDFS3.0.0+cdh6.2.1Hive2.1.1+cdh6.2.1ZooKeeper3.4.5+cdh6.2.1Sqoop1.4.7+cdh6.2.1Flume NG1.9.0+cdh6.2.1 问题：假期服务器突然断电，导致正在查询的hive进程异常，重启系统之后，发现hive表不能执行，select、alter都不行，不过是部分表这样。 解决：查看日志并在网上查CDH6.2.3添加节点
CDH6.2.3添加节点 一、环境准备 1、设置添加节点的ip echo "192.168.17.131 cdh05" >> /etc/hosts or hostnamectl set-hostname cdh05 2、添加其他节点IP和域名映射（每个节点） vim /etc/hosts 3、关闭防火墙 # 执行关闭命令 systemctl stop firewalld.service # 执行开机禁cdh6.2 yarn参数优化小记录
一、闲扯 最近离线行车日志数仓，项目即将基于Lambda架构形式，实时基于flink框架，离线批处理基于 HiveOnSpark。中期基于这个机构。最后版本定位FlinkSQL 批流一体化。 测试环境基于阿里云搭建的CDH。目前准备跑一下测试的flin实时作业和spark作业。内存有限，所以做了相关调整。略大数据私房菜--漫漫长路之CDH6.2.0搭建
大数据私房菜--CDH6.2.0搭建的漫漫长路引言概述虚拟机准备安装准备1. 配置JDK2. 配置hosts3. 关闭防火墙4. 关闭SELinux5. 修改Linux swappiness参数6. 禁用透明页7. 配置mysql的JDBC8.克隆虚拟机6. 配置免密登录5. 配置NTP安装部署1. 安装Mysql1.1 卸载源生mariadb1.2 rpm环境篇：Atlas2.0.0兼容CDH6.2.0部署
环境篇：Atlas2.0.0兼容CDH6.2.0部署 Atlas 是什么? Atlas是一组可扩展和可扩展的核心基础治理服务，使企业能够有效地满足Hadoop中的合规性要求，并允许与整个企业数据生态系统集成。 Apache Atlas为组织提供了开放的元数据管理和治理功能，以建立其数据资产的目录，对这些资产进行分安装cdh6.2.0
CDH至少3台服务器部署集群，规划如下：ip1 node01.hadoop.com Hadoop Master, CM Server, dataNode, Mysqlip2 node02.hadoop.com dataNode, CM Agentip3 node03.hadoop.com dataNode, CM Agent 一 修改主机名,更改Hosts映射文件,配置server到其他主机互信1.1 修改