1、使用JDBC连接Hive
1 import java.sql.Connection; 2 import java.sql.DriverManager; 3 import java.sql.PreparedStatement; 4 import java.sql.ResultSet; 5
6 public class HiveDemo { 7 public static void main(String[] args) throws Except...
版本：ambari 2.7.3 ，其他版本应该也差不多是一样的
一、背景说明
时不时就有小伙伴微信里面问我有没有做过，为已有的 ambari 集群修改主机名？之前是有修改过 ip 的，主机名还真没修改过，只能给他提供一份官方的步骤：https://docs.cloudera.com/HDPDocuments/Ambari-2.2.2.0/bk_ambari_reference_guide/content/ch_changing_host_names.html 。...
SQOOP安装及使用
目录
SQOOP安装及使用
SQOOP安装
1、上传并解压
2、修改文件夹名字
3、修改配置文件
4、修改环境变量
5、添加MySQL连接驱动
6、测试
准备MySQL数据
登录MySQL数据库
创建student数据库
切换数据库并导入数据
另外一种导入数据...
Flume的安装及使用
目录
Flume的安装及使用
Flume的安装
1、上传至虚拟机，并解压
2、重命名目录，并配置环境变量
3、查看flume版本
4、测试flume
5、flume的使用
Flume的安装
1、上传至虚拟机，并解压
tar -zxvf apache-flume-1.9.0-bin.tar.gz -C /usr/l...
文章目录Hadoop集群部署4.1 解压安装包并配置环境变量4.2 修改核心配置文件4.2.1 配置 hadoop-env.sh4.2.2 配置 core-site.xml4.2.3 配置 hdfs-site.xml4.2.4 配置mapred-site.xml4.2.5 配置yarn-site.xml4.2.6 配置workers4.2.7 同步目录4.3 启动hadoop集群4.3.1 启动journalnode4.3.2 格式化namenode4.3.3 同步元数据4....
所需脚本网址 jqop https://blog.csdn.net/qq_51903852/article/details/121120429 xsync https://blog.csdn.net/qq_51903852/article/details/121141166 zkop https://blog.csdn.net/qq_51903852/article/details/121120516[root@mihaoyu152 install]# ...
Sqoop的安装与部署 1/ 将sqoop解压 到usr下 2/ 配置sqoop下的conf目录下的env环境文件 先切换目录：cd /usr/sqoop/conf 编辑文件命令：gedit sqoop-env-template.sh 找到被注释的有关HADOOP的变量 2个 将前面注释的#号去掉 将等号后的值改为hadoop路径：=usr/hadoop HBase路径用不到 就注释掉 Hive也可以不配置 Zookeeper也可以不配置 3/ 将mysql的jdbc的jar...
ElasticSearch7.10 生命周期配置 冷热分离 windows10版本测试下载官方ElasticSearch7.10 与对应版本的kibana 便于操作更多详细内容参考 https://www.elastic.co前提 安装jdk 并配置环境变量第一步解压文件，配置集群信息启动日志：集群验证：启动kibana：直接启动就可以启动kibana日志：kibana 访问页面：生命周期管理过程热区 配置暖区配置 需要配置warm节点冷区配置 需要配置cold节点删除区配置...
ElasticSearch——倒排索引和正向索引1、正向索引正向索引 (forward index) 以文档的ID为关键字，表中记录文档中每个字的位置信息，查找时扫描表中每个文档中字的信息直到找出所有包含查询关键字的文档这种组织方法在建立索引的时候结构比较简单，建立比较方便且易于维护：若是有新的文档加入，直接为该文档建立一个新的索引块，挂接在原来索引文件的后面。若是有文档删除，则直接找到该文档号文档对应的索引信息，将其直接删除缺点：检索效率太低，只能在一起简单的场景下使用假设...
用kafka的第一件事儿就得了解kafka的重平衡，即kafka的rebalance，这个很重要，不然这个kafka就会使不好的，出问题了，就理解不了，得了解一下什么是rebalance，能干啥，为啥要rebalance，rebalance的缺点和影响。...