日本免费高清视频-国产福利视频导航-黄色在线播放国产-天天操天天操天天操天天操|www.shdianci.com

學無先后,達者為師

網站首頁 編程語言 正文

clickhouse連hadoop集群配置(帶kerberos認證)

作者:huawuqing 更新時間: 2022-10-14 編程語言

一、kerberos認證配置準備

  1. 登錄kerberos server 為clickhouse用戶生成KDC憑證clickhouse.keytab,并把生成的keytab文件拷貝到對應clickhouse的所有節點/etc/security/keytabs/clickhouse.keytab,將文件屬主或讀權限授權給clickhouse用戶,用于訪問HDFS時認證。
  2. 在clickhouse的所有節點安裝KERBEROS客戶端。
  3. 把kerberos server的krb5.conf文件同步到clickhouse的所有節點/etc/krb5.conf,將文件屬主或讀權限授權給clickhouse用戶。
  4. 將kerberos server的ip和主機名映射加到clickhouse的所有節點的hosts文件中。
  5. 如果kerberos server的防火墻是開啟的,將kerberos server的tcp 88和udp 88的端口訪問權限開放給clickhouse的所有節點。

二、hadoop集群連接配置準備

  1. 將hadoop集群的hdfs-site.xml同步到clickhouse的所有節點/etc/clickhouse-server/hdfs-site.xml,并將文件屬主或讀權限授權給clickhouse用戶。
  2. 將hadoop集群所有節點的ip和主機名映射加到clickhouse的所有節點的hosts文件中。
  3. 如果hadoop集群所有節點的防火墻是開啟的,將所有namenode節點的8020端口和所有datanode節點的1019端口訪問權限開放給clickhouse的所有節點。

三、修改clickhouse配置

修改clickhouse所有節點config.xml配置,增加KERBEROS及HDFS支持。

vi /etc/clickhouse-server/config.xml:

?? <!-- Global configuration options for HDFS engine type -->

??? <hdfs>

????? <hadoop_kerberos_keytab>/etc/security/keytabs/clickhouse.keytab</hadoop_kerberos_keytab>

????? <hadoop_kerberos_principal>clickhouse@EXAMPLE.CN</hadoop_kerberos_principal>

????? <hadoop_security_authentication>kerberos</hadoop_security_authentication>

????? <libhdfs3_conf>/etc/clickhouse-server/hdfs-site.xml</libhdfs3_conf>

??? </hdfs>

四、重啟clickhouse 所有節點的clickhouse server服務

systemctl restart clickhouse-server

原文鏈接:https://blog.csdn.net/huawuqing/article/details/127287081

欄目分類
最近更新