经验首页 前端设计 程序设计 Java相关 移动开发 数据库/运维 软件/图像 大数据/云计算 其他经验
当前位置：技术经验 » 程序设计 » Docker » 查看文章
docker for windonws之Windows 10 家庭中文版安装clickhouse 22.3版本及配置过程
来源：jb51　　时间：2022/8/23 11:26:54　　对本文有异议

1. 拉取镜像

  1. docker pull clickhouse/clickhouse-server:22.3.11.12-alpine

2. clickhouse单机版

2.1. 配置容器

因为如下原因，需要将clickhouse的配置文件及数据目录复制到宿主机

  • 修改配置文件
  • 避免容器重启时，丢失数据文件
  1. #启动容器
  2. docker run -d --name ch-server --ulimit nofile=262144:262144 clickhouse/clickhouse-server:22.3.11.12-alpine
  3. # 复制文件到宿主机
  4. docker cp ch-server:/etc/clickhouse-server D:/docker/ch/etc/clickhouse-server
  5. docker cp ch-server:/var/lib/clickhouse D:/docker/ch/data
  6. #停止容器
  7. docker stop ch-server
  8. # 再次启动容器
  9. docker run -d --name=single-ch-server -p 8123:8123 -p 9000:9000 -p 9009:9009 --ulimit nofile=262144:262144 -v D:/docker/ch/data:/var/lib/clickhouse:rw -v D:/docker/ch/etc/clickhouse-server:/etc/clickhouse-server:rw clickhouse/clickhouse-server:22.3.11.12-alpine

2.2. 测试jdbc连接

启动成功后，使用DBeaver测试，用户名default,密码为空，则可以正常连接。

在这里插入图片描述

3 clickhouse集群版

3.1. 修改集群配置

  • 将配置、日志放在ch01目录下
  • 修改 D:\docker\ch\ch01\etc\clickhouse-server下的config.xml中，删除 <remote_servers>节点并添加如下信息
  1. 	<include_from>/etc/clickhouse-server/metrika01.xml</include_from>
  2. 	<remote_servers incl="clickhouse_remote_servers" optional="true"/>
  3. 	<zookeeper incl="zookeeper_servers" optional="true"/>
  4. 	<macros incl="macros" optional="true"/>
  5.     <!--MergeTree引擎表的数据压缩设置，在metrika.xml-->
  6.     <compression incl="clickhouse_compression"></compression>
  • 新增metrika01.xml文件，内容如下：
  • 考虑到一台笔记本的资源比较有限，所以就安装单个节点的zk, clickhouse的集群也是2分片1副本的。
  1. <?xml version="1.0"?>
  2. <yandex>
  3.     <clickhouse_remote_servers>
  4.       <cluster01>
  5.             <shard>
  6.                 <internal_replication>true</internal_replication>
  7. 				<weight>1</weight>
  8.                 <replica>
  9.                     <host>ch01</host>
  10.                     <port>9000</port>
  11.                     <user>default</user>
  12.                     <password></password>
  13.                 </replica>
  14.             </shard>
  15. 			<shard>
  16.                 <internal_replication>true</internal_replication>
  17. 				<weight>1</weight>
  18.                 <replica>
  19.                     <host>ch02</host>
  20.                     <port>9000</port>
  21.                     <user>default</user>
  22.                     <password></password>
  23.                 </replica>
  24.             </shard>
  25. 		</cluster01>
  26.     </clickhouse_remote_servers>
  27.  
  28.     <macros>
  29.         <layer>01</layer>
  30.         <shard>01</shard>
  31.         <replica>ch01</replica>
  32.     </macros>
  33.  
  34.     <zookeeper_servers>
  35.         <node index="1">
  36.             <host>zk01</host>
  37.             <port>2181</port>
  38.         </node>
  39.     </zookeeper_servers>
  40.  
  41.    <networks>
  42.      <ip>::/0</ip>
  43.    </networks>
  44.  
  45.   <clickhouse_compression>
  46.     <case>
  47.       <min_part_size>1073741824</min_part_size>
  48.       <min_part_size_ratio>0.01</min_part_size_ratio>
  49.       <method>lz4</method>
  50.     </case>
  51.   </clickhouse_compression>
  52. </yandex>

节点ch02的配置：复制ch01目录，产生ch02目录

修改metrika01.xml，将macros内容调整，其它配置与上面一致。

  1.    <macros>
  2.         <layer>01</layer>
  3.         <shard>02</shard>
  4.         <replica>ch02</replica>
  5.     </macros>

3.2. 编辑docker-compose.yml

采用卷标的方式挂载数据

  1. version: '3.1'
  2. services:
  3.   zookeeper:
  4.     image: zookeeper:3.4.14
  5.     ports:
  6.       - "8181:2181"
  7.       - "8182:2182"
  8.     hostname: zk01
  9.   ch01:
  10.     image: clickhouse/clickhouse-server:22.3.11.12-alpine
  11.     restart: on-failure
  12.     container_name: ch01
  13.     ports:
  14.       - 9000:9000
  15.       - 8123:8123
  16.       - 9009:9009
  17.     volumes:
  18.       - ch1-data:/var/lib/clickhouse
  19.       - D:/docker/ch/ch01/etc/clickhouse-server:/etc/clickhouse-server:rw
  20.       - D:/docker/ch/ch01/log:/var/log/clickhouse-server:rw
  21.     hostname: ch01
  22.     ulimits:
  23.       nofile:
  24.         soft: 262144
  25.         hard: 262144
  26.     depends_on:
  27.       - "zookeeper"
  28.   ch02:
  29.     image: clickhouse/clickhouse-server:22.3.11.12-alpine
  30.     restart: on-failure
  31.     container_name: ch02
  32.     ports:
  33.       - 9800:9000
  34.       - 8823:8123
  35.       - 9809:9009
  36.     volumes:
  37.       - ch2-data:/var/lib/clickhouse
  38.       - D:/docker/ch/ch02/etc/clickhouse-server:/etc/clickhouse-server:rw
  39.       - D:/docker/ch/ch02/log:/var/log/clickhouse-server:rw
  40.     hostname: ch02
  41.     ulimits:
  42.       nofile:
  43.         soft: 262144
  44.         hard: 262144
  45.     depends_on:
  46.       - "zookeeper"
  47. volumes:
  48.   ch1-data:
  49.   ch2-data:

3.3. 启动CH集群

  1. docker-compose up -d

3.4. 测试

  1. create database test on cluster cluster01;
  2. use test;
  3. create table events_local on cluster cluster01 (
  4. 	ID String,
  5. 	EventType UInt8,
  6. 	URL String,
  7. 	EventTime DateTime
  8. ) ENGINE = MergeTree()
  9. PARTITION BY toStartOfDay(EventTime)
  10. ORDER BY (EventTime,EventType)
  11. SETTINGS index_granularity = 8192;
  12.  
  13. create table events on cluster cluster01 as test.events_local ENGINE = Distributed('cluster01', 'test', 'events_local', rand());
  14.  
  15. insert into events(ID,EventType,URL,EventTime) values ('11',1,'http://www.baidu.com','2021-12-20 12:00:00');
  16. insert into events(ID,EventType,URL,EventTime) values ('12',1,'http://www.baidu.com','2021-12-20 12:00:00');
  17. insert into events(ID,EventType,URL,EventTime) values ('13',1,'http://www.baidu.com','2021-12-20 12:00:00');
  18. insert into events(ID,EventType,URL,EventTime) values ('14',1,'http://www.baidu.com','2021-12-20 12:00:00');
  19. insert into events(ID,EventType,URL,EventTime) values ('15',1,'http://www.baidu.com','2021-12-20 12:00:00');
  20. insert into events(ID,EventType,URL,EventTime) values ('16',1,'http://www.baidu.com','2021-12-20 12:00:00');

4. 存在的解决问题

4.1. Permission denied

将Clickhouse的数据目录放在宿主机时，在插入数据时报如下错误，但如果不放在宿主机，则数据会丢失。

  1. Received exception from server (version 22.3.11):
  2. Code: 1001. DB::Exception: Received from localhost:9000. DB::Exception: std::__1::__fs::filesystem::filesystem_error: filesystem error: in rename: Permission denied [/var/lib/clickhouse/store/0d4/0d4a6f52-b3a6-4496-8174-e03ae9503321/tmp_insert_1639958400_1_1_0/] [/var/lib/clickhouse/store/0d4/0d4a6f52-b3a6-4496-8174-e03ae9503321/1639958400_1_1_0/]. (STD_EXCEPTION)
  • 采用将宿主机 路径直接挂载到本地，比较直观，但需要管理本地的路径，但这种方式在clickhouse写数据时，会报：Permission denied
  • 使用卷标的方式，比较简洁，但你不知道数据存在本地什么位置，但这种方式在clickhouse写数据时是正常的

目前不清楚具体的原因，如果你知道，烦请告知。 4.2. Ports are not available

报错信息：Error response from daemon: Ports are not available: exposing port TCP 0.0.0.0:8848 -> 0.0.0.0:0: listen tcp 0.0.0.0:8848: bind: An attempt was made to access a socket in a way forbidden by its access permissions.

通过cmd命令查看哪些端口被禁用TCP协议

  1. netsh interface ipv4 show excludedportrange protocol=tcp

将docker启动命令中的宿主机端口改成禁用之外的就可以了

在这里插入图片描述

到此这篇关于docker for windonws之Windows 10 家庭中文版安装clickhouse 22.3版本及配置的文章就介绍到这了,更多相关Windows 10安装clickhouse内容请搜索w3xue以前的文章或继续浏览下面的相关文章希望大家以后多多支持w3xue！

 友情链接：直通硅谷 　点职佳 　北美留学生论坛

Docker热门文章

  • docker部署certbot与nginx来获取ssl证书添加https及自动更新
  • 解决docker的tls(ssl)证书过期问题
  • 人工智能,丹青圣手,全平台(原生/Docker)构建Stable-Diffusion-Webui的AI绘画库教程(Python3.10/Pytorch1.13.0)
  • Docker原理
  • docker&nbsp;for&nbsp;windonws之Windows&nbsp;10&nbsp;家庭中文版安装clickhouse&nbsp;22.3版本及配置过程
  • Docker-compose command 有多个命令例子
  • docker修改容器配置文件的3种方法总结
  • 解决docker pull镜像报错的问题
  • Docker在Centos 7上的部署
  • Docker使用Prune命令清理none镜像

    • Docker推荐文章

  • 如何在Linux云服务器上通过Docker Compose部署安装Halo，搭建个人博客网站？
  • 使用Cloudflare Worker加速docker镜像
  • 如何在 Windows 使用 Podman Desktop 取代 Docker Desktop
  • Linux 提权-Docker 容器
  • 配置pod拉取harbor容器镜像仓库私有镜像：secret保存账号密码
  • Win11系统下的MindSpore环境搭建
  • 白话理解和使用DOCKER VOLUME
  • Docker 必知必会4----容器之间的通信
  • Docker 必知必会3----使用自己制作的镜像
  • 对于Docker和Podman的一点使用经验

    • 本站QQ群：前端 618073944 | Java 606181507 | Python 626812652 | C/C++ 612253063 | 微信 634508462 | 苹果 692586424 | C#/.net 182808419 | PHP 305140648 | 运维 608723728

    W3xue 的所有内容仅供测试，对任何法律问题及风险不承担任何责任。通过使用本站内容随之而来的风险与本站无关。
    关于我们  |  意见建议  |  捐助我们  |  报错有奖  |  广告合作、友情链接（目前9元/月）请联系QQ：27243702 沸活量
    皖ICP备17017327号-2　皖公网安备34020702000426号