clickhouse测试报告
一、背景
针对当前实施的项目，面临着两个主要挑战：一是需要存储更详细的原始数据和中间数据，二是现有基于MySQL的数据存储解决方案在数据量增长时性能受限，特别是在进行跨年历史数据的即时分析时。为了解决这些问题，对ClickHouse进行一系列的性能测试。
二、过程记录
1、环境
笔记本上搭建的虚拟机
操作系统：centos7.9
CPU/内存/硬盘：1C4G20G
ClickHouse版本：22.10.1.1877
2、安装步骤（离线）
3、测试场景
ü百、十万级、百万级、千万级、亿级的单表统计、小表关联，区分10列和50列分别测试
10列表测试（含中文列）
50列表测试（含中文列）
ü接入方式及性能
待接入数据量：2.7万
远程连接mysql导入方式：2秒
jdbc批量方式：6分半，经过分析，瓶颈在批量sql放缓存，可能是本地内存不足或配置方面的原因
三、初步结果
在资源有限的硬件环境下，ClickHouse的性能表现如下：
1、表分组统计性能：
对于包含10个字段的数据表，在进行分组统计操作时，ClickHouse展现出卓越的性能，处理超过2亿条数据仅需10秒钟。
即便数据表字段增加到50个，ClickHouse的性能依旧出色，与10个字段的数据表相比，执行效率没有显著差异。
2、表关联性能：
ClickHouse在关联小规模数据表时，也能保持较快的处理速度，处理2.7万条数据大约需要16秒。
3、数据导入性能：
当从远程MySQL数据库导入数据时，ClickHouse能够通过远程导入方式高效地完成数据迁移，2.7万条数据的导入过程仅需2秒。
然而，如果使用JDBC连接从MySQL导入数据，可能会因为硬件资源的限制，导致性能表现不佳，与其他数据库相比，速度较慢。
4、安装与配置注意事项：
在安装ClickHouse时，需要根据实际的硬件环境进行适当的配置。如果配置不当，例如分配的内存超出了物理内存的限制，可能会导致系统不稳定甚至崩溃。
四、其他说明
关于ClickHouse的稳定性，以及配置、性能调优方式是一个持续的过程，需要在实际运用中不断发现问题并加以改进。