CnosDB vs MySQL
CnosDB 2.4 vs MySQL 5.6
在CnosDB 2.4 和 MySQL 5.6 之间做了写入、查询和压缩比性能测试的对比，下面是测试结论和测试细节信息。
测试结论
在写入、查询和压缩比方面，CnosDB均更优于MySQL
测试前期
1.测试环境准备
| CnosDB | MySQL | |
|---|---|---|
| 版本 | 2.4 | 5.6 |
| 机器 | 1台 | 1台 |
| 内核版本 | 3.10.0-1160.81.1.el7.x86_64 | 3.10.0-1160.81.1.el7.x86_64 |
| 操作系统版本 | CentOS Linux release 7.9.2009 (Core) | CentOS Linux release 7.9.2009 (Core) |
| CPU | 32核 Intel(R) Xeon(R) Gold 5218 CPU @ 2.30GHz | 32核 Intel(R) Xeon(R) Gold 5218 CPU @ 2.30GHz |
| 内存 | 256G | 256G |
| 磁盘 | 1块SSD盘(1T) | 1块SSD盘(1T) |
2.测试实例准备
3.配置项检查及修改
CnosDB和MySQL均只修改了Data、Wal、Meta的存储文件夹路径，其余均保持默认，此处不做赘述。
4.数据集准备
- 数据集行数：410522759
- 数据集文件格式：csv
- 数据集大小：39G
测试数据schema
| 字段 | MySQL类型 | CnosDB类型 |
|---|---|---|
| time | BIGINT | TIMESTAMP |
| device_version | VARCHAR(255) | TAG |
| driver | VARCHAR(255) | TAG |
| fleet | VARCHAR(255) | TAG |
| model | VARCHAR(255) | TAG |
| elevation | VARCHAR(255) | TAG |
| fuel_capacity | DOUBLE | DOUBLE |
| fuel_consumption | DOUBLE | DOUBLE |
| grade | DOUBLE | DOUBLE |
| heading | DOUBLE | DOUBLE |
| latitude | DOUBLE | DOUBLE |
| load_capacity | DOUBLE | DOUBLE |
| longitude | DOUBLE | DOUBLE |
| nominal_fuel_consumption | DOUBLE | DOUBLE |
| velocity | DOUBLE | DOUBLE |
测试中期
- 向CnosDB写入数据：
COPY INTO readings FROM '/data/data/csv/cnodb-iot-seed-123-scale-100-2017_csv/cnodb-iot-seed-123-scale-100-2017_readings_no_blank.csv'
FILE_FORMAT = (TYPE = 'CSV', DELIMITER = ',');
- 向MySQL写入数据：
load data local infile '/data/data/csv/cnodb-iot-seed-123-scale-100-2017_csv/cnodb-iot-seed-123-scale-100-2017_readings_no_blank.csv'
into table readings character set utf8 fields terminated by ',' lines terminated by '\n' ignore 1 lines;
写入测试结果
| CnosDB 2.4 | MySQL 5.6 | |
|---|---|---|
| write time | 11 min 1 s | 1 hour 55 min 20 s |
查询测试结果
| SQL | CnosDB 2.4 | MySQL 5.6 |
|---|---|---|
| select count(*) from readings | 1 min 41 sec | 4 min 41 sec |
| select count(*) from readings where latitude = 100 | 3.7 sec | 3 min 55.75 sec |
| select count(*), max(latitude), min(latitude), avg(latitude) from readings | 3.5 sec | 5 min 46 sec |
| sselect count(*), max(latitude), min(latitude), avg(latitude) from readings group by driver | 9.4 sec | 7 min 3.47 sec |
压缩比测试结果
| CnosDB 2.4 | MySQL 5.6 | |
|---|---|---|
| 原始数据 | 39G | 39G |
| 写入后落盘数据 | 15G | 62G |
| 压缩比 | 2.6 | 0.6 |