pgsql/mysql/clickhouse性能对比

目前公司使用的关系型数据库版本较老，有计划对关系型数据库进行一次升级。有两个方案，一是将现在的mysql5.7升级到8.0，二是将数据库替换成pgsql15，所以对这两个库的查询写入和资源损耗进行一次对比。

前置准备

服务器

两台配置相同的服务器。配置参数如下：

CPU：

内存：32GB

磁盘：

网络：千兆网络

数据库版本

MySQL 8

PostgreSQL 15

程序

使用 springboot + mybatis-plus 框架进行数据插入和查询。部分代码如下：

数据插入：

     @Test
     public void test01() {
 
         String importer = "FEHMİ EROĞLU DIŞ TİCARET ANONİM ŞİRKETİ";
         String exporter = "MUNDIAL IMPORTAÇAO E EXPORTAÇAO EIRELI";
         String hsCode = "081310000000";
         String countryOfDestination = "brazil";
         String countryOfOrigin = "turkey";
         double weight = 40000.0000;
         double sumOfUSD = 263000.0000;
         double weightUnitPrice = 6.58;
         double qty = 0.0000;
         String qtyUnit = "KG";
 
         List group = new ArrayList<>();
         for (long i = 0; i < 1000000; i += 1000) {
             group.add(i);
        }
 
         group.stream().parallel().forEach(num -> {
             long point = num + 1000;
             List list = new ArrayList<>();
             for (long i = num; i < point; i++) {
                 Analysis analysis = Analysis.builder()
                        .date(new Date())
                        .importer(importer + (num + i))
                        .exporter(exporter + (num + i))
                        .hsCode(hsCode + (num + i))
                        .countryOfDestination(countryOfDestination + (num + i))
                        .countryOfOrigin(countryOfOrigin + (num + i))
                        .weight(BigDecimal.valueOf(weight + (num + i)))
                        .sumOfUSD(BigDecimal.valueOf(sumOfUSD + (num + i)))
                        .weightUnitPrice(BigDecimal.valueOf(weightUnitPrice + (num + i)))
                        .qty(BigDecimal.valueOf(qty + (num + i)))
                        .qtyUnit(qtyUnit + (num + i))
                        .build();
                 list.add(analysis);
            }
             analysisService.saveBatch(list);
        });
 
         System.out.println(analysisService.count());
    }

数据查询：

@Test
     public void test002() {
         Page page = new Page<>(1, 1000000);
         Page response = analysisService.page(page);
    }

性能对比

数据插入

上述程序均运行在同一台个人电脑（性能较差）上，共计插入数据 1000000 条。执行耗时如下：

结论：PostgreSQL插入性能约为MySQL的4倍

数据查询

上述程序均运行在同一台个人电脑（性能较差）上，执行耗时如下：

服务器上查询对比mysql/pgsql/clickhouse性能对比

mysql和pgsql单表数据500W，clickhouse单表数据3000W，单条的数据长度相同，clickhouse服务器配置略高于mysql和pgsql

结论：大数据量单表查询场景，mysql、pgsql两个数据库的查询性能相较于clickhouse差别较大，与clickhouse不是一个级别的。

结论

单表50W以下mysql与pgsql相差较小，在10W级别甚至要优于pgsql。

超过50W数据量，mysql性能远不及pgsql。

clickhouse查询性能确实强悍，百万以下数据几乎都能在1S以内查出结果。

clickhouse对服务器配置要求较高，特别是cpu配置要求较高。 

最终决定将业务系统数据库替换成pg15。