Liunx下Mysql,MongoDB性能優化的配置

場景

  這幾天在趕十一上線的項目,但是突然發現介面性能不好,高並發支援不住。又不想改程式碼,就在資料庫層面進行優化。

Mysql

  分區:項目中有對40萬條的數據進行時間查詢的要求,就算對DateTime建立了索引,也十分耗時。這個時候可以用分區,把一個表按一個欄位分為多個區,比如創建時間(DateTime類型)。主要分區語句如下:

partition by range COLUMNS(CreateTime)(
        PARTITION 08p1 VALUES LESS THAN ('2009-01-01'),
        PARTITION 09p1 VALUES LESS THAN ('2010-04-01'),
        PARTITION 09p2 VALUES LESS THAN ('2011-07-01'),
        PARTITION 09p3 VALUES LESS THAN ('2012-10-01'),
        PARTITION 09p4 VALUES LESS THAN ('2013-01-01'),
        PARTITION 10p1 VALUES LESS THAN ('2014-04-01'),
        PARTITION 10p2 VALUES LESS THAN ('2015-07-01'),
        PARTITION 10p3 VALUES LESS THAN ('2016-10-01'),
        PARTITION 10p4 VALUES LESS THAN ('2017-01-01'),
        PARTITION 11p1 VALUES LESS THAN ('2018-04-01'),
        PARTITION 11p2 VALUES LESS THAN ('2019-07-01'),
        PARTITION 22p12 VALUES LESS THAN ('2020-01-01'),
        PARTITION p12 VALUES less than MAXVALUE
);        

  在Create Table的sql語句中添加,這裡採用的是RANGE 分區,還有其他類型的分區。注意:

    1.之後可以對某一分區進行細分,不會影響數據;用reorganize語句

    2.可以合併分區,不會影響數據;

    3.一定要有less than MAXVALUE,避免有數據不能分配到分區中。

    4.最好把分區的欄位設為主鍵。

  最後,MYSQL中40多萬的數據查詢耗時到100ms以內。

  配置文件:主要修改以下參數:

    1.innodb_buffer_pool_size。是InnoDB引擎中處理快取的;

    2.innodb_buffer_pool_instances。

MongoDB

  非同步:最好把程式碼中所有有關增加,查詢等操作的都改為非同步,可以減少耗時。

  配置文件:主要修改以下參數:

    1.wiredTigerCacheSizeGB。單位是GB,用來設置引擎所使用的快取大小,默認單例下使用記憶體的一半。

    2.maxConns = 2000。最大連接數。

Liunx

  主要修改一些系統限制,在/etc/sysctl.conf文件中進行修改,重啟生效。

    1.vm.swappiness。值越大,表示越積極使用swap分區,越小表示越積極使用物理記憶體.

    2.* soft nofile 65535 和 * hard nofile 65535 ,修改每個進程能打開的最大文件數