Mysql
 sql >> Cơ Sở Dữ Liệu >  >> RDS >> Mysql

Cải thiện hiệu suất của mysql TẢI DỮ LIỆU / mysqlimport?

MySQL / MariaDB engine có ít tính năng song song khi thực hiện chèn hàng loạt. Nó chỉ có thể sử dụng một lõi CPU cho mỗi LOAD DATA bản tường trình. Bạn có thể theo dõi việc sử dụng CPU trong quá trình tải để thấy một lõi được sử dụng hết và nó chỉ có thể cung cấp rất nhiều dữ liệu đầu ra - do đó khiến thông lượng đĩa bị sử dụng không đầy đủ.

Phiên bản mới nhất của MySQL có tính năng tải song song mới: https://dev.mysql.com/doc/mysql-shell/8.0/en/mysql-shell-utilities-parallel-table.html . Có vẻ hứa hẹn nhưng có lẽ vẫn chưa nhận được nhiều phản hồi. Tôi không chắc nó sẽ hữu ích trong trường hợp của bạn.

Tôi thấy nhiều danh sách kiểm tra khác nhau trên internet khuyến nghị có giá trị cao hơn trong các thông số cấu hình sau:log_buffer_size , log_file_size , write_io_threads , bulk_insert_buffer_size . Nhưng lợi ích không rõ ràng lắm khi tôi thực hiện các thử nghiệm so sánh (có thể nhanh hơn 10-20% so với chỉ innodb_buffer_pool_size đủ lớn).



  1. Database
  2.   
  3. Mysql
  4.   
  5. Oracle
  6.   
  7. Sqlserver
  8.   
  9. PostgreSQL
  10.   
  11. Access
  12.   
  13. SQLite
  14.   
  15. MariaDB
  1. Trong MySQL tại sao IF này trả về false?

  2. Thời gian tạo bảng Innodb

  3. Tham số '@myLeft' phải được xác định

  4. Truy vấn SQL trả về Toán hạng phải chứa 1 (các) cột

  5. Lỗi MYSQL:1045 (28000):Quyền truy cập bị từ chối đối với người dùng 'root' @ 'localhost'