MySQL dökümünde ne kadar mesafe var?

Question

Şirketimde, zaman zaman geliştirici makinelerimize yüklemek için bir gün sürebilen büyük müşteri MySQL veritabanlarını (40 GB +) alıyoruz. Bu yükleme süresini arka planda yapıldığından kabul etsek de, ithalatların ne zaman biteceğini tahmin etme konusunda sağlam bir yeteneğimiz yok. Bu, üzerinde hareket etmesi için uygun bir zaman planlamaktan bizi engeller. Kablo adamının ortaya çıkmasını beklemek gibi.

Şu an için en iyi stratejim, tabloların yüzde yüze yüklendiğini görmek için hızlı bir show tables komutudur. Ancak, tablo boyutları birbiriyle ve her müşteri ile büyük ölçüde farklılık gösterdiğinden, bu güvenilirliğe bile yakın değildir.

Herhangi bir MySQL alma işlemi boyunca ne kadar güvenilir bir yüzde elde etmek için kullanılabilecek iyi bir teknik veya araç var mı?

Answer 1

pv komutu ile dökümü mysql'a göndererek yapabilirsiniz.

pv -i 1 -p -t -e /path/to/sql/dump | mysql -u USERNAME -p DATABASE_NAME 

İO iş hacmine dayalı olarak içe aktarma işlemi sırasında size bir ilerleme çubuğu gösterecektir. (Görüldüğü gibi here.)

Answer 2

HeidiSql size şimdiye kadar kaç GB yüklendiğini söyleyecektir, bu da ne kadar yüklenmeye ihtiyaç duyduğunu anlamaya çalışırken oldukça faydalıdır.

Answer 3

Ayrıca, dışa aktarma işleminin belirli bir tabloya ne kadar uzandığını (otomatik arttırma kimliğine göre) görmek için kaynak veritabanında bir yapabilirsiniz. Eric, veritabanı veri dizininin boyutunu kaynağın boyutuna göre izleyebileceğiniz iyi bir noktaya dönüşür.

Dumps/import'ları hızlandırmak için yararlı bulduğum bir şey, bunu tablolara göre yapmak ve daha sonra birden çok mysqldumps'ı aynı anda çok sayıda iş parçacığıyla iş parçacığı oluşturmaktır. Genellikle bir seferde yaklaşık 4 ayrı döküm/geri yükleme yaptım. En uygun miktar, donanım ve disk özelliklerine bağlı olacaktır.

mysqldump dbname table1 table2 table3 | mysql -h host & 
mysqldump dbname table4 table5 table6 | mysql -h host & 
mysqldump dbname table7 table8 table9 | mysql -h host &