Bir sıralamadaki ilerlemeyi linux olarak görüntülemek mümkün mü?

Question

İşim, çok büyük dosyalardan çok fazla sıralama alanı içeriyor. Bunu genelde bash'ta sort komutu ile yapıyorum. Ne yazık ki, bir çeşit başladığımda, ne kadar süreceği konusunda emin değilim. Sonuçların görünmesi için bir saniye beklemeli miyim, yoksa çalışırken başka bir şey üzerinde çalışmaya mı başlamalıyım?

Bir türün ne kadar ilerlediğine veya ne kadar hızlı çalıştığına dair bir fikir edinmenin herhangi bir yolu var mı?

$ cut -d , -f 3 VERY_BIG_FILE | sort -du > output 

Answer 1

Hayır, GNU sort raporlama ilerleme yapmaz.

Ancak, sadece çiftleri kaldırmak ve aslında sipariş umurumda değil sort kullanıyorsanız, o zaman böyle şeyler yapma more scalable way var:

awk '! a[$0]++' 

Bu ilk geçtiği dışarı yazıyor görüldüğü anda çizgi, size ilerleme hakkında bir fikir verebilir.

Answer 2

Sen istemi alacak arka daki "tür" yürütebileceği ve diğer işleri

yapabilirsiniz

$ sıralama ...... & # (& arka planda çalışmasına demektir)

Answer 3

You pv'u denemek isteyebilir, bu, piponuzda iş akışı açısından nelerin olup bittiğine dair güzel bir fikir vermelidir.

Örnek (denenmemiş) öncesi ve sort komutundan sonra pv enjekte throughput hakkında bir fikir edinmek için:

$ cut -d , -f 3 VERY_BIG_FILE | pv -cN cut | sort -du | pv -cN sort > output 

EDIT: Ben ilk bu yüzden çizgileri hesaplanırken, sizin sıralama komutu -u cevapsız Bir yüzde çıktı elde edebilmek geçersizdir. Bu kısmı cevabımdan çıkardı.