python: sıkıştırılmış metin dosyalarından satırları oku

Question

Dosyayı tamamen ayıklamadan python kullanarak gz sıkıştırılmış metin dosyasından bir satırı okumak kolay mı? Ben 200m olan bir text.gz dosyası var. Ayıkladığımda, 7.4gb olur. Ve bu okumak zorunda olduğum tek dosya değil. Toplam işlem için 10 dosya okumalıyım. Bu sıralı bir iş olmasına rağmen, bence tüm bilgiyi harcamadan yapmanın akıllıca bir şey olacağını düşünüyorum. Bunun mümkün olduğunu bile bilmiyorum. Python kullanarak nasıl yapılabilir? Bir metin dosyasını satır-satır okumalıyım.

Answer 1

gzip.GzipFile kullanmayı denediniz mi? Bağımsız değişkenler open'a benzer.

Answer 2

Standart gzip modülünü python'da kullanabilirsiniz. Sadece başka bir dosya olarak açmak ve satırlarını okumak için

kullanın.

burada

fazla bilgi: Python gzip module

Answer 3

gzip.GzipFile kullanma:

import gzip 

with gzip.open('input.gz','r') as f: 
    for line in f: 
     print('got line', line) 

Not: python3 için size gelmiş dosyayı belirtmek için ikili okumaya 'r' varsayılan olarak, 'rt' açılan veya edilecek aksi halde line.decode(...) kullanın.

Not : gzip.open(filename, mode)gzip.GzipFile(filename, mode) için bir takma addır. Sıkıştırılmamış dosyaları açmak için kullanılan with open(...) as f:'a benzeyen eskiyi tercih ederim.