Büyük miktarlarda http loglarını (80 GB +) istatistiksel işlem için bir Pandas HDFStore'a aktarıyorum. Tek bir içe aktarma dosyasında bile, içeriği yükledikçe toplu halde toplulaştırmam gerekiyor. Şu
nasıl dosyası üzerinden pd.read_csv() için iteratif yığın kullanabilir ve aynı anda tüm veri kümesi okumak sanki d_type ve diğer meta bilgileri korumak ChunkSize kullanarak? Belleğe sığamayacak kadar