Python3 turle ile python2 cPikle tarafından seri hale getirilmiş veriler nasıl okunur?

Question

a special version for python içeren CIFAR-10 dataset ile çalışıyorum çalışıyorum.

Her biri 10k numpy matrislerinin bir sözlüğünü temsil eden bir ikili dosyalar dizisidir. Dosyalar açık bir şekilde python2 cPickle tarafından yaratılmıştır. Bu gerçekten harika işler

import cPickle 
with open("data/data_batch_1", "rb") as f: 
    data = cPickle.load(f) 

:

ben şöyle python2 onu yüklemeye çalıştı. Ben python3 veri yüklemek için çalışırsanız, ancak (yerine değil cPickle ama pickle vardır), başarısız:

import pickle 
with open("data/data_batch_1", "rb") as f: 
    data = pickle.load(f) 

aşağıdaki hata ile başarısız olursa:

UnicodeDecodeError: 'ascii' codec can't decode byte 0x8b in position 6: ordinal not in range(128) 

ben bir şekilde dönüşümü Can python3'ten okunabilecek yeni bir veri kümesine 3? Ya da bir şekilde python3'ten okuyabilir miyim?

Ben cPickle tarafından yüklemeden json içine damping ve pickle tarafından geri okuma denedim ama numpy matrisler belli ki json dosyası olarak yazılamaz.

Answer 1

Bu bytestring'ler için hangi codec bileşeninin kullanılacağını belirtebilir ya da verileri bunun yerine bytes olarak yüklemesini söyleyin. Gönderen pickle.load() documentation: Sadece google üzerinden bu bulmak diğerleri için

import pickle 
with open("data/data_batch_1", "rb") as f: 
    data = pickle.load(f, encoding='bytes')