Bilgisayarımdan ayrılmış bir dosyayı BigQuery'ye yüklüyorum. Bunu yapabilirdi iki yolu: Cloud StorageBigQuery'ye doğrudan Cloud Storage'a yüklemekten daha hızlı mı yükleniyor?
bu yöntemlerin her biri için yükleme zamanında bir fark var mı doğrudan BQ için BQ
Nope, her iki şekilde de aynı alt yapıdan geçer.
Doğrudan BQ'ya yükleme avantajı, daha basittir: etkileşim için yalnızca bir hizmet.
GCS'ye yükleme avantajı, size daha fazla esneklik sağlamasıdır. Yükleme işiniz başarısız olursa (kötü şema vb.) Yeniden yükleme yapmadan yük işinizi tekrarlayabilir ve verilerin GCS'de (başka sistemlere yükleme gibi) bir kopyasını almak için başka nedenleriniz olabilir.
Ben öyle düşündüm, ama ben tekrar kontrol etmek istedim. – cshin9
Veri kümeniz büyükse, yüklediğiniz işi tekrar veri yüklemeden tekrarlamanız, eklenen ilk adımı GCS'ye ilk kez değerine değer kılar. –