(*) Kıvılcım Python işareti benim dosyalardan

Question

biri aşağıdaki yolu vardır: Şimdi

s3://bucket/folder/file[1]*[2] 

, ben sc.textFile komutunu kullanarak, bunu okumaya çalışıyorum, bunun yıldız işareti (*) yüzünden okuyamaz.

Düzgün okumanın bir yolu var mı?

(I * çalıştı, ancak bu işe yaramadı) Herhangi bir yardım büyük takdir

. Eğer [] orada da özel karakter vardır Görüldüğü üzere

Answer 1

Kıvılcım Hadoop en globs yani

http://hadoop.apache.org/docs/r2.7.2/api/org/apache/hadoop/fs/FileSystem.html#globStatus(org.apache.hadoop.fs.Path)

kullanır. Parantezleri de kaçmayı deneyin.

Answer 2

Kullandığınız paketler hakkında bilmiyorum ama boto3 ile urlparse.quote_plus kullanıyorum.

https://docs.python.org/2/library/urllib.html#urllib.quote_plus