csv dosyasına bir satır ekleyin

Question

Büyük bir csv dosyam var (terabayt sırasına göre).

Şimdi, üst sıraya bir satır olan bir satır eklemek istiyorum. Örneğin

input.csv aşağıdaki gibiyse: Ben

id1,id2,id3,id4 
1,2,3,4 
and so on 

benzemek istiyorum

1,2,3,4 
22,3,23,1 

Nasıl kabuk, terminal, awk, bash yapıyorsun/

?

Answer 1

geçerli:

sed -i 1i"id1,id2,id3,id4" file.csv 

düzenleme: @Ed Morton işaret ettiği gibi

, -i anahtarı ile sed kullanarak sed dosyayı yerinde düzenler ve bu nedenle büyük dosyaları düzenlerken tehlikeli olabilir. -i seçeneğinden sonra bir önek sağlarsanız, sed bir yedek oluşturur. Yani böyle bir şey daha güvenli olacaktır:

sed -i.bak 1i"id1,id2,id3,id4" file.csv 

orijinal dosya daha sonra file.csv.bak

Answer 2

Bu kadar basit olarak:

{ echo "id1,id2,id3,id4"; cat file.csv; } > newfile.csv 

Basit kabuk birleştirmeyi kullanarak

.

DÜZENLEME aşağıda tartışma iplik, bu teklif

sonra:

• sizin başlığıyla bir dosya oluşturmak head.txt

Sonra şunları söyledi:

cat head.txt file.csv > newfile.csv 

Answer 3

Kolay bir yol yok, dosyayı yeniden yazmanız gerekecek. Muhtemelen en güvenli yolu sed kullanarak,

(echo "id1,id2,id3,id4" ; cat file) > newFile && rm file 

için IHTH

yerde

Answer 4

Edit yer alacaktır. Bu cevabı yazdığımda, sorunun "terabayt" bölümünü gözden kaçırdım. Bu nedenle, burada sunulan yöntem kullanmayın. Hala bu yazıyı bırakıyorum, çünkü bu harika aracın kullanımını, standart metin editörü olan ed.

Her zamanki gibi, ed standart metin editörüdür. sed -i kullanılarak yapılan çözüm, "dosyayı yerinde düzenleyin" ifadesinde bulunmuyor. Bunun yerine, içeriğini geçici bir dosyaya gönderir ve sonra bu dosyayı orijinal olana yeniden adlandırır. Bu büyük dosyalar için gerçekten iyi değil!

Bunun yerine ed kullanarak dosyayı gerçekten düzenler.Aşağıdaki doğrultuda bir şey:

#!/bin/bash 

file="input.csv" 

{ 
ed -s "$file" <<EOF 
1 
i 
id1,id2,id3,id4 
. 
wq 
EOF 
} > /dev/null 

Açıklama: 1, ilk satıra gider i ekleme moduna girer, o zaman id1,id2,id3,id4 sonra . Normal moda geri dönmek için yerleştirin ve wq yazıp çıkmak için.

Bu yöntemde, dosyayı gerçekten düzenlersiniz ve sed yönteminden iki kat daha hızlıdır. Ayrıca, ed "büyük dosya güvenli" olarak bilinir!

Bitti.