Büyük XML dosyalarında komut satırı XPath sorguları nasıl yapılır?

Question

XML dosyalarından oluşan bir koleksiyonum var ve bunların bazıları oldukça büyük (~ 50 milyon eleman düğümüne kadar). Aktarım API'sı sayesinde büyük dosyalar için bile oldukça güzel olan bu dosyaları doğrulamak için xmllint kullanıyorum.

xmllint --loaddtd --stream --valid /path/to/huge.xml 

Geçenlerde xmllint da çok kullanışlı bir komut satırı XPath sorguları, yapma yeteneğine sahip olduğunu öğrendik.

xmllint --loaddtd --xpath '/root/a/b/c/text()' /path/to/small.xml 

Ancak, bu XPath sorguları büyük XML dosyaları için çalışmaz. Bir süre sonra sadece "Killed" mesajı alıyorum. Akış API'sini etkinleştirmeyi denedim, ancak bu sadece hiç çıktı almıyor.

xmllint --loaddtd --stream --xpath '/root/a/b/c/text()' /path/to/huge.xml 

xmllint kullanarak XPath sorguları yaparken akış modunu etkinleştirmek için bir yol var mı? Büyük XML dosyaları için komut satırı XPath sorguları yapmak için başka/daha iyi yollar var mı? XPath ifadeleri çok basit ise

Answer 1

, xmlcutty deneyin. anasayfasından

:

xmlcutty hızlı, büyük XML dosyalarından unsurları dışarı oyma için basit bir araçtır. Akış halinde çalıştığı için neredeyse hiç bellek kullanmaz ve dakikada 1 G XML işleyebilir.

Answer 2

değişim ulimits işe yarayabilir.

$ ulimit -Sv 500000 
$ xmllint (...your command)