Apache grep büyük günlük dosyası

Question

Belirli şüpheli kalıpları (SQL enjeksiyonları gibi) aramak için Apache günlük dosyasını ayrıştırmam gerekiyor.

Mesela ben bu desen (ve diğerleri) için günlük dosyasını kontrol etmek için grep kullanıyorum id='%20or%201=1;

arıyorum ve bu günlükleri çok büyük çünkü

İşte uzun bir miktarda alır komuta:

grep 'id=' Apache.log | egrep "' or|'%20" 

Ben daha hızlı arama yapmak için kullanabilirsiniz ihtiyaç daha iyi veya daha hızlı bir yöntem veya komut var mı?

Answer 1

Yeni başlayanlar için, grep çıktınızı egrep ürününe aktarmanız gerekmez.

egrep "id='(or|%20)'" apache.log 

egrepgrep -E arayarak aynıdır çağrılması: sadece bunu yapabilirsiniz, böylece egrep, ayrıştırma grep 'ın normal ifadenin bir üst sağlar.

Bu size küçük bir performans artışı sağlayabilir. Düzenli ifadeler yerine sabit dizeleri arayabilirseniz, bu da yardımcı olabilir. Sen -F seçeneğiyle sabit dize aramaya grep söyleyebilir:

grep -F "id='%20or" apache.log 

Ama kullanarak sabit dizeleri size bir esneklik kaybeder.

Answer 2

Veriden veri alırken çoğu zaman harcanır (CPU kullanımı azami değil). Ardından sorguyu optimize edemezsiniz. Ancak ilginç satırları ayrı bir dosyada günlüğe kaydetmeye çalışabilirsiniz.

Answer 3

grep -E "id=(' or|'%20)" apache.log mi arıyorsunuz?