Giriş
Apache web sunucuları, genellikle erişim ve hata logları tutar. Bu loglar, web trafiğini anlamak, kullanıcı davranışlarını analiz etmek ve güvenlik açıklarını tespit etmek açısından oldukça önemlidir. Python, esnek ve güçlü kütüphaneleri sayesinde bu logların analizi için ideal bir dil haline gelir. Peki, bu logları nasıl etkin biçimde analiz edebiliriz? İşte temel bir yöntem ve örnekler.
Apache Log Formatı ve Temel Yapı
Apache loglarının çoğu, Common Log Format veya Combined Log Format kullanır. Örneğin;
127.0.0.1 - frank [10/Oct/2000:13:55:36 -0700] "GET /apache_pb.gif HTTP/1.0" 200 2326
Burada IP adresi, kullanıcı adı, zaman damgası, istek metni, durum kodu ve byte sayısı gibi bilgiler bulunur.
Python ile Log Okuma ve İşleme
Python'un
re (regular expression) modülü, log satırlarını parçalayıp anlamlandırmada kullanışlıdır. Ayrıca,
pandas gibi kütüphaneler ile veriyi tablo şeklinde düzenleyip analiz etmek mümkündür. Örneğin;
12345678910111213python
import re
log_pattern = re.compile(r'(?P\d+\.\d+\.\d+\.\d+) - (?P\S+) \[(?P.+?)\] "(?P.+?)" (?P\d+) (?P\d+)')
def parse_log_line(line):
match = log_pattern.match(line)
if match:
return match.groupdict()
return None
with open('access.log', 'r') as f:
logs = [parse_log_line(line) for line in f if parse_log_line(line)]
Bu kod, log satırlarını düzenli ifadelerle ayırır ve sözlükler halinde toplar.
Analiz ve Raporlama
Toplanan veriler üzerinde;
- En çok erişilen IP'leri,
- En sık yapılan URL isteklerini,
- Hangi durum kodlarının (ör. 404, 500) en çok görüldüğünü,
- Trafik zaman dilimlerine göre dağılımı,
gibi analizler yapılabilir. Bu noktada
pandas ve
matplotlib gibi kütüphaneler, görselleştirmeyi kolaylaştırır.
Sonuç
Python ile Apache loglarının analizi, otomasyon ve derinlemesine içgörü sağlar. Bu sayede güvenlik açıkları, performans sorunları ve kullanıcı davranışları hakkında detaylı bilgiler elde edilebilir. Log analizi, sadece veri toplamak değil, aynı zamanda anlamlandırmak ve karar vermek için kritik bir adımdır. Apache loglarını nasıl detaylı ve etkin biçimde analiz edeceğinize dair kendi projelerinizi geliştirdikçe, bu becerinizin artacağını göreceksiniz.
