جلسهی 42: پروژه: تحلیلگر لاگ Project: Log Analyzer
یک ابزار واقعی تحلیل لاگ میسازیم: خطوط را با regex تجزیه، با ژنراتورها فیلتر، با Counter و defaultdict تجمیع و در قالب یک گزارش جدولی چاپ میکنیم.
در این جلسه یاد میگیری
- یک
parserمبتنی بر regex بنویسم که خطوط خراب را بدون از کار افتادن برنامه رد کند. - داده را با
pipelineژنراتوری فیلتر و باCounterوdefaultdictتجمیع کنم. - یک گزارش جدولی همتراز با f-string تولید کنم.
درس
هدف پروژه: از متن خام لاگ یک سرویس، گزارشی بسازیم که نشان دهد کدام ماژولها بیشترین خطا را دارند. دادهی نمونه در متغیر LOG آماده است و یک خط خراب هم عمداً داخلش گذاشته شده است.
2026-10-13 09:01:15 ERROR [db] connection lost
corrupted line ###معماری: هر مرحله یک تابع کوچک و مستقل است. parse خطوط را به دیکشنری تبدیل میکند، فیلترها ژنراتورند و فقط تجمیع نهایی داده را در حافظه نگه میدارد. این همان طراحی ابزارهای واقعی پردازش لاگ است که روی فایلهای چند گیگابایتی هم کار میکنند.
entries = parse(LOG.splitlines())
errors = (e for e in entries if e["level"] == "ERROR")هر مرحلهی پروژه یک برنامهی کامل است که روی مرحلهی قبل ساخته میشود. کد مرحلهی قبل را کپی کنید و گسترش دهید؛ ثابت LINE (الگوی کامپایلشده) در کد اولیه آماده است.
نکتهی حرفهای: ورودی واقعی همیشه کثیف است. parser نباید با یک خط خراب کل برنامه را متوقف کند؛ آن را بشمارید و گزارش دهید.
مثالهای این جلسه
- مثال پایتون در پایتون: 2026-10-13 09:01:15 ERROR [db] connection l…
- مثال تاپل و مجموعه در پایتون: errors = (e for e in entries if e["level"] …
چالشها
- Step 1: Parse Lines (متوسط)
- Step 2: Level Statistics (متوسط)
- Step 3: Errors per Module (سخت)
- Step 4: The Report (سخت)