Server log fayllar — bu sizning sayt serveringizga kelgan har bir sörovning töliq yozuvi. Foydalanuvçi taşrifi, Googlebot taşrifi, hacker hujum urinişi — har biri loglarda saqlanadi. SEO mutaxassisi uçun bu juda qimmatli ma'lumot manbai, çunki log fayllar Googlebot saytingizda haqiqatan qanday harakat qilayotganini körsatadi. Google Search Console sizga umumiy köriniş beradi, log fayllar esa har daqiqaning aniq tarixi.
Log fayllar nima va qaerda saqlanadi
Har sayt serveriga sörov yuborilganda (sahifa oçiş, rasm yuklaş, fayl söraş) server bu sörovni log faylga yozib qöyadi. Apaçe server'da bu access_log fayli (odatda /var/log/apache2/access.log), Nginx'da access.log (/var/log/nginx/access.log). Log fayllarning har qatori bitta sörovni ifodalaydi va quyidagi ma'lumotlarni öz içiga oladi: taşrif buyuruvçi IP manzili, sana va vaqt, sörov turi (GET, POST), söralgan URL, server javob statusi (200, 404, 500), sörov hajmi va eng muhimi — User Agent.
User Agent — bu taşrif buyuruvçi kim ekanligini bildiradi. Oddiy foydalanuvçi uçun bu Chrome, Firefox, Safari kabi brauzer nomi böladi. Googlebot uçun esa öziga xos identifikator: Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html). Şu User Agent bilan log fayldan Googlebot taşriflari ajratib olinadi.
Nima uçun log tahlili SEO uçun muhim
Search Console sizga Googlebot statistikasini beradi, lekin u juda umumiy körinişda — qança sahifa öqildi, qanday xatolar böldi. Log fayllar esa har sahifa darajasidagi aniq ma'lumot beradi. Misol uçun: Googlebot saytingizning qaysi sahifalarini tez-tez öqiydi va qaysilarini umuman öqimaydi? Yangi sahifa Googlebot tomonidan qaçon birinçi marta öqildi? Googlebot qanday xatolarga duç keldi va qaysi sahifalarda?
Bu ma'lumot crawl budget optimizatsiyasida tilla bahosida. Agar Googlebot vaqtini past sifatli sahifalarga sarflayotgan bölsa va muhim sahifalarga kelmasa — log tahlili buni darrov körsatadi. Misol uçun: faceted navigation tufayli minglab URL parametr kombinatsiyalari Googlebot vaqtini yeyayotgan bölişi mumkin, va siz buni log fayllarsiz aniq bilmaysiz.
Log fayllar bilan işlaş uçun vositalar
Birinçi vosita — Screaming Frog Log File Analyser. Bu Windows va Mac uçun desktop dastur, narxi yiliga $200. Log faylni yuklaysiz va dastur sizga aniq ma'lumot beradi: qaysi sahifalar eng köp öqilgan, qaysi User Agent (Googlebot, Bingbot, Yandex bot) qanday tarqalgan, qanday status kodlar (200, 301, 404, 500) çiqqan, vaqt böyiça trafik dinamikasi.
Korxona darajasida Botify va JetOctopus pulli xizmatlari mavjud (oyiga $500-2000). Bu xizmatlar real vaqtda log fayllarni tahlil qiladi va dashboard körinişida ma'lumot beradi. Bepul yöl ham bor: GoAccess (open-source CLI vosita) yoki AWK/grep buyruqlari bilan terminal'da manual tahlil. Bu texnik bilim talab qiladi, lekin xarajatsiz.
Log tahlilidan olinadigan asosiy ma'lumotlar
Birinçi — Googlebot crawl frequency (çastota). Qaysi sahifalar har kuni öqiladi, qaysilari haftada bir, qaysilari oyda bir marta? Bu Google'ning sizning sahifa muhimligi haqida qarorini körsatadi. Yuqori çastota — Google sizning sahifani \"yuangilanib turadigan, muhim\" deb hisoblaydi.
Ikkinçi — Crawl errors (xatolar). 4xx va 5xx status kodlar log fayllarda aniq körinadi. 404 xato — Google sizning olib taşlangan sahifaga link berişni urunayapti, demak içki yoki taşqi link buzilgan. 500 xato — server muammosi, Googlebot crawl budget'ingizni yeyayotgan vaqtda. Bu xatolarni darrov tuzatiş kerak.
Uçinçi — Orphan pages (yetim sahifalar). Bu Googlebot öqiyotgan, lekin sayt strukturasida heç qaysi yerdan link olmagan sahifalar. Bu köpinça eski URL'lar, test sahifalar, yoki strukturani notöğri qurilganidan kelib çiqqan. Bularni topib, sayt strukturasida töğri joylaştiriş yoki olib taşlaş kerak.
Crawl waste (isrof) topiş
Log tahlilining eng katta foydasi — Googlebot vaqti qaerga isrof bölayotganini körsatadi. Misol uçun: e-commerce saytda Googlebot 80% vaqtini /products?color=...&sort=... kombinatsiyalariga sarflayotgan bölişi mumkin, faqat 20% asosiy mahsulot va kategoriya sahifalariga. Bu aniq isrof — barçasi parametrlardir va asosan dublikat.
Yeçim: robots.txt'da bu parametrlarni Disallow qiliş yoki Google Search Console'da \"URL parameters\" sozlamasi orqali ulardan voz keçiş. Natijada Googlebot vaqti tezda asosiy sahifalarga yönaltiriladi va indekslaş sezilarli tezlaşadi.
Logyaqindagi log tahlili strategiyasi
Log fayllar tezda katta hajmga yetadi — bir oylik log fayl gigabayt darajasiga çiqişi mumkin. Strategiya: 7 kunlik faol log fayl, oxirgi 30 kunni saqlaş, eski log fayllarni siqib arxivlaş. Tahlil uçun odatda oxirgi 7-30 kun yetadi.
Audit çastotasi: yangi sayt uçun har oy, barqaror sayt uçun har 3 oy, e-commerce uçun har oy (çunki yangi mahsulotlar doimo qöşiladi). Har auditdan keyin natijalarni Google Şeets'da saqlang va vaqt ötib trendlarni kuzating.
Log fayllarda hacker urinişi ham körinadi
SEO tahlilidan taşqari, log fayllar xavfsizlik uçun ham qimmatli. Hacker bot'lari saytingizga ulanişga urinadigan paytda, ularning urinişi loğda qoladi. Wp-login.php, admin.php, phpmyadmin.php sahifalariga köp sörov — brute force uriniş. .git, .env, config.php fayllariga sörov — sezgir ma'lumot izlaş.
Bu hujumlar köpinça User Agent orqali ham aniqlanadi (bot nomlari) yoki bir IP'dan köp sörov tezligi orqali. Fail2ban kabi vositalar log fayllarni real vaqtda tahlil qilib, hujum aniqlasa avtomatik IP'ni bloklaydi.
Sayt.uz log tahlili amaliyot
Sayt.uz har 3 oyda log fayllarni audit qiladi. Screaming Frog Log File Analyser işlatamiz. Asosiy kuzatuvlar: Googlebot blog kategoriyaga köproq vaqt sarflayaptimi (kontent strategiyasi töğrimi), 404 xatolar yöqmi (yangi/o'chirilgan sahifalar töğri boşqarilganmi), va orphan pages yöqmi.
Oxirgi audit (2026 yanvar): Googlebot vaqti 60% bloğga, 25% mahsulot sahifalarga, 15% kategoriya va boşqalar. Bu balanced va biznes prioritetlariga mos. Heç qanday muhim 404 xato yöq. 3 ta orphan page topildi va ular sayt strukturasiga töğri ulandi. Bu audit Sayt.uz crawl strategiyasining soğlom ekanligini tasdiqlaydi.