Keresőrobot statisztika
A sokak által kedvelt és használt Google Analytics kiváló webstatisztikát nyújt, ráadásul ingyenes, igazán nem szeretnék senkit lebeszélni a használatáról. Van viszont egy olyan vonatkozás, amiben nem lesz a segítségünkre, ez pedig a robot látogatások statisztikája, ugyanis a Google Analytics statisztika csak a human látogatókra vonatkozik.
Igaz, a Google Webmester Eszközök megmutatja a feltérképezés gyakoriságát, de nem árulja el, hogy mikor pontosan merre járt az oldalon a Googlebot.
Pedig a weboldalak optimalizálása során igen jó támpontot jelent, ha tudjuk mely URL -eket milyen gyakorisággal látogat a Googlebot és a többi keresőrobot.
Létezik ingyenes eszköz amit erre a célra igénybe vehetünk.
Akik szeretnének további információkat a robot látogatásokról, nekik ajánlom a CrawlTrack statisztika feltelepítését, jelenleg magam is ezt használom.
Nagyjából 10-20 percet vesz igénybe a telepítés, viszont az elvesztegetett időért cserébe a CrawlTrack rengeteg plusz információval kárpótol.
Egy telepítéssel akár több weboldal statisztikája is követhető, a statisztika lehet publikus, privát, vagy akár felhasználói fiókokat is lehet létrehozni az egyes weboldalak statisztikájához. A statisztikákról email értesítőt lehet beállítani, de ami a lényeg: ragyogó statisztikát ad a keresőrobotok aktivitásáról.
Frissítés: készítettem néhány képernyőképet a statisztikáról a teljesség igénye nélkül.
Címkék: Google Analytics, keresőrobot statisztika
2009 03 24 11:44-kor
Tanácsodra feltelepítettem ezt az analizálót és nagyon tetszik, viszont van jópár dolog, amit nem nagyon értek, hogy mit is mér…
- Attack <– fogalmam sincs, hogy ez micsoda
- Crawlers <– itt mik az egyes oszlopok, mert az én logikám alapján úgy tűnik, mintha többször látogatna meg, mint ahány oldalt megnézne… ez hogy lehetséges?
- Nbre of crawlers <– ez mit fejez ki?
- Total visits <– ezt a botokkal együtt kell érteni? Jóval nagyobb itt a szám, mint amit az analytics mér.
…ez csak néhány kérdés és nagyon hálás lennék, ha megválaszolnád, de a legjobban annak örülnék, ha írnál néhány bejegyzést mondjuk CrawlTrack lépésről-lépésre címmel!
Előre is köszönöm!
2009 03 24 21:30-kor
Az attack az nem a robotokról szól, az a webhelyet érő támadásokkal kapcsolatos, bekapcsolható hogy kijelezze, vagy blokkolja a támadásokat, túlzottan nem merültem bele, nem tudom mennyire profi és pontosan mi ellen véd, nálam egy kód beillesztés kísérletét jelezte ezen az oldalon a comment formon keresztül, de mivel a blokkolás jelenleg nincs bekapcsolva, végül az Akismet plugin ami megakadályozta.
A Crawlers menüpontban a grafikonon a vízszintes tengelyen az idő, tengelyen az egyes színekkel a különböző robotok vannak jelölve. Alatta táblázatosan részletezve. Ugyanaz a robot is meglátogathat egy URL -t többször egy adott idő intervallum alatt, több robotnál meg értelem szerűen több a látogatások száma, mint a meglátogatott URL -ek.
Ide kapcsolódik a Nbre of crawlers is (vagyis hány különböző robot tette látogatását), ahogy a fent beillesztett képernyőképen is látszik, az adott napon ezt az oldalt meglátogatta a Googlebot 47, a Nutch 8, az Alexa 1, a Yahoo Slurp 4, a Google Image bot 3 alkalommal. Tehát összesen öt robot 63 alkalommal. Itt a robotok száma így 5.
A weboldalainkat bizony nem csak a Googlebot vizslatja.
Total visits: ha arra az értékre gondolsz, ami a felső képen látszik (tehát a pages viewed menüpont), az csak a robot látogatások számára vonatkozik, ebben egyáltalán nincsenek benn a humán látogatók, ezért az Analytics ezt nem is méri.
A keywords és az entry page az viszont már az emberi látogatókra vonatkozik, ott a keywords azt mutatja, melyik kereső milyen kulcsszóra, az entry page pedig, hogy hova szállította a látogatót.
Gondolkoztam egy komplett magyarításon, de egyenlőre úgy látom nincs nagy érdeklődés, vagy mindenki sokkal profibb eszközöket használ, vagy a többséget ilyen mélységekben már nem érdekli a robot statisztika.
2009 03 25 10:03-kor
Köszönöm a kielégítő választ!