Първо какво е Googlebot? Името е съкращение от „google robot“ и означава софтуерна система, която обикаля сайтовете и събира информация за тях. Тази информация се използва по-късно за търсачката, за оценка на сайтовете (google PR) и за генериране на реклами (Adsense).
Добре де, но каква е ползата от това да се маскираме като някакъв си робот? Хубавото на тази система е, че има достъп до всичко. Има много сайтове в които може да се влезе само ако си си платил. Тези сайтове обаче са супер популярни и искат да може да се търси в тях с Google или да пускат техни реклами. Затова повечето от тях дават на роботите неограничен достъп.
След като разбрахме ползите, ето как става. Всеки browser изпраща един текст, който казва на сървъра какъв е клиента. Казва се User Agent и обикновено е името и версията на bowser-а. Номера е да се смени текста с това, което googlebot-овете изпращат.
При Firefox това е лесно – само трябва да инсталирате една добавка, което ви слага падащ списък на прозореца, с който можете да избирате как да се маскирате. От тук може да свалите добавката, а това е сайта на разработчика. При тази добавка има три примерни опции за сменяне на user agent-а. Може да добавите и още сами, но за улеснение ето един сайт, от който може директно да свалите повечето използвани user agent-и в мрежата.
Ако имате нещастието да работите с IE и не можете да се прехвърлите на Firefox по някаква невероятна причина, процедурата естествено е по-сложна. За целта трябва да промените регистрите в Windows. Неудобството е, че няма лесно сменяне като при добавката на Firefox и ако решите да ги върнете обратно така, че да не сте маскирани, трябва да го направите на ръка. Ето какво трябва да се смени:
[HKEY_LOCAL_MACHINE\SOFTWARE\Microsoft\Windows \CurrentVersion\Internet Settings\5.0\User Agent]
@=“Googlebot/2.1″
„Compatible“=“+http://www.googlebot.com/bot.html“
Ако искате да го върнете обратно трябва да смените това:
[HKEY_LOCAL_MACHINE\SOFTWARE\Microsoft\Windows \CurrentVersion\Internet Settings\5.0\User Agent]
@=“Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1)“
За ваше улеснение съм направил два инсталационни файла в архива отдясно – първия (IE_googlebot_mask.reg) маскира IE като googlebot, а втория го възстановява. Във файловете няма вируси или червеи и дори не бих помислил да сложа. Ако някой намери нещо нередно да пише в коментарите. Ето я и оригиналната статия за IE.
[tags]googlebot, mask, adsense, google, robot, crawl, user agent, маскиране, firefox, IE, защити, достъп, платени[/tags]
Гениално! Браво! 🙂
И за Opera става, но не знам точно как. По-принцип в старите версии може да се свали plug-in за целта подобно на Firefox. В Opera 8 тази функция вече е вградена и по подразбиране може да изберете само между маскиране като IE или Firefox. Не знам дали може да не направи като Googlebot, но ще разпитам и ще го добавя в статията. Ето тук има инфо по въпроса.
За Safari, Samba и Konqueror нямам информация.
Интересно… Благодаря 🙂
Статията е малко старичка ама имам въпрос: Как точно се ползва тоя гоогълбот? имам FF свалих си добавката уж я пускам всичко както трябва ама разликата не виждам. Бихте ли помогнали малко. Мерси 🙂
По принцип има разлика само в сайтовете, които изискват регистрация, но в същото време дават достъп на Google. Пример за това мисля, че са повечето новинарски сайтове, като NYTimes, The Independent и т.н. За Facebook не знам дали важи. Като цяло при 99% от сайтовете не би трябвало да има разлика.