Последняя активность
robots.txt | Agent [Off] [#] (24.07.2008 / 14:21)
|
Если бот уже индексирует сайт и я установлю robots.txt он пример указания или же дальше продолжит индексацию? И правильно ли закрывать доступ к определенным файлам чтоб бот не ходил по этим ссылкам Disallow: /papka/file.php
Disallow: /papka/file2.php и так далее?
| Piks [Off] [#] (24.07.2008 / 17:11)
|
Бот приходя на сайт ф первую очередь запрашивает robots.txt. Если его нету, то он просто по фсем ссылкам начинает ходить. И врятли ты того робота заставишь посмотреть robots.txt еще раз, надо будет ждать следующего визита
| Agent [Off] [#] (24.07.2008 / 17:21)
|
Piks(24.07.2008/12:11):<br />"Бот приходя на сайт ф первую очередь запрашивает robots.txt. Если его нету, то он просто по фсем ссылкам начинает ходить. И врятли ты того робота заставишь посмотреть robots.txt еще раз, надо будет жд"Понятно. Я бота выгнал. Придет тогда в следующий раз гг
| Bizon [Off] [#] (24.07.2008 / 18:49)
|
Agent(24.07.2008/09:21):<br />"Если бот уже индексирует сайт и я установлю robots.txt он пример указания или же дальше продолжит индексацию? И правильно ли закрывать доступ к определенным файлам чтоб бот не ходил по этим ссылкам Di"не советую делать этот роботс , при желании можно глянуть ф него и увидеть все ваши секретики
| AkeLLa [Off] [#] (24.07.2008 / 18:50)
|
ой бля, не смеши, мне без него легче глянуть твои секретики
| AkeLLa [Off] [#] (24.07.2008 / 19:01)
|
Сервер:Apache Запрещено к индексированию:/dn/mail.php Disallow: /dn/ocfile.php Disallow: /dn/load.php/dn/jad.php/dn/zakaz.php/dn/imgload.php/dn/nar.php/dn/new.php/dn/search.php/dn/top.php/jimm/file/fs
| AkeLLa [Off] [#] (24.07.2008 / 19:02)
|
бля хуле здесь \n вырезаеца???
| Agent [Off] [#] (24.07.2008 / 19:05)
|
AkeLLa(24.07.2008/14:01):<br />"Сервер:Apache Запрещено к индексированию:/dn/mail.php Disallow: /dn/ocfile.php Disallow: /dn/load.php/dn/jad.php/dn/zakaz.php/dn/imgload.php/dn/nar.php/dn/new.php/dn/search.php/dn/top.php/jimm/file/fs"ты дурак что ли?хули ты мне тут это выложил когда я и без тебя Все это вижу? какой еще нах н вырезается?
| Agent [Off] [#] (24.07.2008 / 19:08)
|
Ты че этим сказать то хочешь? что кулцхакер что ли? бугога.
БИЗОН,какие еще секреты гг? То что не видит юзер,хрен увидит и бот,а следовательно прятать нечего гг
| AkeLLa [Off] [#] (24.07.2008 / 19:13)
|
Сканер наебнулся..
| Agent [Off] [#] (24.07.2008 / 19:14)
|
AkeLLa(24.07.2008/14:13):<br />"Сканер наебнулся.."чего гг какой еще сканер гг?
| AkeLLa [Off] [#] (24.07.2008 / 19:17)
|
короче написал я в начале года скрипт который собирает через гугл все имена папок и файлов твоего сайта..
| Agent [Off] [#] (24.07.2008 / 19:18)
|
Вы мне лучше скажите можно ли файлы php запрещать к индексированию как я сделал? вот таким образом Disallow: /dn/file.php
Disallow: /dn/ocfile.php
Disallow: /dn/imgload.php
?
| Agent [Off] [#] (24.07.2008 / 19:20)
|
AkeLLa(24.07.2008/14:17):<br />"короче написал я в начале года скрипт который собирает через гугл все имена папок и файлов твоего сайта.."А это пох. У меня есть папки которые ни бот ни юзер не увидит. Хачю вообще Все Rewrite engine посадить и еще пару фитчей когда двиг готов будет
| Bizon [Off] [#] (24.07.2008 / 19:30)
|
Agent(24.07.2008/14:08):<br />"Ты че этим сказать то хочешь? что кулцхакер что ли? бугога.
БИЗОН,какие еще секреты гг? То что не видит юзер,хрен увидит и бот,а следовательно прятать нечего гг"гы,бот как раз таки и видит дохуя чего , а гуголь этто вааще весчь аххуенная , ты ф курсе как типа "училися " половина уёбкаф с хака ?
| Agent [Off] [#] (24.07.2008 / 19:33)
|
Bizon(24.07.2008/14:30):<br />"гы,бот как раз таки и видит дохуя чего , а гуголь этто вааще весчь аххуенная , ты ф курсе как типа "училися " половина уёбкаф с хака ?"ага я бывал на их сайтах как они вводили install.php и ломали. Гугл сцуко еще тот жук гг
Всего: 16
Скачать темуФорум
Новые вверху