[Тупой вопрос] про гугл...
юзай robots.txt
А какой у гугла юзерагент? Ап: О! http://www.google.com/support/webmasters/bin/answer.py?answe...
robots.txtвот если в робот.тхт будет ссылка он точно будет знать адрес этой папки.
User-agent: *решает! Ггы.
Disallow: /
юзай robots.txtА все-таки, если попробовать ответить на вопрос - найдет или нет? Можно ли браузеру сделать запрос типа DirectoryIndex? Пробует ли гугл перебирать какие-либо стандартные имена директорий?
А все-таки, если попробовать ответить на вопрос - найдет или нет? Можно ли браузеру сделать запрос типа DirectoryIndex? Пробует ли гугл перебирать какие-либо стандартные имена директорий?Браузеру можно задавать любые вопросы, он только отвечать не обучен.
Http-сервер может выдать список директорий, если неправильно настроен.
Пользуется ли этим гугл, хз.
В рекомендации гугла для веб-мастеров написано:
Build your site with a logical link structure. Every page should be reachable from at least one static text link.Я думаю, что если веб-сервер не выдает список папок и нет других ссылок, то робот папку не проиндексирует.
Http-сервер может выдать список директорий, если неправильно настроен.или если правильно зависит от задачи
выдавая список директорий он генерит простенькую хтмлку, соответственно на директорию появляется ссылка
гуглу (как и любому другому зашедшему) выдается эта хтмлка и он уходит по ней вглубь
Браузеру можно задавать любые вопросы, он только отвечать не обучен.Я опечатался, а ты язвишь)
http://obzor.westsib.ru/news/85229
быстро и практично, только нужно крышу замутить и получится палатка на колесах
Оставить комментарий
stm4836248
Если на сайте есть папка, но ни на одной странице нет та неё ссылки, то гугл найдёт эту папку или нет?