Материалы предоставлены исключительно в ознакомительных целях.
![]() |
| gon |
Сообщение #1
|
| Участник
Репутация: 0 ![]() Группа: Посетители Сообщений: 21 Регистрация: 3.07.2010 ICQ:-- |
вопрос появился я могу запретить роботам индексировать ссылки на определенные сайтов в папке robots.tht или еще лучше чтобы он не читал то что находится в тегах quote /quote Если можно то как правильно прописать. Сообщение отредактировал gon - 29 июля 2010 16:41 |
| leaderru |
Сообщение #2
|
![]() Освоивщийся форумчанин
Репутация: 0 ![]() Группа: Администраторы Сообщений: 375 Регистрация: 22.07.2010 ICQ: |
Вообщето файл должен быть robot.txt -------------------- 5-6 августа буду в отъезде, а также 8-29августа уеду. Вы можете скачать любые срограммы с моего сайта http://dronex.ru/ |
| gon |
Сообщение #3
|
| Участник
Репутация: 0 ![]() Группа: Посетители Сообщений: 21 Регистрация: 3.07.2010 ICQ:-- |
robots.txt |
| leaderru |
Сообщение #4
|
![]() Освоивщийся форумчанин
Репутация: 0 ![]() Группа: Администраторы Сообщений: 375 Регистрация: 22.07.2010 ICQ: |
Строка User-agent содержит название робота. Например: User-agent: googlebot Если вы обращаетесь ко всем роботам, вы можете использовать символ подстановки \"*\": User-agent: * Ну вот смотри мой роботс: User-agent: * Disallow: /administrator/ Disallow: /blocks/ Disallow: /includes/ Disallow: /modules/ Disallow: /templates/ Disallow: /uploads/ Disallow: /jokes/ Sitemap: sitemap.xml А чтобы запретить индексировать ссылки, это не в роботс.тхт. Можешь добавить метатег Robots: <META NAME=ROBOTS\" CONTENT=\"INDEX, NOFOLLOW\"> Это значит, тчо робот может индексировать страницу, но не может пройти по ссылкам. Еще можешь в ссылки добавить rel=\"nofollow\" от индексации гугла - яндекса Вот пример: <noindex><a href=\"http://dronex.ru/\" rel=\"nofollow\">Варез портал</a></noindex> -------------------- 5-6 августа буду в отъезде, а также 8-29августа уеду. Вы можете скачать любые срограммы с моего сайта http://dronex.ru/ |
![]() |
| Сейчас: 6 сентября 2010 02:58 |