что должно быть прописано в файле robots

primax · 01.06.2009, 22:15

что должно быть прописано в файле robots чтобы всем поискавым роботам можно было индексировать мой сайт
я прописал так

User-agent: *
Disallow:
Host: www.moneybiznes.ru

подскажите пожалуйста это правильно ?

и может чтото ищё подскажете, а то я только два дня про этот файл знаю, может я чтото не так сделал, я по интернету пашустрил вроде бы всё правельно написал, но я гне уверен
есле не трудно обясните мне мольшую роль играит этот файл robots или нет

---------- Добавлено в 17:22 ---------- Предыдущее сообщение было написано в 17:15 ----------

по умолчанию в этом файле было написано так

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/

но как я понял это запрещение индексации этих папок

Gosha · 01.06.2009, 23:39

Код:

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /editor/
Disallow: /help/
Disallow: /images/
Disallow: /includes/
Disallow: /language/
Disallow: /mambots/
Disallow: /media/
Disallow: /modules/
Disallow: /templates/
Disallow: /installation/
Disallow: /?option=
Disallow: /?replyto=
Disallow: /?mosmsg=
Disallow: /?

Вот мой robots. на joomla (запрещение индексации следующих папок поисковыми роботами для безопасности)

Антон · 02.06.2009, 00:38

При robots.txt лучше почитать здесь.

Цитата:

Сообщение от Gosha

Disallow: /?option= Disallow: /?replyto= Disallow: /?mosmsg= Disallow: /?

Disallow: /? включает в себя 3 идущие перед ним строки.

01.06.2009, 22:15	#1 (ссылка)
primax Новичок Регистрация: 17.01.2009 Сообщений: 383 Репутация: 1	что должно быть прописано в файле robots что должно быть прописано в файле robots чтобы всем поискавым роботам можно было индексировать мой сайт я прописал так User-agent: * Disallow: Host: www.moneybiznes.ru подскажите пожалуйста это правильно ? и может чтото ищё подскажете, а то я только два дня про этот файл знаю, может я чтото не так сделал, я по интернету пашустрил вроде бы всё правельно написал, но я гне уверен есле не трудно обясните мне мольшую роль играит этот файл robots или нет ---------- Добавлено в 17:22 ---------- Предыдущее сообщение было написано в 17:15 ---------- по умолчанию в этом файле было написано так User-agent: * Disallow: /administrator/ Disallow: /cache/ Disallow: /components/ Disallow: /images/ Disallow: /includes/ Disallow: /installation/ Disallow: /language/ Disallow: /libraries/ Disallow: /media/ Disallow: /modules/ Disallow: /plugins/ Disallow: /templates/ Disallow: /tmp/ Disallow: /xmlrpc/ но как я понял это запрещение индексации этих папок

01.06.2009, 23:39	#2 (ссылка)
Gosha Стажёр Регистрация: 11.11.2007 Сообщений: 3,280 Записей в блоге: 12 Репутация: 114	Код: User-agent: * Disallow: /administrator/ Disallow: /cache/ Disallow: /components/ Disallow: /editor/ Disallow: /help/ Disallow: /images/ Disallow: /includes/ Disallow: /language/ Disallow: /mambots/ Disallow: /media/ Disallow: /modules/ Disallow: /templates/ Disallow: /installation/ Disallow: /?option= Disallow: /?replyto= Disallow: /?mosmsg= Disallow: /? Вот мой robots. на joomla (запрещение индексации следующих папок поисковыми роботами для безопасности)

Похожие темы
Тема	Автор	Раздел	Ответов	Последнее сообщение
Вирус в системном файле	Alabaika	Безопасность	14	17.12.2010 22:45
блок питания выдаёт напряжение не много меньше чем должно быть	Super meat boy	Неисправности, настройка	2	07.12.2010 00:42
Прописываеться ли история изменений в файле PDF ?	mikolo2005	Офис	3	08.11.2010 12:27
сидит вирус в файле	SERGEY66	Безопасность	7	02.10.2010 10:55
Как мне прописать строку в файле hosts	DimonAnp	Безопасность	13	24.05.2010 01:08
Как узнать напряжение которое должно подаваться по умолчанию на процессор ?	sosnodub	Железо	1	02.05.2010 21:13
Не удаляется, то что должно удаляться!	Kazimirov	Windows XP	12	28.03.2010 17:12
Должно ли так при запуске?	спартак	Windows XP	31	12.03.2010 19:32
Вирус в файле userlib.dll	v_taras	Безопасность	97	07.02.2010 14:53
В каком файле редактировать фото	forkatt	Веб-строительство	1	30.01.2010 14:11
php поиск в txt Файле двух одинаковых слов	kostas312	Программирование	1	23.10.2009 20:57
информация о файле	dimassskkk	Windows XP	0	20.07.2008 00:32

Здесь присутствуют: 1 (пользователей: 0 , гостей: 1)

Ads