Файл robots.txt для вашего форума

Список разделов phpBBex 1.x (поддерживается) Мастерская 1.x

Описание: Только готовые решения! Статьи, заметки, моды и другие полезности для phpBBex 1.x и phpBB 3.0.x.
Модератор: Поддержка

Сообщение #21 Модник » 15.07.2014, 09:46

Данный роботс актуален на 1.8?

Код: Выделить всё
User-Agent: *
Host: example.com
Disallow: /forum/adm
Disallow: /forum/cache
Disallow: /forum/classes
Disallow: /forum/docs
Disallow: /forum/download
Allow:    /forum/download/file.php
Disallow: /forum/files
Disallow: /forum/includes
Disallow: /forum/install
Disallow: /forum/language
Disallow: /forum/modules
Disallow: /forum/stk
Disallow: /forum/store
Disallow: /forum/styles
Disallow: /forum/umil
Disallow: /forum/mcp.php
Disallow: /forum/posting.php
Disallow: /forum/report.php
Disallow: /forum/style.php
Disallow: /forum/viewtopic.php?*&view=print
Disallow: /forum/memberlist.php
Clean-param: sid /forum/
Clean-param: f&hilit /forum/viewtopic.php
Crawl-delay: 10
Модник M
Аватара
Репутация: 5
С нами: 9 лет 9 месяцев

Сообщение #22 VEG » 15.07.2014, 10:15

Актуален.
VEG M
Автор темы, Администратор
Аватара
Откуда: Finland
Репутация: 1653
С нами: 12 лет

Сообщение #23 pisikot » 15.09.2014, 13:19

Clean-param: sid /forum/
Clean-param: f&hilit /forum/viewtopic.php
Crawl-delay: 10

Оказывается это для яндекса, гугл не знает что это такое))

Снимок.JPG
Снимок.JPG (32.82 КБ) Просмотров: 11838
pisikot M
Аватара
Откуда: Тюмень, Россия
Репутация: 43
С нами: 11 лет 7 месяцев

Сообщение #24 Sumanai » 15.09.2014, 15:09

Зато когда узнает, ничего править не нужно будет, в отличии от разнесения правил по разным секциям.
Sumanai M
Аватара
Репутация: 1677
С нами: 11 лет 2 месяца

Сообщение #25 ЖЪРЧИК » 21.11.2014, 11:38

Модник,
Код: Выделить всё
Disallow: /cgi-bin/
добавил бы, если имеется.
ЖЪРЧИК
Аватара
Репутация: 174
С нами: 9 лет 8 месяцев

Сообщение #26 dipol » 16.12.2014, 01:21

VEG:Угу, помимо hilit ещё параметр f должен игнорироваться.
И? Чувствую у меня загвоздка именно где то тут )):

Изображение

Изображение

Добавлено спустя 1 минуту 23 секунды:
pisikot:Оказывается это для яндекса, гугл не знает что это такое))
Так мб тут у меня собака то зарыта или чего? Или это мод Sitemap_FX мне чего то там не так создает?
dipol M
Аватара
Репутация: 21
С нами: 9 лет 5 месяцев

Сообщение #27 dipol » 16.12.2014, 10:31

А все.. вроде прочухалось... (видать у гугла там старый robot.txt завис)

Изображение
dipol M
Аватара
Репутация: 21
С нами: 9 лет 5 месяцев

Пред.

Вернуться в Мастерская 1.x