Боты (поисковые роботы) для phpBB и phpBBex

[Sumanai]

Добавил так, как указано у вас в первом сообщении - не зашёл ещё ни разу, хотя у меня появилось много новых тем и приходится ссылки на темы вручную вносить в аадурилку яндекса :?

Заходить или не заходить- это воля робота яндекса. Мало ли что ему взбрело в голову. Может не хочет.

Я так понимаю, надо указать

Не нужно. Эта строка будет работать для всех роботов яндекса. Писать YandexBot нужно, если вы хотите прописать индивидуальные настройки только для основного робота, а для других другие. Смысла в этом я не вижу, как и в прописывании каких- либо уникальных настроек вообще, проще сразу для всех один набор правил.

[user]

Sumanai, спасибо за подробный ответ

[VEG]

Если у вас старый форум, на котором постоянно появляются новые сообщения — робот будет заходить регулярно. Например, на phpbbex.com Яндекс в последний раз был 26 минут назад, Google — 15 минут назад. Они заходят регулярно на протяжении дня (вместе с другими поисковыми ботами), по несколько раз за час. Если же форум новый, то в первые полгода даже ожидать частого захода ботов не приходится. Например, phpbbex.com Яндекс не хотел вообще добавлять в индекс месяца 3 где-то, а потом год в выдаче сильно занижал. Google в этом плане более «добрый» к новым сайтам, в индекс добавил в первую неделю, и в выдаче за первые несколько месяцев вывел на текущие позиции.

[user]

VEG, форуму уже 1 год и 1 месяц, гугл бот сидит очень часто, яндекс бот тоже. Вопрос был именно в боте addurl.

Да уж, по поводу механизмов выдачи Яндекса я много начитался, так что тот факт, что в яндексе 282 страницы, а в гугле 94 300 ...я как-то не удивляюсь)

[assa]

Комрады, у кого сколько ботов из 59 имеющихся посетили форум? У меня побывали только 14 ботов. 6 из них - боты яндекса.

[Xisp]

У меня 28 штук, из которых 5 от яндекса, штуки 4 добавил сам, так как не было в стандартной поставке.

[mfana]

Если же форум новый, то в первые полгода даже ожидать частого захода ботов не приходится.

Вот у меня новый, а боты ходят несколько раз в день. И яндекс, и гугл, и бинг :)

[Sumanai]

Частый- это с перерывами максимум 15 минут.

[pisikot]

Также предлагаю делиться в этой теме другими полезными роботами, которые посещают ваш форум.

Не знаю насколько полезен бот спутника, но ходит шарит)

Код: Выделить всё

Sputnik [Bot] SputnikBot/

[ЖЪРЧИК]

phpBB Guru • Bots Install Script + 387 поисковых ботов [Все и сразу] : Бета-версии модов для phpBB 3.0.x
Liveinternet, Openstat, Спутник еще аля "чебурашка" в phpbbex нет.

[Test]

Вообще, такой метод (перечисление ботов) тупой.

[ЖЪРЧИК]

Test, почему? Окончательный список, чтобы определить какой бот заходил. Вроде только эту функцию он выполняет, а под главных ботов специальная выкладка мб. Нагрузки никакой, мертвый груз, но статистика интересна.

[Test]

Да этих ботов может быть тысячи и каждый день новые появляются.

[rbooze]

Спутник

Этому вообще лучше доступ запретить