Поисковые боты

Программирование, Хакинг, Безопасность, Софт, Железо, а также всё связанное с компьютерами
Аватара пользователя
Андрей
Архитектор
Сообщения: 7305
Зарегистрирован: 06 май 2015, 14:10
Откуда: Чехов
Благодарил (а): 517 раз
Поблагодарили: 462 раза

Поисковые боты

Сообщение Андрей »

Сегодня был гость Яндекс-бот, почему-то моя система его не опознала.
Строку "соответствие агенту" изначально задавал как "Yandex/".

Когда я смотрел инфо по Гостю, там было вроде Yandex 3.0 что ли. Так как правильно этого бота оформить?
Аватара пользователя
Андрей
Архитектор
Сообщения: 7305
Зарегистрирован: 06 май 2015, 14:10
Откуда: Чехов
Благодарил (а): 517 раз
Поблагодарили: 462 раза

Re: Как раскрутить форум в каталогах и поисковых системах?

Сообщение Андрей »

О! Сегодня Яндекс-бот опознался, спасибо Диме - HDV, "Yandex" надо было забивать без всяких слешей.
Аватара пользователя
Андрей
Архитектор
Сообщения: 7305
Зарегистрирован: 06 май 2015, 14:10
Откуда: Чехов
Благодарил (а): 517 раз
Поблагодарили: 462 раза

Re: Как раскрутить форум в каталогах и поисковых системах?

Сообщение Андрей »

Нашёл инфу в инете:
"Название бота" - "Соответствие агенту"

Код: Выделить всё

Exabot [Bot] - Exabot/
Mail.RU 2.0 [Bot] - Mail.RU_Bot/2.0
Odnoklassniki [Bot] - OdklBot/1.0
VkShare [Bot] - vkShare
LiveInternet [Bot] - LiveInternet
Facebook [Bot] - facebookexternalhit/1.1
GrapeshotCrawler - GrapeshotCrawler/2.0
Twitter [Bot] - Twitterbot/1.0
W3C [Validator] - W3C_*Validator
MSN [Bot] - msnbot/
Gigabot [Bot] - Gigabot/
BegunAdvertising [Bot] - BegunAdvertising/3.0
Yahoo [Bot] - Yahoo! Slurp
Lynx [Bot] - Lynx/2.8.5rel.1
Archive.org [Bot] - archive.org_bot +http://www.archive.org/details/archive.org_bot
Wotbox [Bot] - Wotbox/2.01
Google Adsense [Bot] - Mediapartners-Google
News [Bot] - news bot /2.1
Это все боты 2014 года
Аватара пользователя
BDK
Сообщения: 3665
Зарегистрирован: 17 май 2015, 23:27
Откуда: Беларусь
Благодарил (а): 152 раза
Поблагодарили: 388 раз

Re: Как раскрутить форум в каталогах и поисковых системах?

Сообщение BDK »

А что они делают? Это программки которые ходят по сайтам? Это наподобие вирусов?
Аватара пользователя
Андрей
Архитектор
Сообщения: 7305
Зарегистрирован: 06 май 2015, 14:10
Откуда: Чехов
Благодарил (а): 517 раз
Поблагодарили: 462 раза

Re: Поисковые боты

Сообщение Андрей »

Да, программки. Ну они выполняют полезные вещи, собирают информацию в каталоги поисковых систем.
Поэтому на форумах ботов выделяют в отдельные категории пользователей и предоставляют им нужные права доступа и просмотра.

Вот только бот VkShare чем занимается, не пойму, для контакта что-то ищет?
Аватара пользователя
Андрей
Архитектор
Сообщения: 7305
Зарегистрирован: 06 май 2015, 14:10
Откуда: Чехов
Благодарил (а): 517 раз
Поблагодарили: 462 раза

Re: Поисковые боты

Сообщение Андрей »

Еще б знать как их всех на сайт пригласить
Как вариант исполнить это: http://support.getbb.ru/viewtopic.php?p=76450#p76450 и почитать вот это: http://support.getbb.ru/viewtopic.php?p=76460#p76460 и правильно сказано, боты сами придут, в зависимости от того, в какую соцсеть вы выложили ссылку. Я во все 6 соцсетей выкладываю ссылки. Значит приходят как минимум 6 ботов от однокласников, фейсбука, вконтакте, твиттера, моего мира и гугла+. И притом они приходят сразу же и тусуются у меня несколько минут. Кнопки соцсетей можно расширить, просто я на иных не зареген - добавить, к примеру, еще Livejournal - там тоже по идее должен быть боть и так далее. То есть каждая соцсеть имеет своего бота.
Аватара пользователя
BDK
Сообщения: 3665
Зарегистрирован: 17 май 2015, 23:27
Откуда: Беларусь
Благодарил (а): 152 раза
Поблагодарили: 388 раз

Re: Поисковые боты

Сообщение BDK »

А ну тогда полезные эти боты. Тогда надо сделать условия для них чтобы приходили.
Аватара пользователя
Андрей
Архитектор
Сообщения: 7305
Зарегистрирован: 06 май 2015, 14:10
Откуда: Чехов
Благодарил (а): 517 раз
Поблагодарили: 462 раза

Re: Поисковые боты

Сообщение Андрей »

Тупой Яндекс-бот, на форум заходит постоянно, толку - ноль.

Попробовал поискать фразу:
"Ринутся в бой, около моих слов соберутся"
Яндекс вообще её найти не может. Дизреспект команде Яндекса. Bing и Google немного впереди.
Аватара пользователя
Андрей
Архитектор
Сообщения: 7305
Зарегистрирован: 06 май 2015, 14:10
Откуда: Чехов
Благодарил (а): 517 раз
Поблагодарили: 462 раза

Re: Поисковые боты

Сообщение Андрей »

Хорошие новости, наконец-то Яндекс-бот проиндексировал некоторые из уникальных для нета текстов песен.
Не проверял - все ли, но начало положено.
Аватара пользователя
Андрей
Архитектор
Сообщения: 7305
Зарегистрирован: 06 май 2015, 14:10
Откуда: Чехов
Благодарил (а): 517 раз
Поблагодарили: 462 раза

Re: Поисковые боты

Сообщение Андрей »

Шёпот НООСФЕРЫ, хорошее тэггируемое (если есть такое слово) название.
Сегодня проверил, если написать "шепот ноосферы" то Яндекс добавит "форум",
выдача по этому запросу в в самом топе Яндекса.

В общем, всё как я и предсказывал.