Справочник роботов

Meta · веб-клиент

FacebookExternalHit: User-Agent и проверка IP

Клиент Meta, который загружает страницы для формирования предпросмотра ссылок. На этой странице — пример строки, официальная документация и способ проверить IP-адрес из серверного access-лога.

Пример User-Agent FacebookExternalHit

facebookexternalhit/1.1 (+http://www.facebook.com/externalhit_uatext.php)Краулеры Meta

User-Agent можно подделать. Проверка IP официально не опубликована. Сверяйте IP и время с access-логом; не принимайте решение о блокировке по одной строке.

Как анализировать запрос

Для этого клиента справочник не заявляет проверку по IP. Сопоставьте запросы и частоту в access-логах, изучите назначение клиента по официальной документации и используйте User-Agent только как предварительный признак.

Анализировать User-Agent

Вопросы о FacebookExternalHit

Как проверить, что запрос действительно пришёл от FacebookExternalHit?

Официальный список IP-диапазонов для этого клиента не используется в справочнике. User-Agent можно подделать; сверяйте запрос с документацией Meta и серверными логами.

Можно ли определить FacebookExternalHit только по User-Agent?

Нет. User-Agent — строка, которую может указать любой клиент. Используйте её для предварительной классификации, а для подтверждения источника проверяйте IP по официальному списку или DNS-методу, если он поддерживается.

Где посмотреть официальный User-Agent и назначение робота?

Пример строки User-Agent и ссылка на документацию владельца приведены на этой странице. Для полного списка откройте справочник роботов.

Похожие роботы и инструменты