Meta · веб-клиент
FacebookExternalHit: User-Agent и проверка IP
Клиент Meta, который загружает страницы для формирования предпросмотра ссылок. На этой странице — пример строки, официальная документация и способ проверить IP-адрес из серверного access-лога.
Пример User-Agent FacebookExternalHit
facebookexternalhit/1.1 (+http://www.facebook.com/externalhit_uatext.php)Краулеры MetaUser-Agent можно подделать. Проверка IP официально не опубликована. Сверяйте IP и время с access-логом; не принимайте решение о блокировке по одной строке.
Как анализировать запрос
Для этого клиента справочник не заявляет проверку по IP. Сопоставьте запросы и частоту в access-логах, изучите назначение клиента по официальной документации и используйте User-Agent только как предварительный признак.
Анализировать User-AgentВопросы о FacebookExternalHit
Как проверить, что запрос действительно пришёл от FacebookExternalHit?
Официальный список IP-диапазонов для этого клиента не используется в справочнике. User-Agent можно подделать; сверяйте запрос с документацией Meta и серверными логами.
Можно ли определить FacebookExternalHit только по User-Agent?
Нет. User-Agent — строка, которую может указать любой клиент. Используйте её для предварительной классификации, а для подтверждения источника проверяйте IP по официальному списку или DNS-методу, если он поддерживается.
Где посмотреть официальный User-Agent и назначение робота?
Пример строки User-Agent и ссылка на документацию владельца приведены на этой странице. Для полного списка откройте справочник роботов.