Чтобы наши общие пользователи получали наилучший опыт, иногда может потребоваться добавить наши сканеры в список разрешённых на вашей инфраструктуре. Для этого мы предоставляем актуальный список DNS-имён, которые разрешаются в IP-адреса серверов (IPv4 и IPv6):
- spider-crawler1.do.feeder.co
- spider-crawler2.do.feeder.co
- spider-crawler3.do.feeder.co
- spider-crawler4.do.feeder.co
- spider-crawler5.do.feeder.co
- spider-crawler6.do.feeder.co
- spider-crawler7.do.feeder.co
- spider-crawler8.do.feeder.co
- spider-crawler9.do.feeder.co
- spider-crawler10.do.feeder.co
- spider-worker2.do.feeder.co
- spider-worker3.do.feeder.co
Ниже автоматически формируется таблица IP-адресов перечисленных серверов. Кроме того, получить эти IP-адреса можно через JSON API без аутентификации:
https://feeder.co/1/service-urls/crawlers.json
https://feeder.co/1/service-urls/crawlers.txt
User-Agent
Вы также можете добавить User-Agent Feeder в исключения правил межсетевого экрана. В User-Agent будет содержаться строка «feeder.co». Например:
Mozilla/5.0 (feeder.co; Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/106.0.0.0 Safari/537.36Точный User-Agent может со временем измениться, поэтому рекомендуем проверять наличие строки feeder.co.