相互のお客様に最適な利用体験を提供するため、インフラストラクチャ上で当社のクローラーを許可リストに登録する必要がある場合があります。そのために、サーバーのIPアドレス(IPv4およびIPv6)に名前解決されるDNSエントリーの最新リストを掲載します。
- spider-crawler1.do.feeder.co
- spider-crawler2.do.feeder.co
- spider-crawler3.do.feeder.co
- spider-crawler4.do.feeder.co
- spider-crawler5.do.feeder.co
- spider-crawler6.do.feeder.co
- spider-crawler7.do.feeder.co
- spider-crawler8.do.feeder.co
- spider-crawler9.do.feeder.co
- spider-crawler10.do.feeder.co
- spider-worker2.do.feeder.co
- spider-worker3.do.feeder.co
以下は、上記サーバーのIPアドレスを自動生成した一覧です。認証なしでこれらのIPアドレスを取得できるJSON APIも提供しています。
https://feeder.co/1/service-urls/crawlers.json
https://feeder.co/1/service-urls/crawlers.txt
ユーザーエージェント
Feederのユーザーエージェントも、ファイアウォールのルールで例外として登録できます。ユーザーエージェントには「feeder.co」という文字列が含まれます。例:
Mozilla/5.0 (feeder.co; Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/106.0.0.0 Safari/537.36
ユーザーエージェントの正確な値は将来変更される可能性があるため、feeder.coを含むかどうかで判定することをおすすめします。