Për t’u ofruar përvojën më të mirë klientëve tanë të përbashkët, ndonjëherë mund të jetë e nevojshme t’i shtoni zvarritësit tanë në listën e lejuar në infrastrukturën tuaj. Për këtë, ofrojmë këtë listë të përditësuar të emrave DNS, të cilët kthejnë adresat IP të serverëve (IPv4 dhe IPv6):
- spider-crawler1.do.feeder.co
- spider-crawler2.do.feeder.co
- spider-crawler3.do.feeder.co
- spider-crawler4.do.feeder.co
- spider-crawler5.do.feeder.co
- spider-crawler6.do.feeder.co
- spider-crawler7.do.feeder.co
- spider-crawler8.do.feeder.co
- spider-crawler9.do.feeder.co
- spider-crawler10.do.feeder.co
- spider-worker2.do.feeder.co
- spider-worker3.do.feeder.co
Më poshtë gjeni një tabelë të krijuar automatikisht me adresat IP të serverëve të mësipërm. Ofrojmë edhe një API JSON pa autentikim, për marrjen e këtyre adresave IP:
https://feeder.co/1/service-urls/crawlers.json
https://feeder.co/1/service-urls/crawlers.txt
Agjenti i përdoruesit
Mund të shtoni përjashtim edhe për user-agent-in e Feeder në rregullat e firewall-it. User-agent-i ynë përmban vargun “feeder.co”. Për shembull:
Mozilla/5.0 (feeder.co; Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/106.0.0.0 Safari/537.36
User-agent-i i saktë mund të ndryshojë me kalimin e kohës, ndaj rekomandojmë të kërkoni për feeder.co.