CollegeAidAtlasBot
本页为翻译版本。如与英文版有出入,以英文版为准。
CollegeAidAtlasBot 是我们使用的小型爬虫,用于读取美国大学公开的助学和招生页面,以保持本站信息准确。
- User-agent:
CollegeAidAtlasBot - 每所大学它只读取少量公开页面,每年几次。
- 它遵守
robots.txt。如果你的网站禁止它访问或拒绝访问,我们会跳过你的网站,且不会尝试绕过。
当大学网站阻止自动访问时,编辑可能会像普通访客一样,用常规网页浏览器阅读其公开页面,并以相同的核查流程记录信息。我们绝不绕过登录、付费墙或安全验证。
如需退出或提问,请发邮件至 info@collegeaidatlas.com。