反爬虫的方法
- robots.txt配置 ——反爬等级 ★
- User-Agent检测 ——反爬等级 ★
- 账户进行访问控制 ——反爬等级 ★★
- 有限数据访问 ——反爬等级 ★★★
- 访问频率限制 ——反爬等级 ★★★
- cookie/token等有效时间 ——反爬等级 ★★★
- ip黑名单 ——反爬等级 ★★★
- ID连续性问题——反爬等级 ★★★★
- JS动态加载 ——反爬等级 ★★★★
- 信息图片化 ——反爬等级 ★★★★
- 接口加密 ——反爬等级 ★★★★
- 接口加密 ——反爬等级 ★★★★★
- 验证码 ——反爬等级 ★★★★★
- 自定义字体 ——反爬等级 ★★★★★
- 信息混淆策略 ——反爬等级 ★★★★★
