首页
云服务器
软件中心
帮助中心
关于我们
登录&注册
客服
客服QQ
136393970
咨询热线
17330773358
投诉电话
帮助中心
帮助分类
全部帮助
官网公告
新手帮助
需要帮助？
如果您的问题仍未解决，请通过以下方式联系我们的客服团队
QQ客服 01
136393970
QQ客服 02
136393970
手机电话客服
17330773358
扫码关注公众号，获取更多帮助
联系客服
官网公告
关于合法使用网络爬虫的公告
2020-03-19 01:11:14
阅读量
<p>网络爬虫，又称网络蜘蛛或者网络机器人，它是一种“自动化浏览网络”的程序，按照一定规则，自动抓取互联网信息，比如网页、各类文档、图片、音频、视频等，一般来说，爬虫是用来采集网页上的公开信息的，也就是网站前端显示的公开数据信息。</p><p><br style="box-sizing: border-box; margin: 0px; padding: 0px; list-style: none;"/></p><p>根据《数据安全管理办法（征求意见稿）》第十六条：网络运营者采取自动化手段访问收集网站数据，不得妨碍网站正常运行；此类行为严重影响网站运行，如自动化访问收集流量超过网站日均流量三分之一，网站要求停止自动化访问收集时，应当停止。</p><p><br style="box-sizing: border-box; margin: 0px; padding: 0px; list-style: none;"/></p><p>在使用爬虫过程中，应遵守以下几项内容：</p><p><br style="box-sizing: border-box; margin: 0px; padding: 0px; list-style: none;"/></p><p><strong style="box-sizing: border-box; margin: 0px; padding: 0px 10px; list-style: none; font-weight: bold; color: rgb(12, 80, 151);">1.<span style="box-sizing: border-box; margin: 0px; padding: 0px; list-style: none; font-family: "Microsoft Yahei", 寰蒋闆呴粦, "Hiragino Sans GB", 鍐潚榛戜綋, 寰蒋姝ｉ粦浣�, "Microsoft JhengHei", Arial, Helvetica, SimHei, 榛戜綋, STXihei, 鍗庢枃缁嗛粦, sans-serif; outline: 0px; speak: none; font-feature-settings: normal; font-variant: normal; text-transform: none; -webkit-font-smoothing: antialiased; white-space: pre;"></span>遵守 Robots 协议，但有没有 Robots 都不代表可以随便爬；</strong></p><p><strong style="box-sizing: border-box; margin: 0px; padding: 0px 10px; list-style: none; font-weight: bold; color: rgb(12, 80, 151);">2.<span style="box-sizing: border-box; margin: 0px; padding: 0px; list-style: none; font-family: "Microsoft Yahei", 寰蒋闆呴粦, "Hiragino Sans GB", 鍐潚榛戜綋, 寰蒋姝ｉ粦浣�, "Microsoft JhengHei", Arial, Helvetica, SimHei, 榛戜綋, STXihei, 鍗庢枃缁嗛粦, sans-serif; outline: 0px; speak: none; font-feature-settings: normal; font-variant: normal; text-transform: none; -webkit-font-smoothing: antialiased; white-space: pre;"></span>限制你的爬虫行为，禁止近乎 DDOS 的请求频率，一旦造成服务器瘫痪，约等于网络攻击；</strong></p><p><strong style="box-sizing: border-box; margin: 0px; padding: 0px 10px; list-style: none; font-weight: bold; color: rgb(12, 80, 151);">3.<span style="box-sizing: border-box; margin: 0px; padding: 0px; list-style: none; font-family: "Microsoft Yahei", 寰蒋闆呴粦, "Hiragino Sans GB", 鍐潚榛戜綋, 寰蒋姝ｉ粦浣�, "Microsoft JhengHei", Arial, Helvetica, SimHei, 榛戜綋, STXihei, 鍗庢枃缁嗛粦, sans-serif; outline: 0px; speak: none; font-feature-settings: normal; font-variant: normal; text-transform: none; -webkit-font-smoothing: antialiased; white-space: pre;"></span>对于明显反爬，或者正常情况不能到达的页面不能强行突破，否则是 Hacker 行为；</strong></p><p><strong style="box-sizing: border-box; margin: 0px; padding: 0px 10px; list-style: none; font-weight: bold; color: rgb(12, 80, 151);">4.<span style="box-sizing: border-box; margin: 0px; padding: 0px; list-style: none; font-family: "Microsoft Yahei", 寰蒋闆呴粦, "Hiragino Sans GB", 鍐潚榛戜綋, 寰蒋姝ｉ粦浣�, "Microsoft JhengHei", Arial, Helvetica, SimHei, 榛戜綋, STXihei, 鍗庢枃缁嗛粦, sans-serif; outline: 0px; speak: none; font-feature-settings: normal; font-variant: normal; text-transform: none; -webkit-font-smoothing: antialiased; white-space: pre;"></span>最后，审视清楚自己爬的内容，遵守国家相关法律法规，以下是绝不能碰的红线（包括但不限于）：</strong></p><p><strong style="box-sizing: border-box; margin: 0px; padding: 0px 10px; list-style: none; font-weight: bold; color: rgb(12, 80, 151);">•<span style="box-sizing: border-box; margin: 0px; padding: 0px; list-style: none; font-family: "Microsoft Yahei", 寰蒋闆呴粦, "Hiragino Sans GB", 鍐潚榛戜綋, 寰蒋姝ｉ粦浣�, "Microsoft JhengHei", Arial, Helvetica, SimHei, 榛戜綋, STXihei, 鍗庢枃缁嗛粦, sans-serif; outline: 0px; speak: none; font-feature-settings: normal; font-variant: normal; text-transform: none; -webkit-font-smoothing: antialiased; white-space: pre;"></span>爬取用户个人数据非法牟利，包括模拟登录他人账号。</strong></p><p><strong style="box-sizing: border-box; margin: 0px; padding: 0px 10px; list-style: none; font-weight: bold; color: rgb(12, 80, 151);">•<span style="box-sizing: border-box; margin: 0px; padding: 0px; list-style: none; font-family: "Microsoft Yahei", 寰蒋闆呴粦, "Hiragino Sans GB", 鍐潚榛戜綋, 寰蒋姝ｉ粦浣�, "Microsoft JhengHei", Arial, Helvetica, SimHei, 榛戜綋, STXihei, 鍗庢枃缁嗛粦, sans-serif; outline: 0px; speak: none; font-feature-settings: normal; font-variant: normal; text-transform: none; -webkit-font-smoothing: antialiased; white-space: pre;"></span>爬取商业数据造成不正当竞争。</strong></p><p><strong style="box-sizing: border-box; margin: 0px; padding: 0px 10px; list-style: none; font-weight: bold; color: rgb(12, 80, 151);">•<span style="box-sizing: border-box; margin: 0px; padding: 0px; list-style: none; font-family: "Microsoft Yahei", 寰蒋闆呴粦, "Hiragino Sans GB", 鍐潚榛戜綋, 寰蒋姝ｉ粦浣�, "Microsoft JhengHei", Arial, Helvetica, SimHei, 榛戜綋, STXihei, 鍗庢枃缁嗛粦, sans-serif; outline: 0px; speak: none; font-feature-settings: normal; font-variant: normal; text-transform: none; -webkit-font-smoothing: antialiased; white-space: pre;"></span>爬取大量带有知识产权的数据用于商业目的， 获取盈利行为。</strong></p><p><strong style="box-sizing: border-box; margin: 0px; padding: 0px 10px; list-style: none; font-weight: bold; color: rgb(12, 80, 151);">5、不得违反相应法律法规。</strong></p><p><br style="box-sizing: border-box; margin: 0px; padding: 0px; list-style: none;"/></p><p>我司一旦发现上述行为者，直接将用户信息及行为提交给本地主管部门。</p><p><br/></p>
上一篇
没有了
下一篇
CentOS7 安装配置带用户认证的squid代理服务器
相关推荐
查看更多
动态拨号VPS安装Ubuntu系统使用说明
动态拨号VPS安装centos系统使用说明
如何解决python爬虫的ip资源问题
如何注册会员账号
去选购拨号VPS
返回帮助列表
136393970
