题目内容
（请给出正确答案）
[单选题]
网站根目录中哪个文件里面的内容会告诉爬虫哪些数据是可以爬取的，哪些数据是不可以爬取的（)。
A.robot.txt
B.robot.html
C.robots.txt
D.robots.html
查看答案
如果结果不匹配，请 联系老师 获取答案
题目内容
（请给出正确答案）
如果结果不匹配，请 联系老师 获取答案
题目内容
（请给出正确答案）
A.robot.txt
B.robot.html
C.robots.txt
D.robots.html
如果结果不匹配，请 联系老师 获取答案
更多“网站根目录中哪个文件里面的内容会告诉爬虫哪些数据是可以爬取的…”相关的问题
A.盒子里放了东西
B.盒子里没放东西
C.不能判断盒子里是否有东西
D.盒子里没放东西的可能性大
A.有一个小爬虫ProxySpider去各大代理网站爬取免费代理并验证，将可以使用的代理IP保存到数据库中
B.在发现某个请求已经被设置过代理后，什么也不做，直接返回
C.在ProxyMiddlerware的process.request中，每次从数据库里面随机选择一条代理IP地址使用
D.周期性验证数据库中的无效代理，及时将其删除
A.会议是一种不可替代的管理工作手段
B.官场存在会议过多过滥的问题
C.会议过多过滥降低了其在管理中的作用
D.会议过多过滥的问题不容忽视
在Windows服务器上有若干日志文件，其作用是记录错误、警告等信息。查看这些日志文件的方法是()。
A．在系统盘根目录下，找到这些文件，双击打开
B．在系统盘根目录下，找到这些文件，用写字板程序打开
C．在控制面板中，打开“管理工具”选项中的事件查看器
D．在system目录下找到这些文件，用事件查看器打开
A.在同一根目录下的子文件夹之间拖动是移动
B.在不同的磁盘分区之间拖动是复制
C.按住Ctrl+拖动是复制
D.按住Alt+拖动是移动
A.客户信息的合并、共享
B.业务流程重组
C.基于计算机电信集成技术的呼叫中心
D.电子商务门户和自助网站
E.客户智能化
