22秋学期（高起本1709-1803、全层次1809-2103）《网络爬虫与信息提取》在线作业-00002
试卷总分:100 得分:100
一、单选题 (共 20 道试题,共 40 分)
1.Redis若要进入交互环境,需要打开终端输入()
A.redis-cli
B.redis
C.redis-cmd
D.redis-start
2.可以通过()绕过网站登录。
A.session
B.cookies
C.moonpies
D.localstorage
3.Python中若定义object=(1, 2, 3, 4, 5),则print(object[1:3])输出()
A.12
B.123
C.23
D.234
4.当爬虫运行到yield scrapy.Request()或者yield item的时候,下列哪个爬虫中间件的方法被调用?
A.process_spider_output()
B.process_spider_exception()
C.process_spider_input()
D.process_start_ requests()
5.下面关于Charles使用说法错误的是()
A.在数据包非常多的情况下，使用Charles的过滤功能来对数据包进行过滤从而减少干扰。
B.通过单击图中方框框住的各个选项卡，可以非常直观地观察到请求和返回的各种信息。
C.如果浏览器是Chrome，在没有安装第三方代理插件的情况下，Chrome的HTTP流量都会经过Charles。
D.Charles无法支持计算机上除了浏览器之外的其他软件。
6.在Linux中哪个命令是添加权限的()
A.chmod
B.sudo
C.cp
D.mkdir
7.Python中列表可以用()方法在末尾添加元素
A.add
B.append
C.plus
D.+
8.Scrapy中使用Xpath获得的结果调用了.extract方法,结果以()形式生成
A.列表
B.元组
C.字典
D.集合
9.Python中退出循环应用关键字()
A.break
B.continue
C.exit
D.return
10.以下哪个命令是创建文件夹命令()
A.curl
B.tar -zxvf
C.mkdir
D.cp
11.使用Xpath获取文本使用()
A.text
B.text()
C.content
D.content()
12.Python写CSV文件需要哪个方法()
A.CSVWriter
B.CsvWriter
C.DictWriter
D.FileWriter
13.使用UI Automator打开微信的操作是获取相应图标后使用命令()
A.touch
B.click
C.push
D.hover
14.Python中Object={1, 2, 3, 4, 5},则Objcet是()
A.列表
B.元组
C.字典
D.集合
15.()是Scrapy官方开发的,用来部署、运行和管理Scrapy爬虫的工具
A.Scrapyd
B.ScrapyDeploy
C.Deploy
D.Scrapy_Deploy
16.在Scrapy的目录下,哪个文件负责存放爬虫文件?()
A.spiders文件夹
B.item.py
C.pipeline.py
D.settings.py
17.启动MongoDB使用命令mongod --() usr/local/etc/mongod.conf
A.config
B.install
C.start
D.begin
18.HTTP常用状态码表明服务器上没有请求的资源的是()
A.500
B.503
C.403
D.404
19.以下表示请求资源重定向的HTTP状态码为
A.200
B.301
C.404
D.500
20.如果计算机上连接了很多台手机,查看这些手机串号,需要在终端输入以下命令:()
A.adb device
B.adb devices
C.adb devices -l
D.adb devices -list
二、多选题 (共 10 道试题,共 20 分)
21.一个可行的自动更换代理的爬虫系统,应该下列哪些功能?
A.有一个小爬虫ProxySpider去各大代理网站爬取免费代理并验证，将可以使用的代理IP保存到数据库中
B.在发现某个请求已经被设置过代理后，什么也不做，直接返回
C.在ProxyMiddlerware的process_request中，每次从数据库里面随机选择一条代理IP地址使用
D.周期性验证数据库中的无效代理，及时将其删除
22.Python中()容器有推导式
A.列表
B.元组
C.字典
D.集合
23.在配置ios使用Charles的操作中,正确的有()
A.对于苹果设备，首先要保证计算机和苹果设备联在同一个Wi-Fi上。
B.选择“HTTP代理”下面的“手动”选项卡，在“服务器”处输入计算机的IP地址，在“端口”处输入8888
C.输入完成代理以后按下苹果设备的Home键，设置就会自动保存。
D.安装完成证书以后，在设置中打开“关于本机”，找到最下面的“证书信任设置”，并在里面启动对Charles证书的完全信任
24.以下哪种方法是MongoDB的查找方法()
A.find
B.find_one
C.finds
D.find_all
25.如果目标网站有反爬虫声明,那么对方在被爬虫爬取以后,可以根据()来起诉使用爬虫的公司
A.服务器日志
B.数据库日志记录
C.程序日志记录
D.服务器监控
26.使用Selennium获取网页中元素的方法有
A.find_element_by_name
B.find_element_by_id
C.find_elements_by_name
D.find_elements_by_id
27.常用的会话跟踪技术是
A.session
B.cookies
C.moonpies
D.localstorage
28.Redis中的值可以支持()
A.列表
B.哈希
C.集合
D.有序集合
29.PyMongo删除操作有()
A.delete
B.delete_all
C.delete_one
D.delete_many
30.Python中()与元组由类似的数据读取方式
A.字符串
B.列表
C.字典
D.集合
三、判断题 (共 20 道试题,共 40 分)
31.虽然MongoDB相比于MySQL来说,速度快了很多,但是频繁读写MongoDB还是会严重拖慢程序的执行速度。
32.为了保证数据插入效率,在内存允许的情况下,应该一次性把数据读入内存,尽量减少对MongoDB的读取操作。
33.process_spider_output(response, result, output)是在下载器中间件处理完成后,马上要进入某个回调函数parse_xxx()前调用
34.中间人攻击也是抓包的一种。
35.在使用多线程处理问题时,线程池设置越大越好
36.Python中条件语句在使用or连接的多个表达式中,只要有一个表达式为真,那么后面的表达式就不会执行。
37.在charles中使用CTRL+F搜索,JSON里面的中文是可以直接搜索到的。
38.爬虫文件无法从Pycharm运行和调试,只能通过命令行的方式运行。
39.爬虫中间件的激活需要另外写一个文件来进行
40.charles配置中,安装完成证书以后,在设置中打开“关于本机”,找到最下面的“证书信任设置”,并在里面启动对Charles证书的完全信任。
41.使用Charles,可以轻松截获手机App和微信小程序的数据包,从而开发出直接抓取App后台和小程序后台的爬虫。
42.Robo 3T与RoboMongo是完全不一样的软件
43.一般来说在页面都通过GET将用户登录信息传递到服务器端。
44.device.sleep()方法是使用UI Automatorr关闭屏幕的命令
45.上课传纸条。A要把纸条传给B,但是A与B距离太远,于是让C来转交纸条。此时,C先篡改纸条的内容再传给B,这是一种类似抓包的方式。
46.如果目标网站本身就是提供公众查询服务的网站,那么使用爬虫是合法合规的。
47.为了在安卓手机上安装证书,需要先发送证书到手机里面。在Charles中选择“Help”-“SSL Proxying”-“Save Charles Root Certificate”命令,可以将Charles的证书保存到计算机桌面。
48.代理中间件的可用代理列表一定要写在settings.py里面
49.引用中间件时后面的数字代表的是中间件的执行顺序,例如 'AdvanceSpider.middlewares.ProxyMiddleware': 543 中的543
50.数据抓包就是中间人爬虫的一个简单应用。所以使用Charles也是一种中间人攻击
奥鹏，国开，广开，电大在线，各省平台，新疆一体化等平台学习
详情请咨询QQ : 3230981406或微信:aopopenfd777
