爬虫1-4交作业,还有问题想请教老师

来源:1-4 BeautifulSoup库入门

nirara

2020-12-06 15:01:38

没明白您给的作业答案最后一行代码“time.sleep()"这个时间函数,在平时爬取时间内容时,这个函数是一定要写进去的吗?因为没接触过这类时间函数,所以有些懵。


http://img.mukewang.com/climg/5fcc81c309d8767708520469.jpghttp://img.mukewang.com/climg/5fcc81ce09c92f1b07470611.jpg

在这里输入代码,可通过选择【代码语言】突出显示

写回答

1回答

DeltaF

2020-12-17

了解,是这样的,爬虫最容易遇到的问题就是反爬机制,觉得你爬太快了,会封一会儿ip,这个time.sleep()就是用来降速的。还有一种解决方法呢,就是通过更换ip,比如挂vpn,或者在request里面加ip参数,但是ip是要买的,比较麻烦哈。你可以加一下qq群,平时讨论方便~

2

人人都能学的数据分析

从0开始学数据分析,未来互联网各岗位的标配技能,产品经理、运营经理、技术人员人人必备,人人必会的的实用技能

1402 学习 · 1133 问题

查看课程