Python丨给你的爬虫代码里面添加一些小功能,让你的代码与众不同

欢迎点击右上角关注小编,除了分享技术文章之外还有很多福利,私信学习资料可以领取包括不限于Python实战演练、PDF电子文档、面试集锦、学习资料等。

Python丨给你的爬虫代码里面添加一些小功能,让你的代码与众不同

1. 爬虫程序随机暂停x秒

需要用到time和random两个python自建库。

用法:time.sleep(x) 程序暂停x秒

random.uniform(a, b):产生从a到b中的随机浮点数

random.random():产生从0到1中的随机浮点数,是uniform()中a=0、b=1的特别情况

random.randint(a, b):产生从a到b中的随机整数

random.randrange(a, b, c):产生从a到b间隔为c的随机整数

Python丨给你的爬虫代码里面添加一些小功能,让你的代码与众不同

2. 连接本地MySQL,将数据写入数据库

python3上有pymysql库专门用于实现对MySQL的操作。

步骤:

1)pymysql.connect() 连接到本地MySQL

2)传入需要写入的数据到SQL语句中

3)提交SQL语句至MySQL执行

4)关闭MySQL连接

Python丨给你的爬虫代码里面添加一些小功能,让你的代码与众不同

相关推荐