Python丨给你的爬虫代码里面添加一些小功能,让你的代码与众不同
欢迎点击右上角关注小编,除了分享技术文章之外还有很多福利,私信学习资料可以领取包括不限于Python实战演练、PDF电子文档、面试集锦、学习资料等。
1. 爬虫程序随机暂停x秒
需要用到time和random两个python自建库。
用法:time.sleep(x) 程序暂停x秒
random.uniform(a, b):产生从a到b中的随机浮点数
random.random():产生从0到1中的随机浮点数,是uniform()中a=0、b=1的特别情况
random.randint(a, b):产生从a到b中的随机整数
random.randrange(a, b, c):产生从a到b间隔为c的随机整数
2. 连接本地MySQL,将数据写入数据库
python3上有pymysql库专门用于实现对MySQL的操作。
步骤:
1)pymysql.connect() 连接到本地MySQL
2)传入需要写入的数据到SQL语句中
3)提交SQL语句至MySQL执行
4)关闭MySQL连接