python爬虫的数据库连接问题【推荐】
更新时间：2018年06月25日 10:01:16 作者：wanghaing
这篇文章主要介绍了python爬虫的数据库连接问题,非常不错，具有一定的参考借鉴价值，需要的朋友可以参考下
1.需要导的包
import pymysql
2.# mysql连接信息（字典形式）
db_config ={
'host': '127.0.0.1',#连接的主机id(107.0.0.1是本机id)
'port': 3306,
'user': '****',
'password': '****',
'db': 'test',#（数据库名）
'charset': 'utf8'
}
3.# 获得数据库连接
connection = pymysql.connect(**db_config)
connection（）具体的基础知识详见连接
https://www.jb51.net/article/142550.htm
4.具体连接（以简书为例）
try:
# 获得数据库游标（游标提供了一种对从表中检索出的数据进行操作的灵活手段，就本质而言，游标实际上是一种能从包括多条数据记录的结果集中每次提取一条记录的机制。游标总是与一条SQL 选择语句相关联因为游标由结果集（可以是零条、一条或由相关的选择语句检索出的多条记录）和结果集中指向特定记录的游标位置组成。）
with connection.cursor() as cursor:
sql = 'insert into simplebook(title, url) values(%s, %s)'
for u in urls:
# 执行sql语句
cursor.execute(sql, (u.string, r'http://www.jianshu.com'+u.attrs['href']))
# 事务提交
connection.commit()
finally:
# 关闭数据库连接
connection.close()
5.连接数据库成功，并得到数据
总结
以上所述是小编给大家介绍的python爬虫的数据库连接问题，希望对大家有所帮助，如果大家有任何疑问请给我留言，小编会及时回复大家的。在此也非常感谢大家对脚本之家网站的支持！
相关文章
本文是python接口自动化系列文章，主要介绍了接口自动化过程中，动态数据如何生成、动态数据与数据库数据进行对比并替换，有需要的朋友可以参考下2021-08-08
本文主要介绍了python 边缘扩充方式的实现示例，文中通过示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2022-03-03
这篇文章主要为大家介绍了 Python字典的增删改查，具有一定的参考价值，感兴趣的小伙伴们可以参考一下，希望能够给你带来帮助2022-01-01
这篇文章主要为大家详细介绍了python中图像边缘检测算法的原理及实现，文中示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2022-05-05
这篇文章主要介绍了Python计算一个文件里字数的方法,涉及Python文件操作及内容遍历的相关技巧,需要的朋友可以参考下2015-06-06
本文介绍如何使用 python 操作 PPT，用到的模块就是 python-pptx，以下的示例基本满足日常需求，如果要知道更多，可以访问 python-pptx 的官方文档2021-09-09
OCR方向的工程师，之前一定听说过PaddleOCR这个项目，其主要推荐的PP-OCR算法更是被国内外企业开发者广泛应用，短短半年时间，累计Star数量已超过15k，频频登上Github Trending和Paperswithcode 日榜月榜第一2021-11-11
Python JMESPath库轻松操作JSON进行数据查询方法实例
这篇文章主要为大家介绍了Python JMESPath库轻松操作JSON方法实例,有需要的朋友可以借鉴参考下,希望能够有所帮助,祝大家多多进步,早日升职加薪2024-01-01
Python标准库学习之operator.itemgetter函数的使用
operator.itemgetter是Python标准库operator模块中的一个函数,本文主要介绍了Python标准库学习之operator.itemgetter函数的使用,具有一定的参考价值,感兴趣的可以了解一下2024-07-07
这篇文章主要介绍了基于Python爬虫采集天气网实时信息,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下2020-06-06
最新评论