搜狐新闻小爬虫，解析数据接口并插入mysql数据库( 二 ) _爬虫

html = requests.get(url,headers= headers).text#获取内容etree.HTML(str(html)).xpath(“”//article[@class = 'article']//p//text()')

获取数据之后将其组装成sql语句，以便直接插入到数据库中。

sql = " sql_insert = 'insert into information (`type`, url,author,title,content,postTime,addtime,`unique`) values (%s,%s,%s,%s,%s,%s,%s,%s)'"

通过pymysql获取mysql的连接信息执行sql语句

conn = pymysql.connect(host=“xxxxxxx”, port=3306, user="xxxx", passwd="xxxxxx", db="news", charset="utf8")cursor = conn.cursor()cursor.execute(sql_insert)完整代码请转我的csdn连接！

搜狐新闻小爬虫，解析数据接口并插入mysql数据库( 二 )

推荐阅读

直击乌镇：益站2030重磅发布，健康有益助力打造“健康中国”

笑星坊|夏天，学校外面有个卖花的爷爷，笑话

【福州衣柜】福州衣柜哪个好

王哈哈哈 X50 5G正式开售，X27悲惨价崩，价格感人史无前例，vivo

成龙|《警察故事》大结局即将开拍，成龙继续回归，粉丝请求换导演

『黄瓜干』黄瓜干的制作流程

#土地污染#从2020年开始！村干部彻底调查了这三种现象，关系到

重新出发的体娱人|球队名宿要求看裁判报告，不看决赛了！北京队队员回京照流出

小孩沙眼症状

故宫|六百岁紫禁城的魅力与活力

路咖汽车▲20万的性能中级车只能买它？新款别克君威GS今天上市

翡翠市场中的'低档'雪花棉：特性、鉴别与价值分析

沉着冷静的近义词？沉着的近义词？

若白驹过隙|先从言传身教做起，3位70岁老奶奶真实感悟：想要儿女孝顺

五代十国|她的生命定格在18岁，仅一张黑白老照片存世，却美得让无数人落泪

儿童饮食|分享一道营养补钙汤，很适合孩子，三碗不过瘾

肆客足球App|邮报英超赛季评级：利物浦A+，阿森纳D

26家中央企业43名领导人员职务调整涉企业“一把手”

至尊宝|至尊宝凤求凰以后返场要怎么抽？之前有类似的活动，看完后悔了

【小小的大鱼】最爱开玩笑的3星座，大家眼里公认的开心果1·天秤座2·摩羯座3·射手座，性格开朗