搜狐新闻小爬虫，解析数据接口并插入mysql数据库( 二 ) _爬虫

html = requests.get(url,headers= headers).text#获取内容etree.HTML(str(html)).xpath(“”//article[@class = 'article']//p//text()')

获取数据之后将其组装成sql语句，以便直接插入到数据库中。

sql = " sql_insert = 'insert into information (`type`, url,author,title,content,postTime,addtime,`unique`) values (%s,%s,%s,%s,%s,%s,%s,%s)'"

通过pymysql获取mysql的连接信息执行sql语句

conn = pymysql.connect(host=“xxxxxxx”, port=3306, user="xxxx", passwd="xxxxxx", db="news", charset="utf8")cursor = conn.cursor()cursor.execute(sql_insert)完整代码请转我的csdn连接！

搜狐新闻小爬虫，解析数据接口并插入mysql数据库( 二 )

推荐阅读

烈火如歌小说结局是什么？烈火如歌结局！

科技数码无极限|Pro将采用无碳铝外壳，苹果下一代16英寸MacBook

ZAKER娱乐|Bwipo父亲希望焕烽夺冠，SN化身死神来敲DWG的门

君王皇帝|贾谊与晁错：文景之治下的两大悲情人物！

新闻联播主播连续两天上新新主播郑丽亮相?

手工金属雕刻需要用到哪些工具，在哪里能够买到

特朗普|白宫浣熊一拥而上胖揍记者，网友笑了：这就是特朗普反媒体突击队

科技数据君RedmiBook 笔记本确认为 4500u 4700u

「急诊科小胡大夫」看起来简单的腰痛，结果却令人担心

[智通财经]净筹2.385亿港元，慧聪集团(02280)拟折让9.09%配售2亿股

北京日报|北京昨日零新增！私家车出行要注意这几点

【花与法兰西】又把中国排斥在一边，英法急了太自以为是，美国发起G7紧急会议

陕西西安具备开园条件的幼儿园6月8日起可陆续开学

|15张引人入胜的迷人照片，人体到底有多神奇？都是知识点

[蛇胆]宝宝可以吃蛇胆吗

央视新闻客户端|小朋友们如何“拥抱”新学期？，全球迎来特殊开学季

东方网|贫困发生率从2.7%降到0.1%！濉溪的脱贫之路：给资助、给政策、给信心

加米谷大数据零基础该如何学习大数据？

|本以为爱情来了，结果这跌宕起伏的剧情，冰火四重天……

更大的底气来自于寒武纪的科研实力