搜狐新闻小爬虫，解析数据接口并插入mysql数据库( 二 ) _爬虫

html = requests.get(url,headers= headers).text#获取内容etree.HTML(str(html)).xpath(“”//article[@class = 'article']//p//text()')

获取数据之后将其组装成sql语句，以便直接插入到数据库中。

sql = " sql_insert = 'insert into information (`type`, url,author,title,content,postTime,addtime,`unique`) values (%s,%s,%s,%s,%s,%s,%s,%s)'"

通过pymysql获取mysql的连接信息执行sql语句

conn = pymysql.connect(host=“xxxxxxx”, port=3306, user="xxxx", passwd="xxxxxx", db="news", charset="utf8")cursor = conn.cursor()cursor.execute(sql_insert)完整代码请转我的csdn连接！

搜狐新闻小爬虫，解析数据接口并插入mysql数据库( 二 )

推荐阅读

『事业单位』2020黑龙江事业单位扩招已是事实，雨后春笋的事业编制令人向往

周柯宇|白鹿王鹤棣新剧男配加戏引众怒，到底什么背景？

镇魂街2什么时候出(镇魂街哪年出的)

封神榜中的姜子牙?封神榜里的姜子牙是一个什么样的人

看任何事都很悲观，觉得任何事都无意义咋办

『吴京』吴京最应该谢的“大坏蛋”，镜头只有几分钟，却帮他多赚了几亿票房！

国华娱乐网|SuperM将于20日在美国ABC著名节目《GMA》上公开新曲《100》！

苹果|iPhone年年换新是有钱人的象征？其实你们都错了

杭白菊增强毛细血管抵抗力,杭白菊禁忌

智能水表上显示的数字是什么意思水表上显示的数字是什么意思

广西钦州海警查获一艘偷捕渔船海警提示：请广大渔民不要以身试法

莫地方|《雍正王朝》中为什么李卫比田文镜更招人喜欢？

TOPWOMEN时髦笔记|张雪迎绿色系礼服

豆豉炒泡辣椒：香辣开胃，无敌下饭，吃一次就上瘾

逐鹿空间引力波：中国“太极计划”初步掌握多项关键核心技术

内蒙古音乐人改良“火不思” 助力蒙古族第一弹拨乐器走向世界

健身房：当健身房做起了“毒品”的生意

爱笑段子王|gif开心一刻：小看劳动人民了

大理石的人吻|选择哪款比较好？，10万左右卖得最好的几款日产汽车

四类公证费2月25日起下调