Python 爬虫爬取页面的信息 ","relations

■网友
# -*- coding: utf-8 -*-"""Created on Sun Aug 30 13:45:13 2015@author: Hang Wu"""import pandas as pd ‘‘用来生成dataframe 比较喜欢用这个来保存信息’‘’import urllib2from bs4 import BeautifulSoup as bsurl=\u0026#39;http://www.xicidaili.com/nn/1\u0026#39;soup=bs(urllib2.urlopen(url))unit=room=pd.DataFrame(columns=) for x in xrange(len(room.columns)): room]= for y in range(x,len(unit),6)]writer=pd.ExcelWriter(\u0026#39;your directory\u0026#39;)room.to_excel(writer)writer.save()这样就可以产生一个目标xlsx 文件，如下图：

至于速度啊什么，找到那个标签就行了，一样的
■网友
一收到邀请，就马上打开电脑开始写了。抱歉，本来想沿着楼主的思路用正则表达式+urllib的，结果失败了，还是用了自己更加熟悉的requests和bs4模块。
【Python 爬虫爬取页面的信息】
洛克的代码比我简洁。可以比对着看。#!/usr/bin/env python# encoding: utf-8import requestsfrom bs4 import BeautifulSoupdef getInfo(url): proxy_info = page_code = requests.get(url).text soup = BeautifulSoup(page_code) table_soup = soup.find(\u0026#39;table\u0026#39;) proxy_list = table_soup.findAll(\u0026#39;tr\u0026#39;) for tr in proxy_list: td_list = tr.findAll(\u0026#39;td\u0026#39;) ip = td_list.string port = td_list.string location = td_list.string anonymity = td_list.string proxy_type = td_list.string speed = td_list.find(\u0026#39;div\u0026#39;, {\u0026#39;class\u0026#39;: \u0026#39;bar\u0026#39;}) connect_time = td_list.find(\u0026#39;div\u0026#39;, {\u0026#39;class\u0026#39;: \u0026#39;bar\u0026#39;}) validate_time = td_list.string # strip l = for i in range( len(l) ): if l: l = l.strip() proxy_info.append(l) return proxy_infoif __name__ == \u0026#39;__main__\u0026#39;: url = \u0026#39;http://www.xici.net.co/nn/1\u0026#39; proxy_info = getInfo(url) for row in proxy_info: for s in row: print s, print
■网友
soup.find_all(string = re.compile("python"))在python2版本中无法使用吗??????
哪个大佬能看见我,给我回答一下?????
拜托了......

■网友
咋不用beautifulsoup加正则表达式

Python 爬虫爬取页面的信息

推荐阅读

金敬道|5比1大胜富力鲁能拿到A组半程冠军

48岁陶红病逝，乐嘉带9岁女儿跪拜祈福完成前妻遗愿

河青新闻网廊坊新闻■固安县彭村乡进行按月要账、季度总结

医生围着患者跑：胸科医院成立沪上首家实体化“食管肿瘤整合病房”

|李易峰退圈后已消失八个月，刘璇老公透露其生活状态，评论区沦陷

时尚鲜菇进化史|穿衬衫也不化妆，反而真实漂亮，郭晶晶太实在！与丈夫约会去看戏

报复心理是什么,报复的意思-

车子首保时，要做明白人。

骏马面前无沟壑|无需和面擀皮，简单一卷外酥里嫩，真香，想吃韭菜盒子？懒人做法

日语n1能做什么工作(日语n1能找到工作吗)

骑自行车能上北京二环主路么

「长三角政商」下一个十年的“靶点”在哪？，苏州生物医药

时尚迪科@黑色的着装也能光彩照人，黑色反光长袖衫搭配皮裙组合

新加坡：截止2020年6月25日凌晨5: 10，世界发生了什么？

做一位内心强大的女人做内心强大的女人经典语录

新人入门画线条的技巧

主角是顾惜惜魏谦的小说叫什么？

老安畅聊吧|给孩子起的名字太有水平，连老师上课都不敢提问，宝爸姓老

浪花的手|有种“整容”叫李倩把痣点了，如今辨识度降低，却靠身材吸睛！，原创

股东|历时近4个月天能股份注册速度“垫底”科创板