44问答网
所有问题
写个python 爬虫怎么爬取一个网页上面发现的url链接
如题所述
举报该问题
推荐答案 2017-04-10
1.使用beautifulsoup框架。
from bs4 import BeautifulSoup
bs = BeautifulSoup('网页源码', "html.parser")
bs.findAll('a') # 查找所有的超链接
# 具体方法可以参见官方文档
2.使用正则表达式
温馨提示:答案为网友推荐,仅供参考
当前网址:
http://44.wendadaohang.com/zd/YKY6KWZKKD6WV6GRDV.html
相似回答
大家正在搜
相关问题
python爬取网页信息,怎么获取到网页的真实URL??
如何用Python写一个抓取url不变网页的爬虫
python爬虫怎么获取下一页的url
怎么用python做爬虫爬一个网页的所以超链接
python爬虫怎么获取到的网站的所有url
如何在scrapy框架下,用python实现爬虫自动跳转页面...
python爬虫抓取哪儿网页上的一些字段