python获取网站内容

  1. python获取网站内容
  2. 获取百度网站上文章和地图模块的内容可以使用soup.find查找对应的属性
  3. import requests
    from bs4 import BeautifulSoup
    base_url = 'http://www.baidu.com'
    res = requests.get(base_url) #  发送GET请求
    # 获取响应状态码
    print("响应状态码:{}".format(res.status_code))
    # 获取响应内容的编码方式
    print("编码方式:{}".format(res.encoding))
    # 更新响应内容的编码方式为utf-8
    res.encoding = 'utf-8'
    soup = BeautifulSoup(res.text,'lxml')
    a_all = soup.find_all('a')
    print(a_all)
    a_attrs = soup.find('a',attrs={'href':'http://news.baidu.com'})
    print(a_attrs.contents[0])
    a_string = soup.find_all('a',string='地图')
    print(a_string)
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值