Python实验二:爬取大学排名和中科院院士信息

Python实验二:爬取大学排名和中科院院士信息

初稿:较为粗糙,不过思路清晰,通俗易懂,问题不大

第一项内容:爬取大学排名
爬取最好大学网网页中549所国内大学的排名数据,并将排名、学校名称、省市、总分、社会声誉等内容打印出来。
任务一实验步骤:
(1)使用Google Chrome或其他浏览器打开下面的网址,然后在页面上右击,在弹出的菜单中选择“查看网页源代码”。
http://www.zuihaodaxue.cn/zuihaodaxuepaiming20链接19.html
(2)分析网页源代码的,确定每个学校的姓名和连接所在的HTML标签,为解析网页做准备。
(3)编写代码,爬取信息。

"""
# @Time    :  2020/4/16
# @Author  :  JMChen
"""
import requests
from bs4 import BeautifulSoup

rank_list = []
url = 'http://www.zuihaodaxue.cn/zuihaodaxuepaiming2019.html'
user_agent = 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.122 Safari/537.36'
headers = {
   
   "User-Agent": user_agent}

respond = requests.get(url, headers=headers)
respond.encoding = 'utf-8'

soup = BeautifulSoup(respond.text, "lxml")

tr_list = soup.find_all('tr', class_='alt')

print("排名\t\t学校名称\t\t\t  省份\t\t\t  总分\t\t社会声誉")

for node in tr_list:
    rank = node.find('td').
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值