不畏网页遮望眼，只为我有bf4

文章目录

爬取原始内容
新建对象并格式化
最新专题部分
圆桌讨论部分

爬取原始内容

import requests
from bs4 import BeautifulSoup
headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/73.0.3683.86 Safari/537.36'}
r = requests.get("https://www.zhihu.com/explore", headers=headers)
html = r.text

新建对象并格式化

soup = BeautifulSoup(html)
print(soup.prettify())

<!DOCTYPE html>
<html data-hairline="true" data-theme="light" lang="zh">
 <head>
  ...
 </script>
</html>

最新专题部分

# 按类名查找
Zhuanti = soup.find_all(attrs={'class':'ExploreSpecialCard ExploreHomePage-specialCard'})

for zhuanti in Zhuanti:
    # 按照父子关系查找，由于下面一句要用到坐标索引，所以要把迭代器转换成list类型
    zhuantis = list(zhuanti.children)
    print('\n======================\n'+zhuantis[1].a.string+'\n======================\n')
    # 递归到孙子级别，没用到坐标索引而是直接遍历，所以没必要转换
    for content in zhuantis[2].children:
        print('\t'+content.a.string+' ：'+content.a.next_sibling.string)

======================
疫情结束后想做的 20 件小事
======================

	别怕，走出去 ：我想吃火锅烧烤串串香炸鸡汉堡冰淇淋喝奶茶……
	乖，来抱抱 ：想见男朋友，想去拥抱我爱的人
	走，去武汉 ：想回武汉，见家人，吃十碗热干面

======================
100 种「应付」网络教学的方法 | 网课「翻车」现场
======================

	弹幕即将到达 ：一切都要从打开网课那一天开始说起
	观众有话说 ：学校延长放假，学生是开心还是不开心？ 
	「主播」有话说 ：作为老师，线上教学好几天了，还有这些痛点没有解决

======================
厉害了，知友们的疫情「神预测」
======================

	湖北至少应该每天收治 1 万例，才能控制住疫情 ： 2 月 10 日，知友推断武汉当前的确诊数，比实际感染数少了至少 70%
	武汉与湖北其他城市的传染已经开始缩小了 ：2 月 5 日，知友预测出传染不再扩大
	推荐将瑞德西韦列入药物选择 ：1 月 21 日，知友判断瑞德西韦可以强效抑制冠状病毒复制

======================
是你的「奇葩」男朋友吗？
======================

	他怎么这么爱电子产品？ ：为什么我那个当程序员的男朋友，一直特别想要一个机械键盘？
	为什么他还有这些「特点」？ ：有一个「不上进」的男朋友是种怎样的体验？
	都这样了，还有女朋友？ ：男朋友嫌弃我胖，分手还是减肥?

圆桌讨论部分

# css选择器
Taolun = soup.select('div.ExploreHomePage-ContentSection-body')[1]

# 嵌套css选择器
for taolun in Taolun.select('a.ExploreRoundtableCard-title'):
     print('\n======================\n'+taolun.string+'\n======================\n')

======================
肺炎第二战，企业如何渡劫？
======================

======================
养车，不难
======================

======================
前端职业成长
======================

======================
在家也要好好生活
======================

方法试差不多了，就这样吧2333。