黄色网页视频 I 影音先锋日日狠狠久久 I 秋霞午夜毛片 I 秋霞一二三区 I 国产成人片无码视频 I 国产 精品 自在自线 I av免费观看网站 I 日本精品久久久久中文字幕5 I 91看视频 I 看全色黄大色黄女片18 I 精品不卡一区 I 亚洲最新精品 I 欧美 激情 在线 I 人妻少妇精品久久 I 国产99视频精品免费专区 I 欧美影院 I 欧美精品在欧美一区二区少妇 I av大片网站 I 国产精品黄色片 I 888久久 I 狠狠干最新 I 看看黄色一级片 I 黄色精品久久 I 三级av在线 I 69色综合 I 国产日韩欧美91 I 亚洲精品偷拍 I 激情小说亚洲图片 I 久久国产视频精品 I 国产综合精品一区二区三区 I 色婷婷国产 I 最新成人av在线 I 国产私拍精品 I 日韩成人影音 I 日日夜夜天天综合

Python網絡爬蟲:基礎知識Beautiful Soup

系統 2071 0

一、Beautiful Soup簡介

網絡數據挖掘指的是從網站中獲取數據的過程,數據挖掘技術可以讓我們從網站世界中收集大量有價值的數據。

Beautiful Soup是一個Python庫,可以從HTML或XML文件中獲取數據,利用它你可以做很多事情,比如你可以持續解析某個商品的最新價格,以便跟蹤價格的波動情況。

二、Beautiful Soup安裝

安裝Beautiful Soup

pip3 install beautifulsoup4

檢驗是否安裝成功

from bs4 import BeautifulSoup

三、創建一個Beautiful Soup對象

Python網絡爬蟲:基礎知識Beautiful Soup_第1張圖片

四、查找內容

find()方法

在find()方法中傳入節點名,例如ul,這樣就可以獲取第一個匹配的ul節點的內容,例如:

Python網絡爬蟲:基礎知識Beautiful Soup_第2張圖片

找到ul節點后,通過觀察html可以得知,ul下有2個li,每個li下有2個div,則通過student_entries.li可以獲取第一個li節點的數據,繼續通過student_entries.li.div可以獲取第一個li下第一個div的數據,例如:

Python網絡爬蟲:基礎知識Beautiful Soup_第3張圖片

繼續通過div.string可以獲取div的內容:

Python網絡爬蟲:基礎知識Beautiful Soup_第4張圖片

使用正則表達式查找:

find()方法支持根據正則表達式查找內容,例如:

Python網絡爬蟲:基礎知識Beautiful Soup_第5張圖片

find_all()方法

find()方法返回第一個匹配的內容,find_all()方法會返回所有匹配的內容列表,例如上面的根據正則表達式查找郵箱地址,將find()方法換成find_all()方法,則會返回所有匹配成功的內容:

find_parent()方法

find_parent()方法往上查找內容,例如,從第一個li節點上使用find_parent()方法,可以獲取父節點的內容:

Python網絡爬蟲:基礎知識Beautiful Soup_第6張圖片

find_next_sibling()方法

sibling是兄弟姐妹的意思,find_next_sibling()方法獲取下一個同級別的兄弟節點,例如:

Python網絡爬蟲:基礎知識Beautiful Soup_第7張圖片

其它方法還有很多,例如:

find_next()方法

find_all_next()方法

find_previous_sibling()方法

find_all_previous()方法


更多文章、技術交流、商務合作、聯系博主

微信掃碼或搜索:z360901061

微信掃一掃加我為好友

QQ號聯系: 360901061

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點擊下面給點支持吧,站長非常感激您!手機微信長按不能支付解決辦法:請將微信支付二維碼保存到相冊,切換到微信,然后點擊微信右上角掃一掃功能,選擇支付二維碼完成支付。

【本文對您有幫助就好】

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描上面二維碼支持博主2元、5元、10元、自定義金額等您想捐的金額吧,站長會非常 感謝您的哦!?。?/p>

發表我的評論
最新評論 總共0條評論