Python 爬取英文文章 Python 是一個強(qiáng)大的編程語言，可以輕松地用它來進(jìn)行網(wǎng)絡(luò)爬蟲。 在本文中，我們將討論如何使用 Python 爬取英文文章，并將結(jié)果保存到本地。 首先，我們需要安裝一些庫。最重要的是 requests 和 BeautifulSoup4。如果您還沒有安裝這些庫，請使用以下命令： ``` pip install requests pip install beautifulsoup4 ``` 安裝完庫后，我們就可以開始編寫代碼了。 首先，我們需要確定要爬取的文章的地址。 在此示例中，我們將使用《紐約時報》的一篇文章作為示例。文章的地址是：https://www.nytimes.com/2021/02/01/world/americas/mexico-oil-pipeline-coronavirus.html 接下來，我們需要使用 requests 庫來發(fā)出 GET 請求并獲取頁面的 HTML 內(nèi)容： ```python import requests url = 'https://www.nytimes.com/2021/02/01/world/americas/mexico-oil-pipeline-coronavirus.html' response = requests.get(url) html_content = response.text ``` 接下來，我們需要使用 BeautifulSoup4 來解析 HTML 內(nèi)容并提取所需的數(shù)據(jù)： ```python from bs4 import BeautifulSoup soup = BeautifulSoup(html_content, 'html.parser') article = soup.find('article') sections = article.find_all('section', {'name': 'articleBody'}) text = '\n'.join([section.text for section in sections]) ``` 最后，我們將提取的文本保存到本地文件中： ```python with open('nytimes_article.txt', 'w', encoding='utf-8') as file: file.write(text) ``` 至此，我們就完成了文章爬取過程。 使用 Python 爬取英文文章非常簡單，通過上述方法，您就可以輕松地獲取感興趣的文章內(nèi)容。