Python 爬蟲可以幫助我們自動地從網頁上抓取需要的數據，但是當網頁分成多頁時，我們需要特殊的技巧來處理這個問題。

在這篇文章中，我們將討論如何使用 Python 爬蟲來抓取多頁數據。我們將使用一個示例網站，該網站列出了每個州的人口數量，每個州都有一個單獨的頁面。

首先，我們需要識別每個頁面的 URL。在這個例子中，我們可以看到每個州的頁面都有一個類似于http://example.com/population/state/<state-code>的 URL ，其中 <state-code> 是形如 'ny', 'ca', 'tx' 等的州的代碼。

http://example.com/population/state/ny
http://example.com/population/state/ca 
http://example.com/population/state/tx

接下來，我們需要使用 Python 的 requests 和 BeautifulSoup 庫來檢索每個頁面并解析 HTML。我們可以使用一個循環來遍歷每個州的代碼，然后使用 requests.get() 函數來檢索每個州的頁面。我們可以使用 BeautifulSoup 的 find() 或 select() 函數來提取頁面上需要的數據。

import requests
from bs4 import BeautifulSoup
# 定義州代碼列表
states = ['ny', 'ca', 'tx']
# 循環遍歷每個州
for state in states:
# 定義 URL
url = 'http://example.com/population/state/' + state
# 檢索頁面并解析 HTML
response = requests.get(url)
soup = BeautifulSoup(response.text, 'html.parser')
# 從 HTML 中提取數據
population_data = soup.find('div', {'class': 'population'}).text
print(state + ': ' + population_data)

注意，這只是一個簡單的示例，實際中可能需要根據網站結構和需求進行更多的調整。

在本文中，我們演示了如何使用 Python 爬蟲來抓取多頁數據。我們使用了一個示例網站作為演示，但是這種技巧可以應用于許多其他的網站。