為什麼這篇PTT 爬蟲 翻 頁鄉民發文收入到精華區:因為在PTT 爬蟲 翻 頁這個討論話題中,有許多相關的文章在討論,這篇最有參考價值!作者jimmy5104 (吉米兒)看板Python標題[問題] aspx爬蟲翻頁問題時間Thu De...
https://www.mittw.org.tw/products/manufacturer.aspx
想要將這個網頁的公司名稱爬蟲下來,但發現有翻頁問題
已經在stackoverflow等等網站找尋資訊,還是無法解決,
想請問各位py神有沒有方法可以解決這個問題。
以下是程式碼
from bs4 import BeautifulSoup
import requests
url = 'https://www.mittw.org.tw/products/manufacturer.aspx'
url_get = requests.get(url)
soup = BeautifulSoup(url_get.content, 'lxml')
col = soup.find_all('div',{'class': "name"})
for ix in col:
print(ix.get_text())
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 140.117.248.4
※ 文章網址: https://www.ptt.cc/bbs/Python/M.1544670049.A.FB6.html