logo
Loading...

動態多網頁爬取技巧詢問(期末專案問題請教) - Cupoy

您好我目前在製作期末專題,目標是想把ettoday七月份國際版的標題爬取下來,然後作關鍵字的分析。首...

動態多網頁爬取技巧詢問(期末專案問題請教)

2020/08/06 09:32 AM
Python網路爬蟲論壇
Youpin
觀看數:0
回答數:2
收藏數:0

您好

我目前在製作期末專題,目標是想把ettoday七月份國際版的標題爬取下來,然後作關鍵字的分析。

首先使用webdriver爬取時間及標題,單網頁爬的話問題,但七月份有31天,其中每一天有一個網址。

例如:https://www.ettoday.net/news/news-list-2020-7-3-2.htm

https://www.ettoday.net/news/news-list-2020-7-14-2.htm

其中的規律在於2020-7-[1-31]-2.htm 這樣的變化

我不太清楚該以怎樣的迴圈才能一次把這31頁寫在一起呢?

黃色部分若只放一個網頁如2020-7-1-2.htm  這樣的話沒有問題

但要一次爬31頁就會出現錯誤


煩請指教,謝謝!