Re: [問題] 抓 google 網頁的搜尋回傳結果

看板Python作者 (阿修雷)時間6年前 (2019/06/10 23:34), 6年前編輯推噓2(203)
留言5則, 2人參與, 6年前最新討論串6/6 (看更多)
小弟也有類似的問題想請教前輩們,是針對搜尋結果的前幾個網站連結做抓取, 試過書上用bs4的選擇器soup.select('.r a')抓不到連結,上網查最新的選擇器 soup.select(div.g > h3.r > a[href^="/url"])也是抓不到網站連結 http://bit.ly/2WshWEH CSS資料 https://i.imgur.com/XYYotok.png
請問我該如何正確抓取Google搜尋結果的網站連結? -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 180.177.123.190 (臺灣) ※ 文章網址: https://www.ptt.cc/bbs/Python/M.1560180898.A.C06.html

06/11 13:19, 6年前 , 1F
有用selenium抓嗎?
06/11 13:19, 1F
沒耶,我試試看,謝謝

06/11 20:30, 6年前 , 2F
google search結果頁面在不能使用js的情況下是另一個
06/11 20:30, 2F

06/11 20:30, 6年前 , 3F
版型
06/11 20:30, 3F
原來如此,謝謝大大提示 ※ 編輯: purplvampire (180.177.123.190 臺灣), 06/11/2019 22:21:13

06/13 11:12, 6年前 , 4F
你requests html存出來看...
06/13 11:12, 4F

06/13 11:12, 6年前 , 5F
有api能用就找api
06/13 11:12, 5F
文章代碼(AID): #1S_dYYm6 (Python)
文章代碼(AID): #1S_dYYm6 (Python)