PTT數位生活區 / Python

[問題] 關於Dcard的爬蟲批量下載圖檔

看板Python作者 (darling341)時間6年前 (2018/12/26 14:29), 編輯推噓9(9推 0噓 12→)
留言21則, 12人參與, 7年前最新討論串1/1
各位大家好，搭給後，台尬侯！ 小弟近期在學習python的爬蟲，由於接觸不久，所以上來詢問 近期魯宅我想努力變帥，所以在爬D卡上的穿搭版，想試著把每張照片下載下來 當作是造型型錄逐一改造自己，但發現網路上關於D卡爬蟲的相關文章好少 不知道是否能有大神幫幫忙，提供點方向或是提供個線索給魯宅我 感激不盡！ -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 110.50.131.36 ※ 文章網址: https://www.ptt.cc/bbs/Python/M.1545805774.A.C50.html
→
12/26 14:40, 6年前 , 1F
...你有嘗試過的話，會發現根本不難啊
12/26 14:40, 1F
→
12/26 14:44, 6年前 , 2F
我猜你其實想爬的是另外一個版吧
12/26 14:44, 2F
→
12/26 14:54, 6年前 , 3F
等到你的爬蟲被他們 ban 再來討論吧 XD
12/26 14:54, 3F
推
12/26 16:27, 6年前 , 4F
我的爬蟲抓了半年左右被ban了，換成headless再戰一波
12/26 16:27, 4F
→
12/26 16:27, 6年前 , 5F
關鍵字：Dcard API
12/26 16:27, 5F
→
12/26 16:28, 6年前 , 6F
還用CNN寫了個辨識"男生穿搭"還是"女生穿搭"的程式
12/26 16:28, 6F
推
12/26 18:53, 6年前 , 7F
想爬什麼版啊~~~XD
12/26 18:53, 7F
推
12/26 19:08, 6年前 , 8F
太明顯了 你才不是要爬穿搭 少騙
12/26 19:08, 8F
推
12/26 19:29, 6年前 , 9F
我不相信你
12/26 19:29, 9F
推
12/26 20:32, 6年前 , 10F
大家都老司機.....
12/26 20:32, 10F
推
12/27 01:08, 6年前 , 11F
我連抓4天IP被ban，不過還好hinet換IP很快
12/27 01:08, 11F
推
12/27 06:57, 6年前 , 12F
為什麼會被ban啊，是抓的速度太快嗎
12/27 06:57, 12F
推
12/27 15:53, 6年前 , 13F
原因不知道 我只知道 header 帶我的 ID 就居居了 ker
12/27 15:53, 13F
→
12/30 00:12, 6年前 , 14F
另外一個版是順便拉~~不是主要拉 哈哈哈
12/30 00:12, 14F
→
12/30 00:13, 6年前 , 15F
我有試著自己嘗試過了 但是因為還太菜 所以很多部分
12/30 00:13, 15F
→
12/30 00:13, 6年前 , 16F
不知道從哪下手 才上來求助
12/30 00:13, 16F
→
12/30 00:14, 6年前 , 17F
謝關鍵字 會再試試看的!
12/30 00:14, 17F
→
01/02 11:46, 7年前 , 18F
我嘗試了幾天發現，是不是現在DCA在防爬蟲啊?API的
01/02 11:46, 18F
→
01/02 11:47, 7年前 , 19F
部分似乎不是json格式，用soup抓下來也是一堆!![]+!!
01/02 11:47, 19F
→
01/02 11:48, 7年前 , 20F
似乎完全看不到內文，請問還有大大願意試試看嗎?
01/02 11:48, 20F
推
01/24 12:08, 7年前 , 21F
給一下API我試試看嗎?
01/24 12:08, 21F
‣ 更多 liwei290341 的文章
文章代碼(AID): #1S8n_EnG (Python)
Python 近期熱門文章
更多 近期熱門文章 >>
PTT數位生活區 即時熱門文章
更多 即時熱門文章 >>
‣ 更多 liwei290341 的文章
文章代碼(AID): #1S8n_EnG (Python)