PTT數位生活區 / Python

[問題]關於scrapy 和pandas 的問題

看板Python作者allen511081 (藍)時間10年前 (2015/03/12 22:35)推噓2(2推 0噓 1→)

留言3則, 3人參與討論串1/1

各位好，小弟最近有兩個小問題，需要各位幫小弟解答一下 1.scrapy爬蟲程式有沒有辦法在同一個程式碼裡批次輸出網頁資料? EX:我有11萬個網頁，我想要分成3萬3萬輸出成CSV 2.pandas的to_csv有沒有辦法將多個dataframe的CSV合併成一個? -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 59.127.51.220 ※ 文章網址: https://www.ptt.cc/bbs/Python/M.1426170911.A.DB2.html

推

03/13 01:17, , 1^F

03/13 01:17, 1^F

推

03/13 01:23, , 2^F

03/13 01:23, 2^F

→

03/14 10:21, , 3^F

03/14 10:21, 3^F

‣ 返回看板[ Python ] 程設

‣ 更多 allen511081 的文章

文章代碼(AID): #1L0QGVso (Python)

Python 近期熱門文章

1

1

[問題] python 3.14 free thread build

2周前, 10/29

1

13

[問題] 關於正規表示法的r'\1'?

3周前, 10/22

4

7

[問題] 請問有人用過OMIA PLUS影音平台自學嗎?

1月前, 10/09

4

21

[閒聊] Python 3.13 版本是不是很爛啊！？

3月前, 07/19

15

23

[閒聊] 各位現在用os.path 還是用pathlib.Path

3月前, 07/17

5

10

[閒聊] 2024年的自我python學習

3月前, 07/17

1

2

[問題] 用Whisper AI幫我下載字幕（有酬）

7月前, 04/01

1

3

[問題] selenium 有辦法做檔案上傳嗎?

9月前, 02/03

更多近期熱門文章 >>

PTT數位生活區即時熱門文章

19

75

Re: [情報] Valve推出Steam Machine

[ PC_Shopping ]

4小時前, 11/14

6

18

[問題] 遠傳4G網路很慢

4小時前, 11/14

4

8

[心得] Intel A750LE原廠卡保養+燒機記錄

[ PC_Shopping ]

4小時前, 11/14

5

13

[問題] vivo X200 fe 版面太滿

5小時前, 11/14

2

11

Re: [菜單] 45k左右遊戲機

[ PC_Shopping ]

7小時前, 11/13

4

11

[購機]3K以內長輩機

7小時前, 11/13

4

10

[問題] canon鏡頭請教

7小時前, 11/13

5

15

Re: [問題] 新手第一台相機該選擇S9嗎

7小時前, 11/13

更多即時熱門文章 >>

‣ 返回看板[ Python ] 程設

‣ 更多 allen511081 的文章

文章代碼(AID): #1L0QGVso (Python)