1.用Python語句儲存資料

寫檔案時，我們主要用到 with open() 語句:

with open(name,mode,encoding) as file：
  file.write()
  # 注意，with open() 後面的語句有一個縮排

name：包含檔名稱的字串，比如：‘xiaozhu.txt’;
mode：決定了開啟檔案的模式,只讀/寫入/追加等;
encoding：表示我們要寫入資料的編碼，一般為 utf-8 或者 gbk ;
file：表示我們在程式碼中對檔案的命名。

 
用我們前面爬的小豬的例子來看一下，實際是什麼樣的：

from
 
 lxml import etree
import requests
import time

with open('/Users/mac/Desktop/xzzf.txt','w',encoding='utf-8') as f:
    for a in range(1,6):
        url = 'http://cd.xiaozhu.com/search-duanzufang-p{}-0/'.format(a)
        data = requests.get(url).text

        s=etree.HTML(data)
        file=s.xpath('//*[@id="page_list"]/ul/li'
 
)
        time.sleep(3)

        for div in file:
            title=div.xpath("./div[2]/div/a/span/text()")[0]
            price=div.xpath("./div[2]/span[1]/i/text()")[0]
            scrible=div.xpath("./div[2]/div/em/text()")[0].strip()
            pic=div.xpath("./a/img/@lazy_src")[0]

            f.write("{},{},{},{}\n"
 
.format(title,price,scrible,pic))

 
將寫入的檔名 xzzf.txt，如果沒有將自動建立。

/Users/mac/Desktop/xzzf.txt

在前面加了一個桌面的路徑，它將存在桌面，如果不加路徑，它將存在你當前工作目錄中。

w：只寫的模式，如果沒有檔案將自動建立；
encoding=’utf-8’：指定寫入檔案的編碼為：utf-8，一般指定utf-8即可；

f.write("{}  {}  {}  {}\n".format(title,price,scrible,pic))
#將 title,price,scrible,pic 的值寫入檔案

 
來看一下存下來的資料是怎樣的：

 
如果你沒有指定檔案路徑，怎麼找寫在本地的檔案呢？給你兩種方法：

1. 在 win10 中開啟小娜（cortana），搜尋你的檔名即可。

1. 推薦軟體“everything”，查詢檔案更方便快捷。

這個軟體非常小，百度很容易找到，但確實是神器用了你會回來感謝我的~

 
所以還是建議你在寫程式碼的時候，老老實實在檔名前面加上你想存放的路徑。什麼，你連路徑怎麼寫都不知道？好吧，比如我想把檔案存在桌面，那麼怎麼檢視路徑？

隨便找一個文件，比如桌面的文件， 右鍵 >“屬性”，“位置”後面的資訊，就是該文件所在的路徑了。

2.檔案存為CSV格式

當然，你也可以將檔案存為 .csv 格式，在 with open() 語句後更改檔案字尾即可。

from lxml import etree
import requests
import time

with open('/Users/mac/Desktop/xiaozhu.csv','w',encoding='utf-8') as f:
    for a in range(1,6):
        url = 'http://cd.xiaozhu.com/search-duanzufang-p{}-0/'.format(a)
        data = requests.get(url).text

        s=etree.HTML(data)
        file=s.xpath('//*[@id="page_list"]/ul/li')
        time.sleep(3)

        for div in file:
            title=div.xpath("./div[2]/div/a/span/text()")[0]
            price=div.xpath("./div[2]/span[1]/i/text()")[0]
            scrible=div.xpath("./div[2]/div/em/text()")[0].strip()
            pic=div.xpath("./a/img/@lazy_src")[0]

            f.write("{},{},{},{}\n".format(title,price,scrible,pic))

另外，需要注意的是：CSV 每個欄位之間要用逗號隔開，所以這裡把之前的空格改為了逗號。

 
CSV 檔案怎麼開啟？

一般情況下，用記事本就可以直接開啟，如果你直接用 Excel 開啟，很有肯能會出現亂碼，就像下面這樣：

 
Excel 開啟 CSV 出現亂碼怎麼辦？

1. 在記事本中開啟檔案
2. 另存為 – 選擇編碼為“ANSI”

 
再來看看之前的豆瓣TOP250圖書寫入檔案:

from lxml import etree
import requests
import time

with open('/Users/mac/Desktop/top250.csv','w',encoding='utf-8') as f:
    for a in range(10):
        url = 'https://book.douban.com/top250?start={}'.format(a*25)
        data = requests.get(url).text

        s=etree.HTML(data)
        file=s.xpath('//*[@id="content"]/div/div[1]/div/table')
        time.sleep(3)

        for div in file:
            title = div.xpath("./tr/td[2]/div[1]/a/@title")[0]
            href = div.xpath("./tr/td[2]/div[1]/a/@href")[0]
            score=div.xpath("./tr/td[2]/div[2]/span[2]/text()")[0]
            num=div.xpath("./tr/td[2]/div[2]/span[3]/text()")[0].strip("(").strip().strip(")").strip()
            scrible=div.xpath("./tr/td[2]/p[2]/span/text()")

            if len(scrible) > 0:
                f.write("{},{},{},{},{}\n".format(title,href,score,num,scrible[0]))
            else:
                f.write("{},{},{},{}\n".format(title,href,score,num))

 
最後存下來的資料是這樣的：

 
好了，這節課就到這裡！

白白~

如果你想有專業老師授課、有系統性知識、有實時線上答疑的老師的話，可以加入我們的課程《Python爬蟲(入門+進階)》。