GoLang幾種讀檔案方式的比較
阿新 • • 發佈:2019-01-26
GoLang提供了很多讀檔案的方式,一般來說常用的有三種。使用Read加上buffer,使用bufio庫和ioutil 庫。
那他們的效率如何呢?用一個簡單的程式來評測一下:
Go程式碼- package main
- import(
- "fmt"
- "os"
- "flag"
- "io"
- "io/ioutil"
- "bufio"
- "time"
- )
- func read1(path string)string{
- fi,err := os.Open(path)
- if err != nil{
- panic(err)
- }
- defer fi.Close()
- chunks := make([]byte,1024,1024)
- buf := make([]byte,1024)
- for{
- n,err := fi.Read(buf)
- if err != nil && err != io.EOF{panic(err)}
- if 0 ==n {break}
- chunks=append(chunks,buf[:n]...)
- // fmt.Println(string(buf[:n]))
- }
- return string(chunks)
- }
- func read2(path string)string{
- fi,err := os.Open(path)
- if err != nil{panic(err)}
- defer fi.Close()
- r := bufio.NewReader(fi)
- chunks := make([]byte,1024,1024)
- buf := make([]byte,1024)
- for{
- n,err := r.Read(buf)
- if err != nil && err != io.EOF{panic(err)}
- if 0 ==n {break}
- chunks=append(chunks,buf[:n]...)
- // fmt.Println(string(buf[:n]))
- }
- return string(chunks)
- }
- func read3(path string)string{
- fi,err := os.Open(path)
- if err != nil{panic(err)}
- defer fi.Close()
- fd,err := ioutil.ReadAll(fi)
- // fmt.Println(string(fd))
- return string(fd)
- }
- func main(){
- flag.Parse()
- file := flag.Arg(0)
- f,err := ioutil.ReadFile(file)
- if err != nil{
- fmt.Printf("%s\n",err)
- panic(err)
- }
- fmt.Println(string(f))
- start := time.Now()
- read1(file)
- t1 := time.Now()
- fmt.Printf("Cost time %v\n",t1.Sub(start))
- read2(file)
- t2 := time.Now()
- fmt.Printf("Cost time %v\n",t2.Sub(t1))
- read3(file)
- t3 := time.Now()
- fmt.Printf("Cost time %v\n",t3.Sub(t2))
- }
執行命令go run read.go filename, 制定需要讀取的檔案就可以了。這裡我比較了讀取13.7MB的日誌檔案,三種方式分別消耗的時間是:
Go程式碼- Cost time 105.006ms
- Cost time 68.0039ms
- Cost time 31.0018ms
讀取29.3MB的媒體檔案:
Go程式碼- Cost time 390.0223ms
- Cost time 194.0111ms
- Cost time 83.0048ms
讀取302MB的媒體檔案
Go程式碼- Cost time 40.8043338s
- Cost time 1m5.0407201s
- Cost time 8.8155043s
這個差距就很明顯了,ioutil提供的方法效率就是高。有空可以再從程式碼層面再去分析一下。