golang-幾種讀文件方式的比較

GoLang提供了很多讀文件的方式，一般來說常用的有三種。使用Read加上buffer，使用bufio庫和ioutil 庫。

<code>package main

import(
    "fmt"
    "os"
    "flag"
    "io"
    "io/ioutil"
    "bufio"
    "time"
)

// 使用os包，按照固定長度讀取文件內容
func read1(path string)string{
    fi,err := os.Open(path)
    if err != nil{
        panic(err)
    }
    defer fi.Close()

    chunks := make([]byte,1024,1024)
    buf := make([]byte,1024)
    for{
        n,err := fi.Read(buf)
        if err != nil && err != io.EOF{panic(err)}
        if 0 ==n {break}
        chunks=append(chunks,buf[:n]...)
        // fmt.Println(string(buf[:n]))
    }
    return string(chunks)
}

// 使用os包+bufio包讀取文件
func read2(path string)string{
    fi,err := os.Open(path)
    if err != nil{panic(err)}
    defer fi.Close()
    r := bufio.NewReader(fi)
    
    chunks := make([]byte,1024,1024)
     
    buf := make([]byte,1024)
    for{
        n,err := r.Read(buf)
        if err != nil && err != io.EOF{panic(err)}
        if 0 ==n {break}
        chunks=append(chunks,buf[:n]...)
        // fmt.Println(string(buf[:n]))
    }
    return string(chunks)
}

// 使用os包+ioutil包讀文件
func read3(path string)string{
    fi,err := os.Open(path)
    if err != nil{panic(err)}
    defer fi.Close()
    fd,err := ioutil.ReadAll(fi)
    // fmt.Println(string(fd))
    return string(fd)
}

func main(){
   
    flag.Parse()
    file := flag.Arg(0)
    f,err := ioutil.ReadFile(file)
    if err != nil{
        fmt.Printf("%s\n",err)
        panic(err)
    }
    fmt.Println(string(f))
    start := time.Now()
    read1(file)
    t1 := time.Now()
    fmt.Printf("Cost time %v\n",t1.Sub(start))
    read2(file)
    t2 := time.Now()
    fmt.Printf("Cost time %v\n",t2.Sub(t1))
    read3(file)
    t3 := time.Now()
    fmt.Printf("Cost time %v\n",t3.Sub(t2))

}/<code>

運行命令go run read.go filename, 制定需要讀取的文件就可以了。這裡我比較了讀取13.7MB的日誌文件，三種方式分別消耗的時間是：

<code>Cost time 105.006ms  
Cost time 68.0039ms  
Cost time 31.0018ms  /<code>

讀取29.3MB的媒體文件：

<code>Cost time 390.0223ms  
Cost time 194.0111ms  
Cost time 83.0048ms  /<code>

讀取302MB的媒體文件

<code>Cost time 40.8043338s  
Cost time 1m5.0407201s  
Cost time 8.8155043s  /<code>

這個差距就很明顯了，ioutil提供的方法效率就是高。下面我們從代碼層面分析一下ioutil包