章文件操作

文件的基本介绍

文件的概念

文件,对我们并不陌生,文件是数据源(保存数据的地方)的一种,比如大家经常使用的 word 文档,txt 文
件,excel 文件...都是文件。文件最主要的作用就是保存数据,它既可以保存一张图片,也可以保持视频,声
音...
输入流和输出流
os.File 封装所有文件相关操作,File 是一个结构体

打开文件和关闭文件

使用的函数和方法

SRE实战 互联网时代守护先锋,助力企业售后服务体系运筹帷幄!一键直达领取阿里云限量特价优惠。
package main
import (
    "fmt"
    "os" 
)
func main() {
    //打开文件
    //概念说明: file 的叫法
    //1. file 叫 file对象
    //2. file 叫 file指针
    //3. file 叫 file 文件句柄
    file , err := os.Open("d:/test.txt")
    if err != nil {
        fmt.Println("open file err=", err)
    }
    //输出下文件,看看文件是什么, 看出file 就是一个指针 *File
    fmt.Printf("file=%v", file)//如果文件不存在file=<nil>
    //关闭文件
    err = file.Close()
    if err != nil {
        fmt.Println("close file err=", err)
    }
}

读文件操作应用实例

1) 读取文件的内容并 显示在终端(带 缓冲区的方式),使用 os.Open, file.Close, bufio.NewReader(),
reader.ReadString 函数和方法.

package main
import (
    "fmt"
    "os"
    "bufio"
    "io" 
)
func main() {
    //打开文件
    //概念说明: file 的叫法
    //1. file 叫 file对象
    //2. file 叫 file指针
    //3. file 叫 file 文件句柄
    file , err := os.Open("d:/test.txt")
    if err != nil {
        fmt.Println("open file err=", err)
    }

    //当函数退出时,要及时的关闭file
    defer file.Close() //要及时关闭file句柄,否则会有内存泄漏.

    // 创建一个 *Reader  ,是带缓冲的
    /*
    const (
    defaultBufSize = 4096 //默认的缓冲区为4096
    )
    */
    reader := bufio.NewReader(file)
    //循环的读取文件的内容
    for {
        str, err := reader.ReadString('\n') // 读到一个换行就结束
        if err == io.EOF { // io.EOF表示文件的末尾
            break
        }
        //输出内容
        fmt.Printf(str)
    }

    fmt.Println("文件读取结束...")
}

2) 读取文件的内容并显示在终端(使用 ioutil 一次将整个文件读入到内存中),这种 方式适用于文件
不大的情况。相关方法和函数(ioutil.ReadFile)

package main
import (
    "fmt"
    "io/ioutil" 
)
func main() {

    //使用ioutil.ReadFile一次性将文件读取到位
    file := "d:/test.txt"
    content, err := ioutil.ReadFile(file)
    if err != nil {
        fmt.Printf("read file err=%v", err)
    }
    //把读取到的内容显示到终端
    //fmt.Printf("%v", content) // []byte
    fmt.Printf("%v", string(content)) // []byte
    
    //我们没有显式的Open文件,因此也不需要显式的Close文件
    //因为,文件的Open和Close被封装到 ReadFile 函数内部
}

写文件操作应用实例

基本介绍-os.OpenFile 函数

 基本应用实例-方式一

1) 创建一个新文件,写入内容 5 句 "hello, Gardon"

package main
import (
    "fmt"
    "bufio"
    "os" 
)
func main() {
    //创建一个新文件,写入内容 5句 "hello, Gardon"
    //1 .打开文件 d:/abc.txt
    filePath := "d:/abcd.txt"
    file, err := os.OpenFile(filePath, os.O_WRONLY | os.O_CREATE, 0666)
    if err != nil {
        fmt.Printf("open file err=%v\n", err)
        return 
    }
    //及时关闭file句柄
    defer file.Close()
    //准备写入5句 "hello, Gardon"
    str := "hello,Gardon\r\n" // \r\n 表示换行
    //写入时,使用带缓存的 *Writer
    writer := bufio.NewWriter(file)
    for i := 0; i < 5; i++ {
        writer.WriteString(str)
    }
    //因为writer是带缓存,因此在调用WriterString方法时,其实
    //内容是先写入到缓存的,所以需要调用Flush方法,将缓冲的数据
    //真正写入到文件中, 否则文件中会没有数据!!!
    writer.Flush()
}

1) 打开一个存在的文件中,将原来的内容覆盖成新的内容 10 句 "你好,ygj!"

package main
import (
    "fmt"
    "bufio"
    "os" 
)

func main() {
    //打开一个存在的文件中,将原来的内容覆盖成新的内容10句 "你好,ygj!"

    //创建一个新文件,写入内容 5句 "hello, Gardon"
    //1 .打开文件已经存在文件, d:/abc.txt
    filePath := "d:/abc.txt"
    file, err := os.OpenFile(filePath, os.O_WRONLY | os.O_TRUNC, 0666)
    if err != nil {
        fmt.Printf("open file err=%v\n", err)
        return 
    }
    //及时关闭file句柄
    defer file.Close()
    //准备写入5句 "你好,ygj!"
    str := "你好,ygj!\r\n" // \r\n 表示换行
    //写入时,使用带缓存的 *Writer
    writer := bufio.NewWriter(file)
    for i := 0; i < 10; i++ {
        writer.WriteString(str)
    }
    //因为writer是带缓存,因此在调用WriterString方法时,其实
    //内容是先写入到缓存的,所以需要调用Flush方法,将缓冲的数据
    //真正写入到文件中, 否则文件中会没有数据!!!
    writer.Flush()

}

2) 打开一个存在的文件,在原来的内容容 追加内容 'ABC! ENGLISH!'

package main
import (
    "fmt"
    "bufio"
    "os" 
)

func main() {
    

    //打开一个存在的文件,在原来的内容追加内容 'ABC! ENGLISH!'
    //1 .打开文件已经存在文件, d:/abc.txt
    filePath := "d:/abc.txt"
    file, err := os.OpenFile(filePath, os.O_WRONLY | os.O_APPEND, 0666)
    if err != nil {
        fmt.Printf("open file err=%v\n", err)
        return 
    }
    //及时关闭file句柄
    defer file.Close()
    //准备写入5句 "你好,ygj!"
    str := "ABC,ENGLISH!\r\n" // \r\n 表示换行
    //写入时,使用带缓存的 *Writer
    writer := bufio.NewWriter(file)
    for i := 0; i < 10; i++ {
        writer.WriteString(str)
    }
    //因为writer是带缓存,因此在调用WriterString方法时,其实
    //内容是先写入到缓存的,所以需要调用Flush方法,将缓冲的数据
    //真正写入到文件中, 否则文件中会没有数据!!!
    writer.Flush()

}

3) 打开一个存在的文件,将原来的内容 读出显示在终端,并且 追加 5 句"hello,北京!"

package main
import (
    "fmt"
    "bufio"
    "os"
    "io" 
)

func main() {
    
    //打开一个存在的文件,将原来的内容读出显示在终端,并且追加5句"hello,北京!"
    //1 .打开文件已经存在文件, d:/abc.txt
    filePath := "d:/abc.txt"
    file, err := os.OpenFile(filePath, os.O_RDWR | os.O_APPEND, 0666)
    if err != nil {
        fmt.Printf("open file err=%v\n", err)
        return 
    }
    //及时关闭file句柄
    defer file.Close()

    //先读取原来文件的内容,并显示在终端.
    reader := bufio.NewReader(file)
    for {
        str, err := reader.ReadString('\n')
        if err == io.EOF { //如果读取到文件的末尾
            break
        }
        //显示到终端
        fmt.Print(str)
    }


    //准备写入5句 "你好,ygj!"
    str := "hello,北京!\r\n" // \r\n 表示换行
    //写入时,使用带缓存的 *Writer
    writer := bufio.NewWriter(file)
    for i := 0; i < 5; i++ {
        writer.WriteString(str)
    }
    //因为writer是带缓存,因此在调用WriterString方法时,其实
    //内容是先写入到缓存的,所以需要调用Flush方法,将缓冲的数据
    //真正写入到文件中, 否则文件中会没有数据!!!
    writer.Flush()

}

基本应用实例-方式二

编程一个程序,将一个文件的内容,写入到另外一个文件。注:这两个文件已经存在了.
说明:使用 ioutil.ReadFile / ioutil.WriteFile 完成写文件的任务.

package main
import (
    "fmt"
    "io/ioutil" 
)
func main() {
    //将d:/abc.txt 文件内容导入到  d:/abcd.txt
    //1. 首先将  d:/abc.txt 内容读取到内存
    //2. 将读取到的内容写入 d:/abcd.txt
    file1Path := "d:/abc.txt" 
    file2Path := "d:/abcd.txt" 
    data, err := ioutil.ReadFile(file1Path)
    if err != nil {
        //说明读取文件有错误
        fmt.Printf("read file err=%v\n", err)
        return
    }
    err = ioutil.WriteFile(file2Path, data, 0666)
    if err != nil {
        fmt.Printf("write file error=%v\n", err)
    }
}

文件编程应用实例

 拷贝文件

说明:将一张图片/电影/mp3 拷贝到另外一个文件 e:/abc.jpg io 包
func Copy(dst Writer, src Reader) (written int64, err error)
注意; Copy 函数是 io 包提供的.

package main
import (
    "fmt"
    "os"
    "io"
    "bufio" 
)

//自己编写一个函数,接收两个文件路径 srcFileName dstFileName
func CopyFile(dstFileName string, srcFileName string) (written int64, err error) {

    srcFile, err := os.Open(srcFileName)
    if err != nil {
        fmt.Printf("open file err=%v\n", err)
    }
    defer srcFile.Close()
    //通过srcfile ,获取到 Reader
    reader := bufio.NewReader(srcFile)

    //打开dstFileName
    dstFile, err := os.OpenFile(dstFileName, os.O_WRONLY | os.O_CREATE, 0666)
    if err != nil {
        fmt.Printf("open file err=%v\n", err)
        return 
    }

    //通过dstFile, 获取到 Writer
    writer := bufio.NewWriter(dstFile)
    defer dstFile.Close()

    return io.Copy(writer, reader)


}

func main() {

    //将d:/flower.jpg 文件拷贝到 e:/abc.jpg

    //调用CopyFile 完成文件拷贝
    srcFile := "d:/flower.jpg"
    dstFile := "e:/abc.jpg"
    _, err := CopyFile(dstFile, srcFile)
    if err == nil {
        fmt.Printf("拷贝完成\n")
    } else {
        fmt.Printf("拷贝错误 err=%v\n", err)
    }
    
}

统计英文、数字、空格和其他字符数量

说明:统计一个文件中含有的英文、数字、空格及其它字符数量

package main
import (
    "fmt"
    "os"
    "io"
    "bufio" 
)

//定义一个结构体,用于保存统计结果
type CharCount struct {
    ChCount int // 记录英文个数
    NumCount int // 记录数字的个数
    SpaceCount int // 记录空格的个数
    OtherCount int // 记录其它字符的个数
}

func main() {

    //思路: 打开一个文件, 创一个Reader
    //每读取一行,就去统计该行有多少个 英文、数字、空格和其他字符
    //然后将结果保存到一个结构体
    fileName := "e:/abc.txt"
    file, err := os.Open(fileName)
    if err != nil {
        fmt.Printf("open file err=%v\n", err)
        return
    }
    defer file.Close()
    //定义个CharCount 实例
    var count CharCount
    //创建一个Reader
    reader := bufio.NewReader(file)

    //开始循环的读取fileName的内容
    for {
        str, err := reader.ReadString('\n')
        if err == io.EOF { //读到文件末尾就退出
            break
        }
        //遍历 str ,进行统计
        for _, v := range str {
            
            switch {
                case v >= 'a' && v <= 'z':
                        fallthrough //穿透
                case v >= 'A' && v <= 'Z':
                        count.ChCount++
                case v == ' ' || v == '\t':
                        count.SpaceCount++
                case v >= '0' && v <= '9':
                        count.NumCount++
                default :
                        count.OtherCount++
            }
        }
    }

    //输出统计的结果看看是否正确
    fmt.Printf("字符的个数为=%v 数字的个数为=%v 空格的个数为=%v 其它字符个数=%v", 
        count.ChCount, count.NumCount, count.SpaceCount, count.OtherCount)


}

命令行参数

 看一个需求

我们希望能够获取到命令行输入的各种参数,该如何处理? 如图:=> 命令行参数
基本介绍
os.Args 是一个 string 的切片,用来存储所有的命令行参数
参数加在go run main.go的后面即可;

package main
import (
    "fmt"
    "os"
)

func main() {

    fmt.Println("命令行的参数有", len(os.Args))
    //遍历os.Args切片,就可以得到所有的命令行输入参数值
    for i, v := range os.Args {
        fmt.Printf("args[%v]=%v\n", i, v)
    }
}

flag 包用来解析命令行参数

说明: 前面的方式是比较原生的方式,对解析参数不是特别的方便,特别是带有指定参数形式的命
令行。
比如:cmd>main.exe -f c:/aaa.txt -p 200 -u root 这样的形式命令行,go 设计者给我们提供了 flag
包,可以方便的解析命令行参数,而且参数顺序可以随意
请编写一段代码,可以获取命令行各个参数.

package main
import (
    "fmt"
    "flag"
)

func main() {

    //定义几个变量,用于接收命令行的参数值
    var user string
    var pwd string
    var host string
    var port int

    //&user 就是接收用户命令行中输入的 -u 后面的参数值
    //"u" ,就是 -u 指定参数
    //"" , 默认值
    //"用户名,默认为空" 说明
    flag.StringVar(&user, "u", "", "用户名,默认为空")
    flag.StringVar(&pwd, "pwd", "", "密码,默认为空")
    flag.StringVar(&host, "h", "localhost", "主机名,默认为localhost")
    flag.IntVar(&port, "port", 3306, "端口号,默认为3306")
    //这里有一个非常重要的操作,转换, 必须调用该方法
    flag.Parse()

    //输出结果
    fmt.Printf("user=%v pwd=%v host=%v port=%v", 
        user, pwd, host, port)

}

json 基本介绍

json 数据格式说明

json 数据在线解析[https://www.json.cn/] 网站可以验证一个 json 格式的数据是否正确。尤其是在我们编写比较复杂的
json 格式数据时,很有用

json 的序列化

介绍
json 序列化是指,将有 key-value 结构的数据类型(比如 结构体、map 、切片)序列化成 json 字符串的操作。
应用案例
这里我们介绍一下 结构体、map 和切片的序列化,其它数据类型的序列化类似。

package main
import (
    "fmt"
    "encoding/json"
)

//定义一个结构体
type Monster struct {
    Name string `json:"monster_name"` //反射机制
    Age int `json:"monster_age"`
    Birthday string //....
    Sal float64
    Skill string
}



func testStruct() {
    //演示
    monster := Monster{
        Name :"牛魔王",
        Age : 500 ,
        Birthday : "2011-11-11",
        Sal : 8000.0,
        Skill : "牛魔拳",
    }

    //将monster 序列化
    data, err := json.Marshal(&monster) //..
    if err != nil {
        fmt.Printf("序列号错误 err=%v\n", err)
    }
    //输出序列化后的结果
    fmt.Printf("monster序列化后=%v\n", string(data))

}

//将map进行序列化
func testMap() {
    //定义一个map
    var a map[string]interface{}
    //使用map,需要make
    a = make(map[string]interface{})
    a["name"] = "红孩儿"
    a["age"] = 30
    a["address"] = "洪崖洞"

    //将a这个map进行序列化
    //将monster 序列化
    data, err := json.Marshal(a)
    if err != nil {
        fmt.Printf("序列化错误 err=%v\n", err)
    }
    //输出序列化后的结果
    fmt.Printf("a map 序列化后=%v\n", string(data))

}

//演示对切片进行序列化, 我们这个切片 []map[string]interface{}
func testSlice() {
    var slice []map[string]interface{}
    var m1 map[string]interface{}
    //使用map前,需要先make
    m1 = make(map[string]interface{})
    m1["name"] = "jack"
    m1["age"] = "7"
    m1["address"] = "北京"
    slice = append(slice, m1)

    var m2 map[string]interface{}
    //使用map前,需要先make
    m2 = make(map[string]interface{})
    m2["name"] = "tom"
    m2["age"] = "20"
    m2["address"] = [2]string{"墨西哥","夏威夷"}
    slice = append(slice, m2)

    //将切片进行序列化操作
    data, err := json.Marshal(slice)
    if err != nil {
        fmt.Printf("序列化错误 err=%v\n", err)
    }
    //输出序列化后的结果
    fmt.Printf("slice 序列化后=%v\n", string(data))
    
}

//对基本数据类型序列化,对基本数据类型进行序列化意义不大
func testFloat64() {
    var num1 float64 = 2345.67

    //对num1进行序列化
    data, err := json.Marshal(num1)
    if err != nil {
        fmt.Printf("序列化错误 err=%v\n", err)
    }
    //输出序列化后的结果
    fmt.Printf("num1 序列化后=%v\n", string(data))
}

func main() {
    //演示将结构体, map , 切片进行序列号
    testStruct()
    testMap()
    testSlice()//演示对切片的序列化
    testFloat64()//演示对基本数据类型的序列化
}

注意事项
对于结构体的序列化,如果我们希望序列化后的key的名字,又我们自己重新制定,那么可以给struct
指定一个 tag 标签.

 json 的反序列化

基本介绍
json 反序列化是指,将 json 字符串反序列化成对应的数据类型(比如结构体、map、切片)的操作
应用案例
这里我们介绍一下将 json 字符串反序列化成结构体、map 和切片

package main
import (
    "fmt"
    "encoding/json"
)

//定义一个结构体
type Monster struct {
    Name string  
    Age int 
    Birthday string //....
    Sal float64
    Skill string
}


//演示将json字符串,反序列化成struct
func unmarshalStruct() {
    //说明str 在项目开发中,是通过网络传输获取到.. 或者是读取文件获取到
    str := "{\"Name\":\"牛魔王~~~\",\"Age\":500,\"Birthday\":\"2011-11-11\",\"Sal\":8000,\"Skill\":\"牛魔拳\"}"

    //定义一个Monster实例
    var monster Monster

    err := json.Unmarshal([]byte(str), &monster)
    if err != nil {
        fmt.Printf("unmarshal err=%v\n", err)
    }
    fmt.Printf("反序列化后 monster=%v monster.Name=%v \n", monster, monster.Name)

}
//将map进行序列化
func testMap() string {
    //定义一个map
    var a map[string]interface{}
    //使用map,需要make
    a = make(map[string]interface{})
    a["name"] = "红孩儿~~~~~~"
    a["age"] = 30
    a["address"] = "洪崖洞"

    //将a这个map进行序列化
    //将monster 序列化
    data, err := json.Marshal(a)
    if err != nil {
        fmt.Printf("序列化错误 err=%v\n", err)
    }
    //输出序列化后的结果
    //fmt.Printf("a map 序列化后=%v\n", string(data))
    return string(data)

}

//演示将json字符串,反序列化成map
func unmarshalMap() {
    //str := "{\"address\":\"洪崖洞\",\"age\":30,\"name\":\"红孩儿\"}"
    str := testMap()
    //定义一个map
    var a map[string]interface{} 

    //反序列化
    //注意:反序列化map,不需要make,因为make操作被封装到 Unmarshal函数
    err := json.Unmarshal([]byte(str), &a)
    if err != nil {
        fmt.Printf("unmarshal err=%v\n", err)
    }
    fmt.Printf("反序列化后 a=%v\n", a)

}

//演示将json字符串,反序列化成切片
func unmarshalSlice() {
    str := "[{\"address\":\"北京\",\"age\":\"7\",\"name\":\"jack\"}," + 
        "{\"address\":[\"墨西哥\",\"夏威夷\"],\"age\":\"20\",\"name\":\"tom\"}]"
    
    //定义一个slice
    var slice []map[string]interface{}
    //反序列化,不需要make,因为make操作被封装到 Unmarshal函数
    err := json.Unmarshal([]byte(str), &slice)
    if err != nil {
        fmt.Printf("unmarshal err=%v\n", err)
    }
    fmt.Printf("反序列化后 slice=%v\n", slice)
}

func main() {

    unmarshalStruct()
    unmarshalMap()
    unmarshalSlice()
}

对上面代码的小结说明
1) 在反序列化一个json字符串时,要确保 反序列化后的数据类型和原来 序列化前的数据类型一致。
2) 如果 json 字符串是通过程序获取到的,则不需要再对 “ 转义处理。

扫码关注我们
微信号:SRE实战
拒绝背锅 运筹帷幄