乐趣区

关于go:Go工具箱GoCSV包一个能将结构体和csv内容互转的工具

大家好,我是渔夫子。本号新推出「Go 工具箱」系列,意在给大家分享应用 go 语言编写的、实用的、好玩的工具。同时理解其底层的实现原理,以便更深刻地理解 Go 语言。

大家在开发中肯定遇到过将数据导出成 csv 格式文件的需要。go 规范库中的 csv 包是只能写入字符串类型的切片。而在 go 中个别都是将内容写入到构造体中。所以,若应用规范的 csv 包,就须要将构造体先转换成对应的字符串类型,再写入文件。那可不可以将构造体对象间接输入成 csv 格局内容呢?

明天给大家举荐的就是一个能将构造体和 csv 内容进行疾速互转的工具包:gocsv

gocsv 小档案

gocsv 小档案
star 1.5 k used by 1.6k
contributors 80 作者 gocarina
性能简介 提供一个简略、高效地将 csv 内容和构造体进行互转的性能
我的项目地址 https://github.com/gocarina/gocsv
相干常识 reflect、构造体 tag

gocsv 的基本功能

gocsv 包的最根本的作用就是可能不便的将 csv 内容转换到对应的构造体上,或者将构造体的内容疾速的转换成 csv 格局(包含写入文件)。

gocsv.UnmarshalFile 函数:csv 内容转成构造体

假如文件中的内容如下:

client_id,client_name,client_age
1,Jose,42
2,Daniel,26
3,Vincent,32

而后从文件中读取出内容,并间接转换到构造体 Client 上,如下:

package main

import (
    "fmt"
    "os"

    "github.com/gocarina/gocsv"
)

type NotUsed struct {Name string}

type Client struct { // Our example struct, you can use "-" to ignore a field
    Id            string `csv:"client_id"`
    Name          string `csv:"client_name"`
    Age           string `csv:"client_age"`
    NotUsedString string `csv:"-"`
    NotUsedStruct NotUsed `csv:"-"` 
}

func main() {clientsFile, err := os.OpenFile("clients.csv", os.O_RDWR|os.O_CREATE, os.ModePerm)
    if err != nil {panic(err)
    }
    defer clientsFile.Close()

    clients := []*Client{}

    if err := gocsv.UnmarshalFile(clientsFile, &clients); err != nil { // Load clients from file
        panic(err)
    }
    for _, client := range clients {fmt.Println("Hello", client.Name)
    }
}

gocsv.MarshalFile 函数:构造体转成 csv 文件

package main

import (
    "fmt"
    "os"

    "github.com/gocarina/gocsv"
)

type NotUsed struct {Name string}

type Client struct { // Our example struct, you can use "-" to ignore a field
    Id            string `csv:"client_id"`
    Name          string `csv:"client_name"`
    Age           string `csv:"client_age"`
    NotUsedString string `csv:"-"`
    NotUsedStruct NotUsed `csv:"-"` 
}

func main() {clientsFile, err := os.OpenFile("clients.csv", os.O_RDWR|os.O_CREATE, os.ModePerm)
    if err != nil {panic(err)
    }
    defer clientsFile.Close()

    clients := []*Client{}

    clients = append(clients, &Client{Id: "12", Name: "John", Age: "21"}) // Add clients
    clients = append(clients, &Client{Id: "13", Name: "Fred"})
    clients = append(clients, &Client{Id: "14", Name: "James", Age: "32"})
    clients = append(clients, &Client{Id: "15", Name: "Danny"})
    
    err = gocsv.MarshalFile(&clients, clientsFile) // Use this to save the CSV back to the file
    if err != nil {panic(err)
    }

}

自定义类型转换器

gocsv 包还能够给自定义的构造体类型定义 csv 和构造体的互转函数。只有自定义的类型实现如下接口即可:

type TypeMarshaller interface {MarshalCSV() (string, error)
}

// TypeUnmarshaller is implemented by any value that has an UnmarshalCSV method
// This converter is used to convert a string to your value representation of that string
type TypeUnmarshaller interface {UnmarshalCSV(string) error
}

或者将构造体转换成 csv 字符串时,须要实现如下接口:

// MarshalText encodes the receiver into UTF-8-encoded text and returns the result.
type TextMarshaler interface {MarshalText() (text []byte, err error)
}

type TextUnmarshaler interface {UnmarshalText(text []byte) error
}

例如,咱们定义了一个构造体 DateTime,外面有一个 time.Time 类型的属性。并且 DateTime 类型实现了 TypeMarshaller 接口的 MarshalCSV 函数和 TypeUnmarshaller 接口的 UnmarshalCSV 函数。如下:

type DateTime struct {time.Time}

// Convert the internal date as CSV string
func (date *DateTime) MarshalCSV() (string, error) {return date.Time.Format("20060201"), nil
}

// You could also use the standard Stringer interface 
func (date *DateTime) String() (string) {return date.String() // Redundant, just for example
}

// Convert the CSV string as internal date
func (date *DateTime) UnmarshalCSV(csv string) (err error) {date.Time, err = time.Parse("20060201", csv)
    return err
}

type Client struct {// Our example struct with a custom type (DateTime)
    Id       string   `csv:"id"`
    Name     string   `csv:"name"`
    Employed DateTime `csv:"employed"`
}

func main() {client := []Client{
        {
            Id: "001",
            Name: "Go 学堂",
            Employed: DateTime{time.Now()},
        },
    }

    csvContent, _ := gocsv.MarshalString(client)
    fmt.Println("csv:", csvContent) // 输入内容是 001,Go 学堂,20231003
}

当咱们运行上述代码,最终的输入内容是:

001,Go 学堂,20231003

最初的日期就是按 DateTime 的 MarshalCSV 函数格局输入的。

自定义 CSV 的 Reader/Writer

在结尾处咱们提到,csv 文件中的分隔符默认是逗号。但也能够是其余字符。这就要求咱们在读取或写入之前指定好内容的分隔号。那么就能够通过自定义的 Reader/Writer 来笼罩默认的 Reader/Writer 的选项。如下:

  • 指定读取内容的宰割符是 “|”

    gocsv.SetCSVReader(func(in io.Reader) gocsv.CSVReader {r := csv.NewReader(in)
      r.Comma = '|'
      return r // Allows use pipe as delimiter
    })
  • 指定写入的内容是用 宰割符 “|” 进行宰割的

    gocsv.SetCSVWriter(func(out io.Writer) *gocsv.SafeCSVWriter {writer := csv.NewWriter(out)
      writer.Comma = '|'
      return gocsv.NewSafeCSVWriter(writer)
    })

gocsv 包的特点总结

1、构造体切片和 csv 内容互转。可能将构造体切片(或数组)间接输入成 csv 内容或输入到文件。反之亦然。

2、csv 标签。其转换过程是通过构造体上的“csv”标签进行关联的。

3、csv 标签对应 csv 内容表头。当构造体和 csv 格局互转时,构造体中的 csv 标签对应的就是 csv 表格的表头,构造体中的字段程序对应的就是 csv 文件列的程序。

4、底层仍然是应用规范库中的 csv。在写入 csv 文件时,底层实际上用的还是 go 规范库中的 encoding/csv/Writer 构造体的 Write(row []string)办法。

5、主动将构造体字段的类型转换成字符串:大家看到规范 csv 包中的 Write 办法的入参是 string 类型的切片,而在要转换的构造体上的字段能够是各种类型。这里就是 gocsv 包中的一个特点:能够将字段中的非 string 类型转换成 string 类型,最终写入到 csv 文件中。

6、可自定义类型转换器。能够通过实现 TypeMarshaller 接口或 TypeUnMarshaller 接口对自定义类型的内容按对应的格局输入成 csv 内容。

7、可自定义 CSV 的 Reader/Writer 来笼罩默认参数。比方 csv 格局的内容默认应用逗号分隔内容。通过该性能咱们能够指定应用其余分隔符的 csv 内容。比方应用 ”|” 或 ”;” 等。

这里须要留神的是 将 csv 文件的内容肯定是解析到构造体类型的 切片 数组 中。同样,也只有是构造体类型的 切片 数组 能力间接写入到 csv 文件中。

以上,就是明天咱们要分享的工具包。如需理解更多内容,请关注「Go 学堂」。

— 特地举荐 —

特地举荐:一个专一 go 我的项目实战、我的项目中踩坑教训及避坑指南、各种好玩的 go 工具的公众号,「Go 学堂」,专一实用性,十分值得大家关注。点击下方公众号卡片,间接关注。关注送《100 个 go 常见的谬误》pdf 文档。

退出移动版