Go标准库是否包含读取CSV文件并映射到字符串的功能?
来源:stackoverflow
2024-03-02 15:48:29
0浏览
收藏
一分耕耘,一分收获!既然打开了这篇文章《Go标准库是否包含读取CSV文件并映射到字符串的功能?》,就坚持看下去吧!文中内容包含等等知识点...希望你能在阅读本文后,能真真实实学到知识或者帮你解决心中的疑惑,也欢迎大佬或者新人朋友们多留言评论,多给建议!谢谢!
问题内容
我想将 csv 文件从磁盘读取为 []map[string]string 数据类型。其中 []slice 是行号,map["key"] 是 csv 文件的标题(第 1 行)。
我在标准库中找不到任何东西来完成这个任务。
解决方案
根据回复,听起来标准库中没有任何内容(例如 ioutil)可以将 csv 文件读入地图。
给定 csv 文件路径的以下函数会将其转换为 map[string]string 的切片。
更新:根据评论,我决定提供 csvfiletomap() 和 maptocsv() 函数,将地图写回csv 文件。
package main
import (
"os"
"encoding/csv"
"fmt"
"strings"
)
// csvfiletomap reads csv file into slice of map
// slice is the line number
// map[string]string where key is column name
func csvfiletomap(filepath string) (returnmap []map[string]string, err error) {
// read csv file
csvfile, err := os.open(filepath)
if err != nil {
return nil, fmt.errorf(err.error())
}
defer csvfile.close()
reader := csv.newreader(csvfile)
rawcsvdata, err := reader.readall()
if err != nil {
return nil, fmt.errorf(err.error())
}
header := []string{} // holds first row (header)
for linenum, record := range rawcsvdata {
// for first row, build the header slice
if linenum == 0 {
for i := 0; i < len(record); i++ {
header = append(header, strings.trimspace(record[i]))
}
} else {
// for each cell, map[string]string k=header v=value
line := map[string]string{}
for i := 0; i < len(record); i++ {
line[header[i]] = record[i]
}
returnmap = append(returnmap, line)
}
}
return
}
// maptocsvfile writes slice of map into csv file
// filterfields filters to only the fields in the slice, and maintains order when writing to file
func maptocsvfile(inputslicemap []map[string]string, filepath string, filterfields []string) (err error) {
var headers []string // slice of each header field
var line []string // slice of each line field
var csvline string // string of line converted to csv
var csvcontent string // final output of csv containing header and lines
// iter over slice to get all possible keys (csv header) in the maps
// using empty map[string]struct{} to get unique keys; no value needed
var headermap = make(map[string]struct{})
for _, record := range inputslicemap {
for k, _ := range record {
headermap[k] = struct{}{}
}
}
// convert unique headersmap to slice
for headervalue, _ := range headermap {
headers = append(headers, headervalue)
}
// filter to filteredfields and maintain order
var filteredheaders []string
if len(filterfields) > 0 {
for _, filterfield := range filterfields {
for _, headervalue := range headers {
if filterfield == headervalue {
filteredheaders = append(filteredheaders, headervalue)
}
}
}
} else {
filteredheaders = append(filteredheaders, headers...)
sort.strings(filteredheaders) // alpha sort headers
}
// write headers as the first line
csvline, _ = writeascsv(filteredheaders)
csvcontent += csvline + "\n"
// iter over inputslicemap to get values for each map
// maintain order provided in header slice
// write to csv
for _, record := range inputslicemap {
line = []string{}
// lines
for k, _ := range filteredheaders {
line = append(line, record[filteredheaders[k]])
}
csvline, _ = writeascsv(line)
csvcontent += csvline + "\n"
}
// make the dir incase it's not there
err = os.mkdirall(filepath.dir(filepath), os.modeperm)
if err != nil {
return err
}
// write out the csv contents to file
ioutil.writefile(filepath, []byte(csvcontent), os.filemode(0644))
if err != nil {
return err
}
return
}
func writeascsv(vals []string) (string, error) {
b := &bytes.buffer{}
w := csv.newwriter(b)
err := w.write(vals)
if err != nil {
return "", err
}
w.flush()
return strings.trimsuffix(b.string(), "\n"), nil
}
最后,这是一个测试用例来展示它的用法:
func TestMapToCSVFile(t *testing.T) {
// note: test case requires the file ExistingCSVFile exist on disk with a
// few rows of csv data
SomeKey := "some_column"
ValueForKey := "some_value"
OutputCSVFile := `.\someFile.csv`
ExistingCSVFile := `.\someExistingFile.csv`
// read csv file
InputCSVSliceMap, err := CSVFileToMap(ExistingCSVFile)
if err != nil {
t.Fatalf("MapToCSVFile() failed %v", err)
}
// add a field in the middle of csv
InputCSVSliceMap[2][SomeKey] = ValueForKey // add a new column name
"some_key" with a value of "some_value" to the second line.
err = MapToCSVFile(InputCSVSliceMap, OutputReport, nil)
if err != nil {
t.Fatalf("MapToCSVFile() failed writing outputReport %v", err)
}
// VALIDATION: check that Key field is present in MapToCSVFile output file
// read Output csv file
OutputCSVSliceMap, err := CSVFileToMap(OutputCSVFile)
if err != nil {
t.Fatalf("MapToCSVFile() failed reading output file %v", err)
}
// check that the added key has a value for Key
if OutputCSVSliceMap[2][SomeKey] != ValueForKey {
t.Fatalf("MapToCSVFile() expected row to contains key value: %v", ValueForKey)
}
}今天关于《Go标准库是否包含读取CSV文件并映射到字符串的功能?》的内容介绍就到此结束,如果有什么疑问或者建议,可以在golang学习网公众号下多多回复交流;文中若有不正之处,也希望回复留言以告知!
版本声明
本文转载于:stackoverflow 如有侵犯,请联系study_golang@163.com删除
Go HTTP服务器在Docker中返回空响应
- 上一篇
- Go HTTP服务器在Docker中返回空响应
- 下一篇
- 如何充分发挥优秀程序员在Golang编程领域的技能
查看更多
最新文章
-
- Golang · Go问答 | 18小时前 | HTTP · net/http · Go问答 · 流式响应 · ResponseController · net/http FLUSH 流式响应 Go问答 ResponseController FullDuplex 写超时
- Go http.ResponseController 有什么用?Flush、写超时和 FullDuplex 这样理解
- 161浏览 收藏
-
- Golang · Go问答 | 18小时前 | HTTP · sse · Go问答 · 用户体验 · 流式响应 · Go EventSource SSE Go问答 Server-Sent Events 长任务进度 http.Flusher
- Go 长任务接口怎么返回进度?SSE 流式推送的最小写法
- 293浏览 收藏
-
- Golang · Go问答 | 19小时前 | Timer · 性能优化 · time.After · Go问答 · Go 内存优化 Timer time.After Go问答 time.NewTimer Go1.23
- Go time.After 放在循环里还会泄漏吗?从 Go 1.23 变化到工程写法
- 384浏览 收藏
-
- Golang · Go问答 | 21小时前 | go · Context · 并发编程 · 接口超时 · 超时控制 goroutine泄漏 WithTimeout Go context Go问答 CancelFunc
- Go context 超时取消为什么重要:从接口耗时到 goroutine 泄漏的治理思路
- 477浏览 收藏
-
- Golang · Go问答 | 1天前 | 连接池 · 性能排查 · database/sql · Go问答 · Go 连接池 DBStats sql.DB WaitCount SetMaxOpenConns
- Go sql.DB WaitCount 为什么增长:用小实验看连接池预算怎么调
- 214浏览 收藏
-
- Golang · Go问答 | 4天前 | JSON · 接口设计 · Go问答 · nil slice · Go 接口兼容 json.Marshal nil slice empty slice 数组字段
- Go nil slice 为什么 JSON 是 null:接口数组字段统一成 [] 的迁移清单
- 305浏览 收藏
查看更多
课程推荐
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 485次学习
查看更多
AI推荐
-
- ljg-skills
- ljg-skills 是李继刚开源的 AI 技能与提示词集合,面向大模型使用者整理了一批可复用的 prompt、角色设定和任务技能模板,适合用于学习提示词设计、搭建个人 AI 工作流和沉淀团队常用智能体能力。
- 3297次使用
-
- MELO音乐
- MELO音乐是一站式AI视频与音乐制作助手,对标suno, udio的高品质体验。提供伴奏生成、原创写词、无损导出、哼唱识曲、混音变声等全套音频与短视频编辑工具。无论是流行Kpop、电音说唱、民谣古风、摇滚儿歌还是商用轻音乐,MELO为你免费谱曲,轻松做同款!
- 3046次使用
-
- UniScribe
- UniScribe 是一款 AI 音视频转文字与内容整理工具,支持上传音频、视频文件或粘贴 YouTube 链接,自动生成转写文本、摘要、思维导图和关键问题,并支持多格式导出,适合会议记录、课程学习、访谈整理和内容创作复盘。
- 2996次使用
-
- 剧云
- 剧云是专业中文剧本创作平台,安全稳定运行十余年,集成AI编剧、剧本医生审核、人物小传、剧情关系图、大纲编写、多人协作、Word导入导出、版权管控功能,数据安全防护,轻松高效创作剧本。
- 3204次使用
-
- 万象有声
- 万象有声,一个专为有声创作者打造的新一代智能有声内容创作平台。平台提供专业的智能拆章、智能画本编辑、AI配音、AI生成音效、后期制作、智能对轨、智能审听等有声创作全流程工具,可以帮助创作者高效、低成本创作出引人入胜的有声作品。立即体验,让有声书制作更简单!
- 3162次使用
查看更多
相关文章
-
- 用Nginx反向代理部署go写的网站。
- 2023-01-17 502浏览
-
- GoLand调式动态执行代码
- 2023-01-13 502浏览
-
- 从不同的 go 例程将数据写入同一通道无需等待组即可正常工作
- 2024-04-29 501浏览
-
- Golang rsa-oaep解密失败,前端使用webcrypto
- 2024-04-26 501浏览
-
- 如何从用户输入以惰性方式初始化包的全局变量?
- 2024-04-24 501浏览

