Menu

  • Home
  • Work
    • Cloud
      • Virtualization
      • IaaS
      • PaaS
    • Java
    • Go
    • C
    • C++
    • JavaScript
    • PHP
    • Python
    • Architecture
    • Others
      • Assembly
      • Ruby
      • Perl
      • Lua
      • Rust
      • XML
      • Network
      • IoT
      • GIS
      • Algorithm
      • AI
      • Math
      • RE
      • Graphic
    • OS
      • Linux
      • Windows
      • Mac OS X
    • BigData
    • Database
      • MySQL
      • Oracle
    • Mobile
      • Android
      • IOS
    • Web
      • HTML
      • CSS
  • Life
    • Cooking
    • Travel
    • Gardening
  • Gallery
  • Video
  • Music
  • Essay
  • Home
  • Work
    • Cloud
      • Virtualization
      • IaaS
      • PaaS
    • Java
    • Go
    • C
    • C++
    • JavaScript
    • PHP
    • Python
    • Architecture
    • Others
      • Assembly
      • Ruby
      • Perl
      • Lua
      • Rust
      • XML
      • Network
      • IoT
      • GIS
      • Algorithm
      • AI
      • Math
      • RE
      • Graphic
    • OS
      • Linux
      • Windows
      • Mac OS X
    • BigData
    • Database
      • MySQL
      • Oracle
    • Mobile
      • Android
      • IOS
    • Web
      • HTML
      • CSS
  • Life
    • Cooking
    • Travel
    • Gardening
  • Gallery
  • Video
  • Music
  • Essay

Go语言数据库编程

13
May
2017

Go语言数据库编程

By Alex
/ in Go
0 Comments
sql包

该包提供了对SQL或者类SQL数据库提供通用访问接口。

代码示例
Go
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
import "database/sql"
import (
    // 引入驱动包
    _ "github.com/go-sql-driver/mysql"
    "log"
)
 
func main() {
    // 打开数据库连接
    db, _ := sql.Open(driver, dataSourceName)
    // 直到发起第一个查询,并不会真正打开连接
    // 下面的命令可以验证连接是否正常
    if err := db.Ping(); err != nil {
        log.Fatal(err)
    }
 
    // 执行SQL插入
    result, _ := db.Exec(
        "INSERT INTO users (name, age) VALUES (?, ?)",
        "Alex", 31,
    )
    // 上一次插入的ID、影响的行数
    id, _ := result.LastInsertId()
    rowCount, _ := result.RowsAffected()
 
    // 执行SQL查询
    rows, _ := db.Query("SELECT name FROM users WHERE age = ?", 31)
    // 遍历结果集
    for rows.Next() {
        var name string
        rows.Scan(&name)
    }
 
    // 执行SQL单行查询
    var age int
    row := db.QueryRow("SELECT age FROM users WHERE name = ?", "Alex")
    row.Scan(&age)
 
    // 预编译语句
    stmt, err := db.Prepare("SELECT name FROM users WHERE age = ?")
    if err != nil {
        log.Fatal(err)
    }
    rows, _ := stmt.Query(31)
 
 
    // 事务支持
    tx, _ := db.Begin()
    tx.Commit()
    tx.Rollback()
    
    // Context支持,可以进行查询取消或者超时
    db.QueryContext(ctx,sql,arg0,arg1)
}
空值处理

如果数据库的列可空,则你必须使用支持空值的Go类型来接收它。sql包中实现的类型包括NullBool、NullFloat64、NullInt64、NullString。示例代码:

Go
1
2
3
4
5
6
7
var name NullString
db.QueryRow("SELECT name FROM names WHERE id = ?", id).Scan(&name)
 
if name.Valid {
} else {
    // 数据库空值
}
连接池

标准库内置了数据库连接池:

Go
1
2
3
4
5
6
7
// 连接池中连接的最大数量
db.SetMaxOpenConns(100)
// 连接池中最大空闲连接数量
db.SetMaxIdleConns(50)
mlt, _ := time.ParseDuration("600s")
// 连接可以被重用的最大时长
db.SetConnMaxLifetime(mlt)
sqlx包

该包对Go标准库database/sql进行了扩展,支持:

  1. 将结果集行反序列化为结构(支持嵌入式结构)、映射、切片
  2. 支持命名参数
  3. 通过Get/Query便捷的把查询结果转换为结构或切片

执行下面的命令安装此包:

Shell
1
go get github.com/jmoiron/sqlx
代码示例
Go
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
package main
 
import (
    _ "github.com/mattn/go-sqlite3"
    "github.com/jmoiron/sqlx"
    "github.com/jinzhu/now"
    "time"
    "fmt"
    "log"
)
 
const DDL = `
CREATE TABLE USERS (
    USER_NAME VARCHAR(64),
    USER_AGE INTEGER,
    BIRTHDAY DATE
)
`
 
type User struct {
    // sqlx使用db标签
    Name string    `db:"USER_NAME"`
    Age  uint8     `db:"USER_AGE"`
    DOB  time.Time `db:"BIRTHDAY"`
    // 注意,如果数据库字段可为空,则结构的字段类型必须用sql.Null*
}
 
func main() {
    db, _ := sqlx.Connect("sqlite3", ":memory:")
 
    // 执行语句,如果失败则终止程序
    db.MustExec(DDL)
 
    // 在事务中执行
    tx := db.MustBegin()
    tx.MustExec(
        "INSERT INTO USERS (USER_NAME, USER_AGE ,BIRTHDAY) VALUES ($1, $2, $3)",
        "Alex", 31, "1986-09-12", // UTC时间
    )
    tx.MustExec("INSERT INTO USERS (USER_NAME, USER_AGE ,BIRTHDAY) VALUES ($1, $2, $3)", "Meng", 28, "1989-11-06")
    tx.NamedExec(
        "INSERT INTO USERS (USER_NAME, USER_AGE ,BIRTHDAY) VALUES (:USER_NAME, :USER_AGE, :BIRTHDAY)",
        &User{"Cai", 3, now.MustParse("2014-11-27")}, // 本地时间
    )
    tx.Commit()
 
    // 根据Tag自动把行装配到结构
    var users []User
    err := db.Select(&users, "SELECT * FROM USERS ORDER BY USER_NAME ASC")
    // 不能使用$1必须使用?,否则报错
    err := db.Select(&users, "SELECT * FROM USERS WHERE USER_TYPE = ?", type)
    if err != nil {
        log.Fatal(err)
    }
    alex, cai, meng := users[0], users[1], users[2]
    fmt.Printf("%v\n%v\n%v\n", alex, cai, meng)
 
    // 类似,单仅仅处理第一行
    alex = User{}
    db.Get(&alex, "SELECT * FROM USERS WHERE USER_NAME=$1", "Alex")
    fmt.Printf("%v\n", alex)
 
    // 使用单个结构示例来遍历所有行
    user := User{}
    // rows是一个游标
    rows, _ := db.Queryx("SELECT * FROM USERS")
    for rows.Next() {
        rows.StructScan(&user)
        fmt.Println(user.Name)
    }
 
    // 命名查询
    rows, _ = db.NamedQuery(`SELECT * FROM USERS WHERE USER_NAME=:un`, map[string]interface{}{"un": "Alex"})
    // 命名查询可以直接传入结构,就像上面的NamedExec一样
 
    // 支持Context
    db.QueryxContext(ctx,sql,arg0,arg1)
}
驱动
mysql

该包支持MySQL、MariaDB、Percona、Sphinx等数据库。执行下面的命令安装:

Shell
1
go get -u github.com/go-sql-driver/mysql

 打开数据库连接:

Go
1
2
3
4
5
6
import (
    // 引入驱动
    _ "github.com/go-sql-driver/mysql"
)
                    //驱动名  数据源名称(DSN)
db, err := sql.Open("mysql", "user:password@/dbname")
DSN格式
Shell
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
[username[:password]@][protocol[(address)]]/dbname[?param1=value1&...&paramN=valueN]
# address 为TCP或UDP地址,格式host[:port],如果host为IPv6则必须用 []包围
# 支持的参数:
# allowCleartextPasswords 是否允许明文密码,true/false
# charset 字符集,示例charset=utf8mb4,utf8 多个逗号分隔,优先使用前面。最好使用collation参数代替
# collation 客户端服务器通信时使用的编码方式,默认utf8_general_ci
# maxAllowedPacket 最大允许的包大小
# parseTime 如果设置为true则DATE/DATETIME被输出为time.Time而非[]byte / string
# readTimeout IO读超时
# timeout 连接超时
# writeTimeout IO写超时
 
 
# 示例
user:password@tcp(localhost:3306)/dbname?timeout=90s&collation=utf8mb4_unicode_ci
ColumnType支持

该驱动支持Go 1.8的ColumnType接口,但是不支持ColumnType.Length()方法。

Context支持

从Go 1.8开始,database/sql包支持context.Context。该驱动支持基于Context的查询超时和取消。

time.Time支持

MySQL的DATE、DATETIME内部默认输出类型为[]byte,你可以将其Scan到[]byte、string、sql.RawBytes等类型的字段。

如果需要将DATE、DATETIME输出为time.Time,设置DSN参数parseTime=true。 

常见问题
无法扫描时间字段

报错信息:sql: Scan error on column index 8: unsupported Scan, storing driver.Value type []uint8 into type time.Time

解决方案:设置DSN参数parseTime=true即可

空字段导致扫描失败

报错信息:sql: Scan error on column index 3: converting driver.Value type \u003cnil\u003e (\"\u003cnil\u003e\") to a uint64: invalid syntax

解决方案: \u003cnil\u003e就是<nil>,意味着取到了空的列值。使用Null安全的字段类型。上面的index 3表示是SQL中第4个列

← 黎明,送别
Next Post →

Leave a Reply Cancel reply

Your email address will not be published. Required fields are marked *

You may use these HTML tags and attributes: <a href="" title=""> <abbr title=""> <acronym title=""> <b> <blockquote cite=""> <cite> <code class="" title="" data-url=""> <del datetime=""> <em> <i> <q cite=""> <strike> <strong> <pre class="" title="" data-url=""> <span class="" title="" data-url="">

Related Posts

  • gRPC学习笔记
  • SOFAStack学习笔记
  • Go语言系统编程
  • Ginkgo学习笔记
  • Go语言学习笔记

Recent Posts

  • Investigating and Solving the Issue of Failed Certificate Request with ZeroSSL and Cert-Manager
  • A Comprehensive Study of Kotlin for Java Developers
  • 背诵营笔记
  • 利用LangChain和语言模型交互
  • 享学营笔记
ABOUT ME

汪震 | Alex Wong

江苏淮安人,现居北京。目前供职于腾讯云,专注容器方向。

GitHub:gmemcc

Git:git.gmem.cc

Email:gmemjunk@gmem.cc@me.com

ABOUT GMEM

绿色记忆是我的个人网站,域名gmem.cc中G是Green的简写,MEM是Memory的简写,CC则是我的小天使彩彩名字的简写。

我在这里记录自己的工作与生活,同时和大家分享一些编程方面的知识。

GMEM HISTORY
v2.00:微风
v1.03:单车旅行
v1.02:夏日版
v1.01:未完成
v0.10:彩虹天堂
v0.01:阳光海岸
MIRROR INFO
Meta
  • Log in
  • Entries RSS
  • Comments RSS
  • WordPress.org
Recent Posts
  • Investigating and Solving the Issue of Failed Certificate Request with ZeroSSL and Cert-Manager
    In this blog post, I will walk ...
  • A Comprehensive Study of Kotlin for Java Developers
    Introduction Purpose of the Study Understanding the Mo ...
  • 背诵营笔记
    Day 1 Find Your Greatness 原文 Greatness. It’s just ...
  • 利用LangChain和语言模型交互
    LangChain是什么 从名字上可以看出来,LangChain可以用来构建自然语言处理能力的链条。它是一个库 ...
  • 享学营笔记
    Unit 1 At home Lesson 1 In the ...
  • K8S集群跨云迁移
    要将K8S集群从一个云服务商迁移到另外一个,需要解决以下问题: 各种K8S资源的迁移 工作负载所挂载的数 ...
  • Terraform快速参考
    简介 Terraform用于实现基础设施即代码(infrastructure as code)—— 通过代码( ...
  • 草缸2021
    经过四个多月的努力,我的小小荷兰景到达极致了状态。

  • 编写Kubernetes风格的APIServer
    背景 前段时间接到一个需求做一个工具,工具将在K8S中运行。需求很适合用控制器模式实现,很自然的就基于kube ...
  • 记录一次KeyDB缓慢的定位过程
    环境说明 运行环境 这个问题出现在一套搭建在虚拟机上的Kubernetes 1.18集群上。集群有三个节点: ...
  • eBPF学习笔记
    简介 BPF,即Berkeley Packet Filter,是一个古老的网络封包过滤机制。它允许从用户空间注 ...
  • IPVS模式下ClusterIP泄露宿主机端口的问题
    问题 在一个启用了IPVS模式kube-proxy的K8S集群中,运行着一个Docker Registry服务 ...
  • 念爷爷
      今天是爷爷的头七,十二月七日、阴历十月廿三中午,老人家与世长辞。   九月初,回家看望刚动完手术的爸爸,发

  • 6 杨梅坑

  • liuhuashan
    深圳人才公园的网红景点 —— 流花山

  • 1 2020年10月拈花湾

  • 内核缺陷触发的NodePort服务63秒延迟问题
    现象 我们有一个新创建的TKE 1.3.0集群,使用基于Galaxy + Flannel(VXLAN模式)的容 ...
  • Galaxy学习笔记
    简介 Galaxy是TKEStack的一个网络组件,支持为TKE集群提供Overlay/Underlay容器网 ...
TOPLINKS
  • Zitahli's blue 91 people like this
  • 梦中的婚礼 64 people like this
  • 汪静好 61 people like this
  • 那年我一岁 36 people like this
  • 为了爱 28 people like this
  • 小绿彩 26 people like this
  • 彩虹姐姐的笑脸 24 people like this
  • 杨梅坑 6 people like this
  • 亚龙湾之旅 1 people like this
  • 汪昌博 people like this
  • 2013年11月香山 10 people like this
  • 2013年7月秦皇岛 6 people like this
  • 2013年6月蓟县盘山 5 people like this
  • 2013年2月梅花山 2 people like this
  • 2013年淮阴自贡迎春灯会 3 people like this
  • 2012年镇江金山游 1 people like this
  • 2012年徽杭古道 9 people like this
  • 2011年清明节后扬州行 1 people like this
  • 2008年十一云龙公园 5 people like this
  • 2008年之秋忆 7 people like this
  • 老照片 13 people like this
  • 火一样的六月 16 people like this
  • 发黄的相片 3 people like this
  • Cesium学习笔记 90 people like this
  • IntelliJ IDEA知识集锦 59 people like this
  • Bazel学习笔记 38 people like this
  • 基于Kurento搭建WebRTC服务器 38 people like this
  • PhoneGap学习笔记 32 people like this
  • NaCl学习笔记 32 people like this
  • 使用Oracle Java Mission Control监控JVM运行状态 29 people like this
  • Ceph学习笔记 27 people like this
  • 基于Calico的CNI 27 people like this
Tag Cloud
ActiveMQ AspectJ CDT Ceph Chrome CNI Command Cordova Coroutine CXF Cygwin DNS Docker eBPF Eclipse ExtJS F7 FAQ Groovy Hibernate HTTP IntelliJ IO编程 IPVS JacksonJSON JMS JSON JVM K8S kernel LB libvirt Linux知识 Linux编程 LOG Maven MinGW Mock Monitoring Multimedia MVC MySQL netfs Netty Nginx NIO Node.js NoSQL Oracle PDT PHP Redis RPC Scheduler ServiceMesh SNMP Spring SSL svn Tomcat TSDB Ubuntu WebGL WebRTC WebService WebSocket wxWidgets XDebug XML XPath XRM ZooKeeper 亚龙湾 单元测试 学习笔记 实时处理 并发编程 彩姐 性能剖析 性能调优 文本处理 新特性 架构模式 系统编程 网络编程 视频监控 设计模式 远程调试 配置文件 齐塔莉
Recent Comments
  • qg on Istio中的透明代理问题
  • heao on 基于本地gRPC的Go插件系统
  • 黄豆豆 on Ginkgo学习笔记
  • cloud on OpenStack学习笔记
  • 5dragoncon on Cilium学习笔记
  • Archeb on 重温iptables
  • C/C++编程:WebSocketpp(Linux + Clion + boostAsio) – 源码巴士 on 基于C/C++的WebSocket库
  • jerbin on eBPF学习笔记
  • point on Istio中的透明代理问题
  • G on Istio中的透明代理问题
  • 绿色记忆:Go语言单元测试和仿冒 on Ginkgo学习笔记
  • point on Istio中的透明代理问题
  • 【Maven】maven插件开发实战 – IT汇 on Maven插件开发
  • chenlx on eBPF学习笔记
  • Alex on eBPF学习笔记
  • CFC4N on eBPF学习笔记
  • 李运田 on 念爷爷
  • yongman on 记录一次KeyDB缓慢的定位过程
  • Alex on Istio中的透明代理问题
  • will on Istio中的透明代理问题
  • will on Istio中的透明代理问题
  • haolipeng on 基于本地gRPC的Go插件系统
  • 吴杰 on 基于C/C++的WebSocket库
©2005-2025 Gmem.cc | Powered by WordPress | 京ICP备18007345号-2