5.6 NOSQL数据库操作

NoSQL(Not Only SQL),指的是非关系型的数据库。随着Web2.0的兴起,传统的关系数据库在应付Web2.0网站,特别是超大规模和高并发的SNS类型的Web2.0纯动态网站已经显得力不从心,暴露了很多难以克服的问题,而非关系型的数据库则由于其本身的特点得到了非常迅速的发展。

而Go语言作为21世纪的C语言,对NOSQL的支持也是很好,目前流行的NOSQL主要有redis、mongoDB、Cassandra和Membase等。这些数据库都有高性能、高并发读写等特点,目前已经广泛应用于各种应用中。我接下来主要讲解一下redis和mongoDB的操作。

redis

redis是一个key-value存储系统。和Memcached类似,它支持存储的value类型相对更多,包括string(字符串)、list(链表)、set(集合)和zset(有序集合)。

目前应用redis最广泛的应该是新浪微博平台,其次还有Facebook收购的图片社交网站instagram。以及其他一些有名的互联网企业

Go目前支持redis的驱动有如下

我以redigo驱动为例来演示如何进行数据的操作:

  1. package main
  2. import (
  3. "fmt"
  4. "os"
  5. "os/signal"
  6. "syscall"
  7. "time"
  8. "github.com/garyburd/redigo/redis"
  9. )
  10. var (
  11. Pool *redis.Pool
  12. )
  13. func init() {
  14. redisHost := ":6379"
  15. Pool = newPool(redisHost)
  16. close()
  17. }
  18. func newPool(server string) *redis.Pool {
  19. return &redis.Pool{
  20. MaxIdle: 3,
  21. IdleTimeout: 240 * time.Second,
  22. Dial: func() (redis.Conn, error) {
  23. c, err := redis.Dial("tcp", server)
  24. if err != nil {
  25. return nil, err
  26. }
  27. return c, err
  28. },
  29. TestOnBorrow: func(c redis.Conn, t time.Time) error {
  30. _, err := c.Do("PING")
  31. return err
  32. },
  33. }
  34. }
  35. func close() {
  36. c := make(chan os.Signal, 1)
  37. signal.Notify(c, os.Interrupt)
  38. signal.Notify(c, syscall.SIGTERM)
  39. signal.Notify(c, syscall.SIGKILL)
  40. go func() {
  41. <-c
  42. Pool.Close()
  43. os.Exit(0)
  44. }()
  45. }
  46. func Get(key string) ([]byte, error) {
  47. conn := Pool.Get()
  48. defer conn.Close()
  49. var data []byte
  50. data, err := redis.Bytes(conn.Do("GET", key))
  51. if err != nil {
  52. return data, fmt.Errorf("error get key %s: %v", key, err)
  53. }
  54. return data, err
  55. }
  56. func main() {
  57. test, err := Get("test")
  58. fmt.Println(test, err)
  59. }

另外以前我fork了最后一个驱动,更新了一些bug,目前应用在我自己的短域名服务项目中(每天200W左右的PV值)

https://github.com/astaxie/goredis

接下来的以我自己fork的这个redis驱动为例来演示如何进行数据的操作

  1. package main
  2. import (
  3. "fmt"
  4. "github.com/astaxie/goredis"
  5. )
  6. func main() {
  7. var client goredis.Client
  8. // 设置端口为redis默认端口
  9. client.Addr = "127.0.0.1:6379"
  10. //字符串操作
  11. client.Set("a", []byte("hello"))
  12. val, _ := client.Get("a")
  13. fmt.Println(string(val))
  14. client.Del("a")
  15. //list操作
  16. vals := []string{"a", "b", "c", "d", "e"}
  17. for _, v := range vals {
  18. client.Rpush("l", []byte(v))
  19. }
  20. dbvals,_ := client.Lrange("l", 0, 4)
  21. for i, v := range dbvals {
  22. println(i,":",string(v))
  23. }
  24. client.Del("l")
  25. }

我们可以看到操作redis非常的方便,而且我实际项目中应用下来性能也很高。client的命令和redis的命令基本保持一致。所以和原生态操作redis非常类似。

mongoDB

MongoDB是一个高性能,开源,无模式的文档型数据库,是一个介于关系数据库和非关系数据库之间的产品,是非关系数据库当中功能最丰富,最像关系数据库的。他支持的数据结构非常松散,采用的是类似json的bjson格式来存储数据,因此可以存储比较复杂的数据类型。Mongo最大的特点是他支持的查询语言非常强大,其语法有点类似于面向对象的查询语言,几乎可以实现类似关系数据库单表查询的绝大部分功能,而且还支持对数据建立索引。

下图展示了mysql和mongoDB之间的对应关系,我们可以看出来非常的方便,但是mongoDB的性能非常好。

NOSQL数据库操作 - 图1

图5.1 MongoDB和Mysql的操作对比图

目前Go支持mongoDB最好的驱动就是mgo,这个驱动目前最有可能成为官方的pkg。

安装mgo:

  1. go get gopkg.in/mgo.v2

下面我将演示如何通过Go来操作mongoDB:

  1. package main
  2. import (
  3. "fmt"
  4. "log"
  5. "gopkg.in/mgo.v2"
  6. "gopkg.in/mgo.v2/bson"
  7. )
  8. type Person struct {
  9. Name string
  10. Phone string
  11. }
  12. func main() {
  13. session, err := mgo.Dial("server1.example.com,server2.example.com")
  14. if err != nil {
  15. panic(err)
  16. }
  17. defer session.Close()
  18. // Optional. Switch the session to a monotonic behavior.
  19. session.SetMode(mgo.Monotonic, true)
  20. c := session.DB("test").C("people")
  21. err = c.Insert(&Person{"Ale", "+55 53 8116 9639"},
  22. &Person{"Cla", "+55 53 8402 8510"})
  23. if err != nil {
  24. log.Fatal(err)
  25. }
  26. result := Person{}
  27. err = c.Find(bson.M{"name": "Ale"}).One(&result)
  28. if err != nil {
  29. log.Fatal(err)
  30. }
  31. fmt.Println("Phone:", result.Phone)
  32. }

我们可以看出来mgo的操作方式和beedb的操作方式几乎类似,都是基于struct的操作方式,这个就是Go Style。