MySQL与Redis实现二级缓存

redis简介

• redis 是完全开源免费的，遵守bsd协议，是一个高性能的key-value数据库
• redis 与其他 key - value 缓存产品有以下三个特点:
  • redis支持数据的持久化，可以将内存中的数据保存在磁盘中，重启的时候可以再次加载进行使用
  • redis不仅仅支持简单的key-value类型的数据，同时还提供list，set，zset，hash等数据结构的存储
  • redis支持数据的备份，即master-slave模式的数据备份

优势

• 性能极高 - redis能读的速度是110000次/s,写的速度是81000次/s
• 丰富的数据类型 – redis支持二进制案例的 strings, lists, hashes, sets 及 ordered sets 数据类型操作
• 原子 – redis的所有操作都是原子性的，意思就是要么成功执行要么失败完全不执行。单个操作是原子性的。多个操作也支持事务，即原子性，通过multi和exec指令包起来

下载与安装

• 下载并解压缩

wget http://download.redis.io/releases/redis-5.0.3.tar.gz
tar xzf redis-5.0.3.tar.gz

• 将文件夹移动到/usr/local/中

mv redis-5.0.3 /usr/local/

• 进入到文件夹中并编译测试

cd /usr/local/redis-5.0.3
sudo make test

• 编译安装

sudo make install

• 启动redis

redis-server

若出现以下画面则表示redis数据库已经启动了：
jpg

mysql与redis做二级缓存

• 对于访问量比较大的数据我们为了能够更快的获取到数据需要对数据库中获取的数据进行数据缓存。
• 在项目当中使用redis缓存流程
  1. 查询时先从缓存当中查询
  2. 缓存当中如果没有数据再从数据库查询，并将数据保存进缓存当中
  3. 如果缓存中查询到了数据直接返回，不再需要查询数据库

  数据缓存应该考虑同步问题：如果对数据进行了缓存，当查询数据时，如果缓存中有数据则直接返回缓存数据不会查询数据库，当数据库数据改变的时候就有可能出现数据库不一致的问题。可以考虑在每次修改数据库的时候同时将对应的缓存数据删除，这样重新查询的时候就会查询数据库并缓存

步骤实现

• 创建redispool.go文件用于连接池的初始化

package redigo_pool

import (
    "flag"
    "github.com/garyburd/redigo/redis"
    "time"
)
var (
    pool *redis.pool
    redisserver   = flag.string("redisserver", ":6379", "")
    
)
func init() {
    pool = &redis.pool{
        maxidle:     3, //最大空闲链接数，表示即使没有redis链接事依然可以保持n个空闲链接，而不被清除
        maxactive:   3, //最大激活连接数，表示同时最多有多少个链接
        idletimeout: 240 * time.second,//最大空闲链接等待时间，超过此时间，空闲将被关闭
        dial: func() (redis.conn, error) {
            c, err := redis.dial("tcp", *redisserver)
            if err != nil {
                return nil, err
            }
            return c, err
        },
        testonborrow: func(c redis.conn, t time.time) error {
            if time.since(t) < time.minute {
                return nil
            }
            _, err := c.do("ping")
            return err
        },
    }
}

• 创建main.go文件实现二级缓存

package main

import (
    "database/sql"
    "encoding/json"
    "fmt"
    "github.com/garyburd/redigo/redis"
    _ "github.com/go-sql-driver/mysql"
    "strconv"
    "web/redis/redigo_pool"
    _ "web/redis/redigo_pool"
)

type person struct {
    id int `db:"id"`
    name string `db:"name"`
    age int `db:"age"`
    rmb int `db:"rmb"`
}

func main() {
    var cmd string
    for{
        fmt.println("输入命令")
        fmt.scan(&cmd)
        switch cmd {
        case "getall":
            getall()
        default:
            fmt.println("不能识别其他命令")
        }
        fmt.println()
    }
}

func getall()  {
    //从连接池当中获取链接
    conn := redigo_pool.pool.get()
    //先查看redis中是否有数据
    //conn,_ :=redis.dial("tcp","localhost:6379")
    defer conn.close()
    values, _ := redis.values(conn.do("lrange", "mlist",0,-1))

    if len(values) > 0 {
        //如果有数据
        fmt.println("从redis获取数据")
        //从redis中直接获取
        for _,key := range values{
            pid :=string(key.([]byte))
            id ,_:= strconv.atoi(pid)
            results,_ := redis.bytes(conn.do("get",id))
            var p person
            err := json.unmarshal(results,&p)
            if err != nil {
                fmt.println("json 反序列化出错")
            }else {
                fmt.printf("name = %s\n",p.name)
            }
        }
    }else {
        fmt.println("从mysql中获取")

        //查询数据库
        db,_ := sql.open("mysql","root:szt930708@tcp(localhost:3306)/mydb")
        defer db.close()

        var persons []person

        rows,_ := db.query("select id,name,age,rmb from person")
        for rows.next()  {
            var id int
            var name string
            var age int
            var rmb int
            rows.scan(&id,&name,&age,&rmb)
            per := person{id,name,age,rmb}
            persons = append(persons,per)

        }
        //写入到redis中:将person以hash的方式写入到redis中
        for _,p := range persons{

            p_byte,_ := json.marshal(p)
            _,err1 := conn.do("setnx",p.id,p_byte)
            _,err2 := conn.do("lpush","mlist",p.id)
            // 设置过期时间
            conn.do("expire",p.id,60*5)
            if err1 != nil || err2 != nil {
                fmt.println("写入失败")
            }else {
                fmt.println("写入成功")
            }
        }
        conn.do("expire","mlist",60*5)
    }
}