基于gin框架的较为通用的web脚手架---CLD分层理念
作者:互联网
目录
前言
在我的认知世界里,MVC的分层理念跟不上时代的脚步了,在前后端分离的时代。
前提
使用的工具
vcsode
go module
CLD分层理念
1.controller ---- 控制界面
2.local ---- 逻辑处理
3.dao ---- 数据库管理
Gin-Web脚手架
config-全局配置信息
文件类型是yaml类型
config.yaml
app:
name: "bubble"
mode: "dev"
port: 8081
log:
level: "debug"
filename: "bubble.log"
max_size: 200
max_age: 30
max_backups: 7
mysql:
host: "127.0.0.1"
port: "3306"
user: "root"
password: "xxxxxxxx"
dbname: "sql_demo"
max_open_conns:
max_idle_conns:
redis:
host: "127.0.0.1"
port: 6379
password: ""
db: 0
pool_size: 100
为什么会存在这个文件夹?
想想呀,当去修改配置信息,比如买了新的服务器,我们需要修改主机和端口一系列需要改变的值,我们会去各个文件里面去修改配置,搜索和修改的过程就是耗时费力的。这时候,程序员的"懒惰"就发挥了作用,新建一个有配置信息的文件夹。当寻找的时候,就一目了然。
注意在Linux服务器,我们可以使用Docker容器来承载代码,可以轻松的迁移到不同的服务器上
settings-设置配置信息
viper的初始化-viper库介绍和使用
func Init() (err error) {
viper.SetConfigFile("config.yaml") // 指定配置文件
viper.AddConfigPath("./config/") // 指定查找配置文件的路径
err = viper.ReadInConfig() // 读取配置信息
if err != nil { // 读取配置信息失败
return err
}
// 监控配置文件变化
viper.WatchConfig()
viper.OnConfigChange(func(in fsnotify.Event) {
fmt.Println("配置文件修改了")
})
return
}
这个库使用的效果是事半功倍,获取配置信息。
logger-日志记录
zap的初始化-zap接收gin的默认日志
// InitLogger 初始化Logger
func Init() (err error) {
writeSyncer := getLogWriter(
viper.GetString("log.filename"),
viper.GetInt("log.max_size"),
viper.GetInt("log.max_backups"),
viper.GetInt("log.max_age"),
)
encoder := getEncoder()
var l = new(zapcore.Level)
err = l.UnmarshalText([]byte(viper.GetString("log.level")))
if err != nil {
return
}
core := zapcore.NewCore(encoder, writeSyncer, l)
lg := zap.New(core, zap.AddCaller())
zap.ReplaceGlobals(lg) // 替换zap包中全局的logger实例,后续在其他包中只需使用zap.L()调用即可
return
}
func getEncoder() zapcore.Encoder {
encoderConfig := zap.NewProductionEncoderConfig()
encoderConfig.EncodeTime = zapcore.ISO8601TimeEncoder
encoderConfig.TimeKey = "time"
encoderConfig.EncodeLevel = zapcore.CapitalLevelEncoder
encoderConfig.EncodeDuration = zapcore.SecondsDurationEncoder
encoderConfig.EncodeCaller = zapcore.ShortCallerEncoder
return zapcore.NewJSONEncoder(encoderConfig)
}
func getLogWriter(filename string, maxSize, maxBackup, maxAge int) zapcore.WriteSyncer {
lumberJackLogger := &lumberjack.Logger{
Filename: filename,
MaxSize: maxSize,
MaxBackups: maxBackup,
MaxAge: maxAge,
}
return zapcore.AddSync(lumberJackLogger)
}
// GinLogger 接收gin框架默认的日志
func GinLogger() gin.HandlerFunc {
return func(c *gin.Context) {
start := time.Now()
path := c.Request.URL.Path
query := c.Request.URL.RawQuery
c.Next()
cost := time.Since(start)
zap.L().Info(path,
zap.Int("status", c.Writer.Status()),
zap.String("method", c.Request.Method),
zap.String("path", path),
zap.String("query", query),
zap.String("ip", c.ClientIP()),
zap.String("user-agent", c.Request.UserAgent()),
zap.String("errors", c.Errors.ByType(gin.ErrorTypePrivate).String()),
zap.Duration("cost", cost),
)
}
}
// GinRecovery recover掉项目可能出现的panic,并使用zap记录相关日志
func GinRecovery(stack bool) gin.HandlerFunc {
return func(c *gin.Context) {
defer func() {
if err := recover(); err != nil {
// Check for a broken connection, as it is not really a
// condition that warrants a panic stack trace.
var brokenPipe bool
if ne, ok := err.(*net.OpError); ok {
if se, ok := ne.Err.(*os.SyscallError); ok {
if strings.Contains(strings.ToLower(se.Error()), "broken pipe") || strings.Contains(strings.ToLower(se.Error()), "connection reset by peer") {
brokenPipe = true
}
}
}
httpRequest, _ := httputil.DumpRequest(c.Request, false)
if brokenPipe {
zap.L().Error(c.Request.URL.Path,
zap.Any("error", err),
zap.String("request", string(httpRequest)),
)
// If the connection is dead, we can't write a status to it.
c.Error(err.(error)) // nolint: errcheck
c.Abort()
return
}
if stack {
zap.L().Error("[Recovery from panic]",
zap.Any("error", err),
zap.String("request", string(httpRequest)),
zap.String("stack", string(debug.Stack())),
)
} else {
zap.L().Error("[Recovery from panic]",
zap.Any("error", err),
zap.String("request", string(httpRequest)),
)
}
c.AbortWithStatus(http.StatusInternalServerError)
}
}()
c.Next()
}
}
初始化,要重写中间件去覆盖gin默认的日志
dao-数据库的配置
mysql-slqx的使用
var db *sqlx.DB
func Init() (err error) {
//fmt.Sprintf拼接函数
dsn := fmt.Sprintf("%s:%s@tcp(%s:%d)/%s?charset=utf8mb4&parseTime=True",
viper.GetString("mysql.user"),
viper.GetString("mysql.password"),
viper.GetString("mysql.host"),
viper.GetInt("mysql.port"),
viper.GetString("mysql.dbname"),
)
// 也可以使用MustConnect连接不成功就panic
db, err = sqlx.Connect("mysql", dsn)
if err != nil {
zap.L().Error("connect db err", zap.Error(err))
return
}
db.SetMaxOpenConns(viper.GetInt("mysql.max_open_conns"))
db.SetMaxIdleConns(viper.GetInt("mysql.max_idle_conns"))
return
}
func Close (){
_ = db.Close()
}
不要忘记匿名导入
_ "github.com/go-sql-driver/mysql"
代码中使用了viper和zap库
redis-redis的使用介绍
// 声明一个全局的rdb变量
var rdb *redis.Client
// 初始化连接
func Init() (err error) {
rdb = redis.NewClient(&redis.Options{
Addr: fmt.Sprintf("%s:%d",
viper.GetString("redis.host"),
viper.GetInt("redis.port"),
),
Password: viper.GetString("redis.password"), // no password set
DB: viper.GetInt("redis.db"), // use default DB
PoolSize: viper.GetInt("reids.pool_size"),
})
_, err = rdb.Ping().Result()
return
}
func Close (){
_ = rdb.Close()
}
配置信息在config.yaml
routers-路由
func Setup() *gin.Engine {
r := gin.New()
//中间件的使用
r.Use(logger.GinLogger(),logger.GinRecovery(true))
r.GET("/",func(c *gin.Context) {
c.String(http.StatusOK,"ok")
})
return r;
}
controllers
根据实际的业务场景
logic
根据实际的业务场景
main.go
func main() {
//加载配置
if err := logger.Init(); err != nil {
fmt.Printf("init settings failed,err:%v\n", err)
return
}
//初始化日志
if err := settings.Init(); err != nil {
fmt.Printf("init settings failed,err:%v\n", err)
return
}
defer zap.L().Sync()
zap.L().Debug("logger init succ")
//初始化Mysql数据库
if err := mysql.Init(); err != nil {
fmt.Printf("init settings failed,err:%v\n", err)
return
}
mysql.Close()
//初始化redis
if err := redis.Init(); err != nil {
fmt.Printf("init settings failed,err:%v\n", err)
return
}
redis.Close()
//注册路由
r := routers.Setup()
//启动服务(优雅关机)
srv := &http.Server{
Addr: fmt.Sprintf(":%d", viper.GetInt("app.port")),
Handler: r,
}
go func() {
// 开启一个goroutine启动服务
if err := srv.ListenAndServe(); err != nil && err != http.ErrServerClosed {
log.Fatalf("listen: %s\n", err)
}
}()
// 等待中断信号来优雅地关闭服务器,为关闭服务器操作设置一个5秒的超时
quit := make(chan os.Signal, 1) // 创建一个接收信号的通道
// kill 默认会发送 syscall.SIGTERM 信号
// kill -2 发送 syscall.SIGINT 信号,我们常用的Ctrl+C就是触发系统SIGINT信号
// kill -9 发送 syscall.SIGKILL 信号,但是不能被捕获,所以不需要添加它
// signal.Notify把收到的 syscall.SIGINT或syscall.SIGTERM 信号转发给quit
signal.Notify(quit, syscall.SIGINT, syscall.SIGTERM) // 此处不会阻塞
<-quit // 阻塞在此,当接收到上述两种信号时才会往下执行
log.Println("Shutdown Server ...")
// 创建一个5秒超时的context
ctx, cancel := context.WithTimeout(context.Background(), 5*time.Second)
defer cancel()
// 5秒内优雅关闭服务(将未处理完的请求处理完再关闭服务),超过5秒就超时退出
if err := srv.Shutdown(ctx); err != nil {
log.Fatal("Server Shutdown: ", err)
}
log.Println("Server exiting")
}
总结
基本的脚手架已经完成了,可以满足一般的需求,鉴于能力有限,后面会持续更新的。
标签:web,return,err,CLD,redis,---,viper,func,zap 来源: https://blog.csdn.net/m0_64599367/article/details/121938284