Go 标准库增加metrics指标探讨分析

 更新时间:2023年10月11日 14:19:54   作者:煎鱼  
go中有一个神奇的标准库 runtime/metrics,提供了一系列预定义好的 Go 自身的相关指标,如果没有编写过基础监控库或者关注的比较少的朋友可能会没接触到这类指标,本文展开现有metrics 指标,并结合现有的社区讨论一起看看还有没有必要增加更多的标准库指标

快速了解 runtime/metrics

以下是一个快速 Demo。代码如下:

func main() {
    descs := metrics.All()
    samples := make([]metrics.Sample, len(descs))
    for i := range samples {
        samples[i].Name = descs[i].Name
    }
    metrics.Read(samples)
    for _, sample := range samples {
        name, value := sample.Name, sample.Value
        switch value.Kind() {
        case metrics.KindUint64:
            fmt.Printf("%s: %d\n", name, value.Uint64())
        case metrics.KindFloat64:
            fmt.Printf("%s: %f\n", name, value.Float64())
        case metrics.KindFloat64Histogram:
            fmt.Printf("%s: %f\n", name, medianBucket(value.Float64Histogram()))
         ...
        }
    }
}
func medianBucket(h *metrics.Float64Histogram) float64 {
    total := uint64(0)
    for _, count := range h.Counts {
        total += count
    }
    thresh := total / 2
    total = 0
    for i, count := range h.Counts {
        total += count
        if total >= thresh {
            return h.Buckets[i]
        }
    }
    panic("should not happen")
}

输出结果:

/cgo/go-to-c-calls:calls: 0
/cpu/classes/gc/mark/assist:cpu-seconds: 0.000000
/cpu/classes/gc/mark/dedicated:cpu-seconds: 0.000000
...
/gc/cycles/automatic:gc-cycles: 0
/gc/cycles/forced:gc-cycles: 0
/gc/cycles/total:gc-cycles: 0
/gc/gogc:percent: 100
/gc/gomemlimit:bytes: 9223372036854775807
/gc/heap/allocs-by-size:bytes: 8193.000000
/gc/heap/allocs:bytes: 56832
/gc/heap/allocs:objects: 6
/gc/heap/frees-by-size:bytes: 1.000000
/gc/heap/frees:bytes: 0
/gc/heap/frees:objects: 0
/gc/heap/goal:bytes: 4194304
...

里面包含了相当多的 Go 系统指标。完整的代码运行和输出可以查看 https://go.dev/play/p/CKASbysqX9x

我梳理了一张对照清单。其中 10 个指标如下:

序号指标含义
1/cgo/go-to-c-calls:calls当前进程从 Go 调用到 C 的次数
2/cpu/classes/gc/mark/assist:cpu-seconds预计执行 GC 程序所花费的 CPU 总时长,以协助 GC 并防止其落后于应用程序
3/cpu/classes/gc/mark/dedicated:cpu-seconds在专门用于执行 GC 任务的 CPU 处理器(根据 GOMAXPROCS 的定义)上执行 GC 任务预计需要花费的 CPU 总时长
4/cpu/classes/gc/mark/idle:cpu-seconds在空闲 CPU 资源上执行 GC 任务所花费的 CPU 总时间
5/cpu/classes/gc/pause:cpu-secondsGC 暂停应用程序预计所花费的 CPU 总时长
6/gc/cycles/automatic:gc-cyclesGo Runtime 程序已完成的 GC 循环次数。
7/gc/gogc:percent用户配置的堆大小目标百分比
8/gc/heap/allocs:objects应用程序触发的堆分配累计计数
9/memory/classes/heap/free:bytesGo Runtime 对物理内存的可用空间大小的预估(完全空闲并可返回底层系统但尚未返回的内存)
10/sched/gomaxprocs:threads当前 runtime.GOMAXPROCS 的值,或是可以同时执行用户级 Go 代码的操作系统线程数。

对于完整指标有兴趣的可以查看:

https://pkg.go.dev/runtime/metrics#hdr-Supported_metrics

更多的 metrics 指标

最近在 Go 社区中有同学发起了一项讨论《metrics for the standard library》,希望探讨和在其他标准库中添加更多的 metrics 指标,提供更多的可观察性。

比较多同学期望的是网络、延迟类的指标,针对性能、错误等。如下几种场景:

net/http 服务端:

  • 处理延迟。
  • 请求/响应体大小。
  • 恐慌(panic)、恢复(recover)。
  • 错误/警告(触发 net/http.Server.ErrorLog 的所有内容)
  • 被拒绝的无效请求。

net/http 客户端:

  • 调用延迟。
  • 请求/响应体大小
  • 连接池相关。

database/sql 客户端:

  • 查询延迟。
  • 响应大小。
  • 连接池相关。

net 网络包相关:

  • 例如 TCP、UDP 等,对应的打开连接的数量、连接状态(空闲、激活、关闭)、连接错误等。
  • 例如 TLS,在握手阶段相关的指标,握手持续时间、握手失败计数等。

总结

整体上会发现大家对于 Go 标准库的指标诉求,更多的趋向于底层包。因为无论你用的是什么开源仓库,其绝大部分都是基于上述提到的包。

在现阶段,如果自己的 Go 业务应用程序去记录这些指标,就需要再封装一层,每一个包,例如:ORM 就需要去实现一遍插件等。

而第三方库实现不会把 metrics 这类非核心功能直接加入初始化实现中。因此官方标准库对 metrics 的支持是非常有必要的。

至少这样就不用每个团队都搞一遍 net/http、database/sql 等的延迟调用指标的配置和设置了。

以上就是Go 标准库增加metrics指标探讨分析的详细内容,更多关于Go 标准库metrics指标的资料请关注脚本之家其它相关文章!

相关文章

  • 用go语言实现WebAssembly数据加密的示例讲解

    用go语言实现WebAssembly数据加密的示例讲解

    在Web开发中,有时候为了提升安全性需要对数据进行加密,由于js代码相对比较易读,直接在js中做加密安全性较低,而WebAssembly代码不如js易读,本文提供一个用go语言实现的WebAssembly数据加密示例,需要的朋友可以参考下
    2024-03-03
  • Golang学习之无类型常量详解

    Golang学习之无类型常量详解

    对于无类型常量,可能大家是第一次听说,但我们每天都在用,每天都有无数潜在的坑被埋下。本文就来和大家聊聊它的相关注意事项吧,希望对大家有所帮助
    2023-03-03
  • 详解Golang中创建error的方式总结与应用场景

    详解Golang中创建error的方式总结与应用场景

    Golang中创建error的方式包括errors.New、fmt.Errorf、自定义实现了error接口的类型等,本文主要为大家介绍了这些方式的具体应用场景,需要的可以参考一下
    2023-07-07
  • 分布式架构在Go语言网站的应用

    分布式架构在Go语言网站的应用

    分布式架构是目前应对高流量、高并发的重要解决方案,分布式架构的核心思想是分而治之,将单台服务器的资源划分为多台服务器进行协同完成,分布式架构应用于Go语言网站中既能提升服务速度,又能降低了服务器宕机的风险
    2024-01-01
  • golang 阻止主goroutine退出的操作

    golang 阻止主goroutine退出的操作

    这篇文章主要介绍了golang 阻止主goroutine退出的操作方式,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧
    2021-04-04
  • go语言实现顺序存储的栈

    go语言实现顺序存储的栈

    这篇文章主要介绍了go语言实现顺序存储的栈,实例分析了Go语言实现顺序存储的栈的原理与各种常见的操作技巧,需要的朋友可以参考下
    2015-03-03
  • 一文带你探索Golang计时器的奥秘

    一文带你探索Golang计时器的奥秘

    在 Golang 中,计时器(timer)是一种常见的工具,用于定期执行某个任务或者在指定时间后触发某个事件。本文将深入探讨 Golang 计时器的实现原理和使用方法,帮助大家更好地理解和应用计时器
    2023-05-05
  • Golang反射获取结构体的值和修改值的代码示例

    Golang反射获取结构体的值和修改值的代码示例

    这篇文章主要给大家介绍了golang反射获取结构体的值和修改值的代码示例及演示效果,对我们的学习或工作有一定的帮助,感兴趣的同学可以参考阅读本文
    2023-08-08
  • Go语言中函数的使用方法详解

    Go语言中函数的使用方法详解

    这篇文章主要为大家详细介绍了Go语言中函数的使用方法的相关资料,文中的示例代码讲解详细,对我们学习Go语言有一定的帮助,感兴趣的可以了解一下
    2023-04-04
  • Golang开发命令行之flag包的使用方法

    Golang开发命令行之flag包的使用方法

    这篇文章主要介绍Golang开发命令行及flag包的使用方法,日常命令行操作,相对应的众多命令行工具是提高生产力的必备工具,本文围绕该内容展开话题,需要的朋友可以参考一下
    2021-10-10

最新评论