首页 > 其他分享 > Go语言上手(三) | 青训营笔记

Go语言上手(三) | 青训营笔记

时间:2023-04-23 14:33:40浏览次数:38  
标签:pprof 100% practice 笔记 go animal 青训营 Go 0%

高质量编程简介及编码规范

高质量:

  • 各种边界条件考虑完备

  • 异常情况处理,稳定性

  • 易读易维护

编程原则

  • 简单性

  • 可读性

  • 生产力

编码规范

公共符号始终要注释

例外:实现接口的方法不需要注释

格式化

使用gofmt(官方工具)自动格式化

注释

  • 代码作用(适合公共符号)

  • 代码如何实现 (适合注释实现过程)

  • 代码实现的原因(适合解释代码的外部因素和提供额外的上下文)

  • 代码什么情况下出错(适合代码的限制条件)

公共符号始终要注释·包中声明的每个公共的符号: 变量、常量、函数以及结构都需要添加注释 .任何既不明显也不简短的公 共功能必须予以注释 无论长度或复杂程度如何, 对库中的任何函数都必须进行注释

命名规范

变量

缩略词全大写,但当其位于变量开头且不需要导出时,使用全小写

  • 例如使用ServeHTTP而不是ServeHttp

  • 使用XMLHTTPRequest或者xmlHTTPRequest

  • 变量距离其被使用的地方越远,则需要携带越多的上下文信息

  • 全局变量在其名字中需要更多的上下文信息,使得在不同地方可以轻易辨认出其含义

函数

函数名不携带包名的上下文信息,因为包名和函数名总是成对出现的·函数名尽量简短 当名为foo的包某个函数返回类型Foo时,可以省略类型信息而不导致歧义 当名为foo的包某个函数返回类型T时(T并不是Foo),可以在函数名中加入类型信息

package

  • 只由小写字母组成。不包含大写字母和下划线等字符·

  • 简短并包含一定的上下文信息。例如schema、task 等·

  • 不要与标准库同名。例如不要使用sync或者strings

以下规则尽量满足,以标准库包名为例

  • 不使用常用变量名作为包名。例如使用bufio而不是buf·使用单数而不是复数。例如使用encoding而不是encodings

  • 谨慎地使用缩写。例如使用fmt 在不破坏上下文的情况下比 format 更加简短

控制流程

避免嵌套

尽量保存为最小缩进

错误处理

简单错误

  • 简单的错误指的是仅出现一次的错误,且在其他地方不需要捕获该错误

  • 优先使用errors.New来创建匿名变量来直接表示简单错误

  • 如果有格式化的需求,使用fmt.Errorf

错误的Wrap和 Unwrap

·错误的Wrap 实际上是提供了一个error嵌套另一个error的能力,从而生成一个error的跟踪链 ·在 fmt.Errorf中使用:%w关键字来将一个错误关联至 错误链中

错误判定

  • 判定一个错误是否为特定错误,使用errors.Is

  • 不同于使用==,使用该方法可以判定错误链上的所有错误是否含有特定的错误

panic

  • 不建议在业务代码中使用panic

  • ·调用函数不包含recover会造成程序崩溃·若问题可以被屏蔽或解决,建议使用error代替panic

  • 当程序启动阶段发生不可逆转的错误时,可以在init 或 main函数中使用panic

性能优化

benchmark工具

 

slice

提前指定大小

在大切片上创建小切片,使用copy代替

string

使用strings.builder 和java类似

空结构体

使用空结构体struct{}实列不占用空间

map

map 预分配内存分析

  • 不断向map中添加元素的操作会触发map的扩容·

  • 提前分配好空间可以减少内存拷贝和Rehash 的消耗·

  • 建议根据实际需求提前预估好需要的空间

使用atomic 包

锁的实现是通过操作系统来实现,属于系统调用.atomic 操作是通过硬件实现,

效率比锁高sync.Mutex应该用来保护一段逻辑,不仅仅用于保护一个变量。

对于非数值操作,可以使用atomic.Value,能承载一个interface}

实战

直接拉取仓库

wolfogre/go-pprof-practice: go pprof practice. (github.com)

分析的博客:

golang pprof 实战 | Wolfogre's Blog

性能分析工具 pprof

项目目录

 

没有外部依赖,直接运行即可

保持程序运行,打开浏览器访问 http://localhost:6060/debug/pprof/,可以看到如下页面:

 

页面上展示了可用的程序运行采样数据,分别有:

类型描述备注
allocs 内存分配情况的采样信息 可以用浏览器打开,但可读性不高
blocks 阻塞操作情况的采样信息 可以用浏览器打开,但可读性不高
cmdline 显示程序启动命令及参数 可以用浏览器打开,这里会显示 ./go-pprof-practice
goroutine 当前所有协程的堆栈信息 可以用浏览器打开,但可读性不高
heap 堆上内存使用情况的采样信息 可以用浏览器打开,但可读性不高
mutex 锁争用情况的采样信息 可以用浏览器打开,但可读性不高
profile CPU 占用情况的采样信息 浏览器打开会下载文件
threadcreate 系统线程创建情况的采样信息 可以用浏览器打开,但可读性不高
trace 程序运行跟踪信息 浏览器打开会下载文件,本文不涉及,可另行参阅《深入浅出 Go trace》

 

命令行

go tool pprof http://localhost:6060/debug/pprof/profile

topN 查看占用最多的函数

(pprof) top
Showing nodes accounting for 8.91s, 98.67% of 9.03s total
Dropped 35 nodes (cum <= 0.05s)
    flat flat%   sum%       cum   cum%
    8.91s 98.67% 98.67%      8.93s 98.89% github.com/wolfogre/go-pprof-practice/animal/felidae/tiger.(*Tiger).Eat
        0     0% 98.67%      8.93s 98.89% github.com/wolfogre/go-pprof-practice/animal/felidae/tiger.(*Tiger).Live
        0     0% 98.67%      8.97s 99.34% main.main
        0     0% 98.67%      8.97s 99.34% runtime.main
        0     0% 98.67%      0.05s  0.55% runtime.systemstack

flat=Cum 函数中没有调用其他函数

flat=0 函数中只有其他函数的调用

输入 list Eat,查看问题具体在代码的哪一个位置:根据指定的正则表达式查找

(pprof) list Eat 
Total: 9.03s
ROUTINE ======================== github.com/wolfogre/go-pprof-practice/animal/canidae/dog.(*Dog).Eat in H:\go-pprof-practice\animal\canidae\dog\dog.go
        0       10ms (flat, cum)  0.11% of Total
        .         .     26:   d.Pee()
        .         .     27:   d.Run()
        .         .     28:   d.Howl()
        .         .     29:}
        .         .     30:func (d *Dog) Eat() {
        .       10ms     31:   log.Println(d.Name(), "eat")
        .         .     32:}
        .         .     33:
        .         .     34:func (d *Dog) Drink() {
        .         .     35:   log.Println(d.Name(), "drink")
        .         .     36:}
ROUTINE ======================== github.com/wolfogre/go-pprof-practice/animal/felidae/tiger.(*Tiger).Eat in H:\go-pprof-practice\animal\felidae\tiger\tiger.go
    8.91s      8.93s (flat, cum) 98.89% of Total
        .         .     26:无效的循环
        .         .     27:*/
        .         .     28:func (t *Tiger) Eat() {
        .         .     29:   log.Println(t.Name(), "eat")
        .         .     30:   loop := 10000000000
    8.91s      8.93s     31:   for i := 0; i < loop; i++ {
        .         .     32:           // do nothing
        .         .     33:   }
        .         .     34:}
        .         .     35:
        .         .     36:func (t *Tiger) Drink() {

web 调用关系可视化

可以访问 graphviz 官网寻找适合自己操作系统的安装方法

调查内存

go tool pprof http://localhost:6060/debug/pprof/heap

top

(pprof) top
Showing nodes accounting for 1.20GB, 100% of 1.20GB total
Dropped 4 nodes (cum <= 0.01GB)
    flat flat%   sum%       cum   cum%
   1.20GB   100%   100%     1.20GB   100% github.com/wolfogre/go-pprof-practice/animal/muridae/mouse.(*Mouse).Steal
        0     0%   100%     1.20GB   100% github.com/wolfogre/go-pprof-practice/animal/muridae/mouse.(*Mouse).Live
        0     0%   100%     1.20GB   100% main.main
        0     0%   100%     1.20GB   100% runtime.main

查看到占用1G多的内存

内存回收

go tool pprof http://localhost:6060/debug/pprof/allocs

top

(pprof) top
Showing nodes accounting for 592MB, 99.75% of 593.50MB total
Dropped 16 nodes (cum <= 2.97MB)
    flat flat%   sum%       cum   cum%
    592MB 99.75% 99.75%     592MB 99.75% github.com/wolfogre/go-pprof-practice/animal/canidae/dog.(*Dog).Run (inline)
        0     0% 99.75%     592MB 99.75% github.com/wolfogre/go-pprof-practice/animal/canidae/dog.(*Dog).Live
        0     0% 99.75%     592MB 99.75% main.main
        0     0% 99.75%   592.50MB 99.83% runtime.main

可以看到 github.com/wolfogre/go-pprof-practice/animal/canidae/dog.(*Dog).Run 会进行无意义的内存申请,而这个函数又会被频繁调用,这才导致程序不停地进行 GC:

func (d *Dog) Run() {
log.Println(d.Name(), "run")
_ = make([]byte, 16 * constant.Mi)
}

排查协程泄露

go tool pprof http://localhost:6060/debug/pprof/goroutine
(pprof) top
Showing nodes accounting for 103, 99.04% of 104 total
Showing top 10 nodes out of 33
flat flat% sum% cum cum%
102 98.08% 98.08% 102 98.08% runtime.gopark
1 0.96% 99.04% 1 0.96% runtime.goroutineProfileWithLabels
0 0% 99.04% 100 96.15% github.com/wolfogre/go-pprof-practice/animal/canidae/wolf.(*Wolf).Drink.func1
0 0% 99.04% 1 0.96% github.com/wolfogre/go-pprof-practice/animal/felidae/cat.(*Cat).Live
0 0% 99.04% 1 0.96% github.com/wolfogre/go-pprof-practice/animal/felidae/cat.(*Cat).Pee
0 0% 99.04% 1 0.96% internal/poll.(*FD).Accept
0 0% 99.04% 1 0.96% internal/poll.(*FD).acceptOne
0 0% 99.04% 1 0.96% internal/poll.(*pollDesc).wait
0 0% 99.04% 1 0.96% internal/poll.execIO

排查锁的争用

go tool pprof http://localhost:6060/debug/pprof/mutex
(pprof) top
Showing nodes accounting for 126.40s, 100% of 126.40s total
flat flat% sum% cum cum%
126.40s 100% 100% 126.40s 100% sync.(*Mutex).Unlock (inline)
0 0% 100% 126.40s 100% github.com/wolfogre/go-pprof-practice/animal/canidae/wolf.(*Wolf).Howl.func1
func (w *Wolf) Howl() {
log.Println(w.Name(), "howl")

m := &sync.Mutex{}
m.Lock()
go func() {
time.Sleep(time.Second)
m.Unlock()
}()
m.Lock()
}

可以看到,这个锁由主协程 Lock,并启动子协程去 Unlock,主协程会阻塞在第二次 Lock 这儿等待子协程完成任务,但由于子协程足足睡眠了一秒,导致主协程等待这个锁释放足足等了一秒钟。

标签:pprof,100%,practice,笔记,go,animal,青训营,Go,0%
From: https://www.cnblogs.com/WenTesla/p/17346473.html

相关文章

  • JS学习笔记
    js中有几种数据类型8种\(number\)、\(string\)、\(null\)、\(undefined\)、\(boolean\)、\(Symbol\)、\(object\)、\(BigInt\).ArrayFunction的本质也是Object前5种是基本数据类型number,string,null、undefined、boolean后面三种是引用数据类型Symbol、object、BigInt.......
  • 【RT-Thread内核入门指南】P1-10学习笔记
    1、启动线程使用apirt_err_trt_thread_startup(rt_thread_tthread)启动线程启动线程并不是立刻执行线程,而是将其分配到就绪队列2、线程切换状态......
  • 读书笔记 程序员修炼之道
    我们看到过整洁、运行良好的系统,一旦窗户开始破裂,就相当迅速的恶化;不要留着破窗户不修;发现一个bug就修复一个,如果没有足够的时间进行恰当的修理,就用木板先订起来;或许你可以先把代码注释起来,或是显示“未实现”的消息;采取某种行动防止进一步的损坏,并说明情形在你的控制之下;投资知......
  • 基于client-go实现pod 交互式terminal
    基于client-go实现pod交互式terminal后端实现逻辑(golang)packagemainimport( "errors" "fmt" "github.com/gin-gonic/gin" "github.com/gorilla/websocket" corev1"k8s.io/api/core/v1" "k8s.io/client-go/kubernet......
  • Go语言入门10(异常处理)
    异常处理panic异常处理​ 如果出现了panic异常,那么会停止当前函数的运行,然后会找recover()方法,如果没有的话,就会报错退出程序,如果有就会执行recover的方法体中的方法​ 我们可以使用defer延迟处理函数来捕获panic异常,用recover()来从错误场景中恢复,必须的在defer修饰的方法中......
  • Django全栈进阶之路1 Django4下载与安装
    python下载安装:下载网址:https://www.python.org/downloads/ 安装方法:https://www.cnblogs.com/beichengshiqiao/p/16153586.html新版的python一般无需配置环境,在安装的时候勾选带有AddPython3.10toPATH的选项即可,如果需要手动配置的,参考:https://www.cnblogs.com/beicheng......
  • JVM调优笔记(一)--Nacos GC引发的服务批量下线问题
    故障背景线上批量发服务下线的告警邮件,偶发nacos连接超时。采用了springbootadmin(以下称sba)进行服务监控。原因分析因为sba服务是基于nacos对其它服务进行监控,所以遇到这个问题,第一怀疑对象是nacos发生问题,但不清楚具体是什么问题。由于服务过一段事件会恢复,所以nacos肯定是......
  • 基于django+ansible+webssh运维自动化管理系统
    基于django+ansible+webssh运维自动化管理系统 前言最初开发这个基于Djangoansible运维自动化管理系统的想法其实从大学时候就已经有了,但是苦于技术原因和没有线上环境原因一直没有开发,现在有了这个技术和环境之后开始着手开发了这个项目,项目难点在于你要理解如何设计数据库,......
  • Unity框架:JKFrame2.0学习笔记(十)——自动生成资源引用代码(2)
    前言上一篇记录了自动生成资源引用代码的内部实现,主要是针对addressable的资源系统的,为了在加载时不会因为名字写错,加载错,也更加方便的使用addressable加载,这一篇记录下如何使用。如何使用之前看过,在编辑器中添加了工具按钮我们可以在addressable的groups面板上添加几个测试资源我......
  • Effective Modern C++ 学习笔记
    闲话今天是2023年4月23日,俺开始正式学习面试相关内容了。打算先从EffectiveModernC++这本书开始学起,作为日后代码风格、习惯的指导。不过俺没有一起学习的小伙伴,qwq。与ICPC切割之后,内心都轻松了许多。小醉一宿之后还是十分愉悦的。欢迎加入C++学习群:https://j......