快捷導(dǎo)航

Go語(yǔ)言如何實(shí)現(xiàn)Benchmark函數(shù)

更新時(shí)間：2024年12月25日 11:09:23 作者：AnthonyDong

go想要在main函數(shù)中測(cè)試benchmark會(huì)麻煩一些,所以這篇文章主要為大家介紹了如何實(shí)現(xiàn)了一個(gè)簡(jiǎn)單的且沒(méi)有開(kāi)銷(xiāo)的benchmark函數(shù),希望對(duì)大家有所幫助

背景

go 必須要 test 才能跑benchmark，導(dǎo)致一些情況下想要在main函數(shù)中測(cè)試benchmark會(huì)麻煩一些，因此我實(shí)現(xiàn)了一個(gè)簡(jiǎn)單的且沒(méi)有開(kāi)銷(xiāo)的benchmark函數(shù)，方便使用！其次也方便大家學(xué)習(xí)下如何實(shí)現(xiàn)一個(gè)零開(kāi)銷(xiāo)的benchmark框架!

benchamrk 實(shí)現(xiàn)

對(duì)于有timeout的benchamrk，每次都去比較 time.Before(timeout) 開(kāi)銷(xiāo)非常的大，而且 benchmark 的對(duì)外函數(shù)也不能是一個(gè)空函數(shù)一定要帶 count ，因?yàn)楹瘮?shù)調(diào)用大概會(huì)劣化 ns 級(jí)別！

所以一般的benchmark算法都是梯度benchmark，即 1，10，100，1000，10000，100000，1000000 ... 的數(shù)量級(jí)去benchmark，好處就是避免了大量的time.Since 計(jì)算開(kāi)銷(xiāo)，因?yàn)閠ime.Since單次在 30ns 左右（Linux環(huán)境下），開(kāi)銷(xiāo)非常大的！

package pprof

import (
    "fmt"
    "sync"
    "sync/atomic"
    "time"
)

func ParallelBenchmark(name string, thread int, duration time.Duration, execute func(count int)) {
    wg := sync.WaitGroup{}
    wg.Add(thread)
    totalCount := uint64(0)
    totalSpend := uint64(0)
    for i := 0; i < thread; i++ {
       go func() {
          defer wg.Done()
          spend, count := Benchmark(duration, execute)
          atomic.AddUint64(&totalSpend, uint64(spend))
          atomic.AddUint64(&totalCount, uint64(count))
       }()
    }
    wg.Wait()
    fmt.Printf("name=%s thread=%d duration=%s total=%d avg=%s\n", name, thread, duration, totalCount, Avg(time.Duration(totalSpend), int(totalCount)))
}

func Avg(spend time.Duration, count int) string {
    avg := float64(spend) / float64(count)
    if avg > 100 {
       return time.Duration(avg).String()
    }
    return fmt.Sprintf("%.4fns", avg)
}

func Benchmark(duration time.Duration, bench func(count int)) (time.Duration, int) {
    const maxTotalCount = 1000000000 // 10E
    count := 1
    totalSpend := time.Duration(0)
    totalCount := 0
    for {
       start := time.Now()
       bench(count)
       spend := time.Since(start)

       totalSpend = totalSpend + spend
       totalCount = totalCount + count

       if totalCount >= maxTotalCount {
          break
       }
       subSpend := duration - totalSpend
       if subSpend <= 0 {
          break
       }
       count = totalCount*10 - totalCount
       if subCount := int(float64(subSpend) / (float64(totalSpend) / float64(totalCount))); count > subCount {
          count = subCount
       }
    }
    return totalSpend, totalCount
}

profile 實(shí)現(xiàn)

package pprof

import (
    "net/http"
    _ "net/http/pprof"
    "os"
    "runtime"
    "runtime/pprof"
)

// InitPProf
// go InitPProf()
func InitPProf() {
    err := http.ListenAndServe(":12345", http.DefaultServeMux)
    if err != nil {
       panic(err)
    }
}

func StartCPUProfile(fileName string) (stop func()) {
    f, err := os.Create(fileName)
    if err != nil {
       panic(err)
    }
    if err := pprof.StartCPUProfile(f); err != nil {
       if err := f.Close(); err != nil {
          panic(err)
       }
       panic(err)
    }
    return func() {
       pprof.StopCPUProfile()
       if err := f.Close(); err != nil {
          panic(err)
       }
    }
}

func StartMemProfile(fileName string) (stop func()) {
    f, err := os.Create(fileName)
    if err != nil {
       panic(err)
    }
    return func() {
       defer func() {
          if err := f.Close(); err != nil {
             panic(err)
          }
       }()
       runtime.GC() // get up-to-date statistics
       if err := pprof.WriteHeapProfile(f); err != nil {
          panic(err)
       }
    }
}

例子

package main

import (
	"github.com/anthony-dong/golang/pkg/pprof"
	"sync"
	"time"
)

func main() {
	// 記錄 cup pprof
	//stop := pprof.StartCPUProfile("cpu.out")
	//defer stop()

	// 并發(fā)測(cè)試 sync map的性能
	mm := sync.Map{}
	pprof.ParallelBenchmark("test1", 64, time.Second, func(count int) {
		for i := 0; i < count; i++ {
			mm.Store(i%10000, 1)
		}
	})
	// name=test1 thread=32 duration=1s total=6708009 avg=4.772μs
	// name=test1 thread=64 duration=1s total=6883456 avg=9.3μs
}

到此這篇關(guān)于Go語(yǔ)言如何實(shí)現(xiàn)Benchmark函數(shù)的文章就介紹到這了,更多相關(guān)Go Benchmark內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！

您可能感興趣的文章: