golang安装,常用框架安装,记忆点

0.安装

虚拟机扩容

【Linux干货分享】LVM快速扩容虚拟机磁盘_哔哩哔哩_bilibili

newvim

安装

sudo add-apt-repository ppa:neovim-ppa/stable
sudo apt-get update
sudo apt-get install -y neovim
最强Vim新手指南,手把手教你打造只属于自己的代码编辑器!_哔哩哔哩_bilibili
linux 文本三剑客

【比刷剧还爽 】B站唯一讲的最好的Linux三剑客教程,深入理解grep、sed、awk!_哔哩哔哩_bilibili

安装go

All releases - The Go Programming Language

Download and install - The Go Programming Language

设置为GO111MODULE=on
go mod init testgo env -w GO111MODULE=on
go env -w GOPROXY=https://goproxy.cn,directgo env

如果已经有代码,那么就用下面的,能够让go.mod根据代码自动get库

go mod tidy
安装并配置mysql,能够在bench和服务器访问

ubuntu22.04安装mysql8并授权远程登陆_哔哩哔哩_bilibili

安装配置redis
wget http://download.redis.io/releases/redis-6.2.5.tar.gz
tar -zxvf redis-6.2.5.tar.gz
cd redis-6.2.5
make
cd deps
make hiredis linenoise lua jemalloc
cd hiredis
sudo make install
cd ../lua
sudo make install
cd ../..
sudo make install
//后台运行
vi redis.conf
//修改
stop-writes-on-bgsave-error = no
daemonize yescd src
redis-server ../redis.conf
安装gin

有关模板和gin模板

lesson01_内容介绍_哔哩哔哩_bilibili

go get -u github.com/gin-gonic/gin

安装gorm

https://www.bilibili.com/video/BV1xg411t7RZ/?spm_id_from=333.337.search-card.all.click&vd_source=3116d28903cf9e9d76cd88eaef0fda0f

go get -u gorm.io/gorm

安装viper,用来解析配置文件yaml

go get -u github.com/spf13/viper

logrus,用来记录日志

go get -u github.com/sirupsen/logrus

swaggo,自动api文档

go get -u github.com/go-openapi/swag

govalidator,提供对文本格式校验

go get -u github.com/asaskevich/govalidator

安装protobuf和grpc

grpc官网   Quick start | Go | gRPC

使用snap安装protobuf

sudo apt install snapdsudo snap install protobuf --classicgo install google.golang.org/protobuf/cmd/protoc-gen-go@latest
go install google.golang.org/grpc/cmd/protoc-gen-go-grpc@latestexport PATH="$PATH:$(go env GOPATH)/bin"source $HOME/.profile

网络相关:

1. GO HTTP

Golang http 标准库底层原理解析_哔哩哔哩_bilibili

2. Websocket,长轮询

websocket是什么?和HTTP是什么区别?长轮询是什么?服务器推是什么?_哔哩哔哩_bilibili

数据结构和其他

1.iota

        iota在const变量中使用,用来初始化枚举类,初始值为0

numbers := []int{1, 2, 3, 4, 5} // 创建一个长度为5的切片

const (BEIJING = iota+1SHANGHAI SHENZHEN 
)

2.defer

        类似于c++的析构函数,会在函数结束时调用被修饰的函数,多个defer会按照栈的方式调用,即先定义的后调用。会先执行return后defer

3.slice

        切片,在函数传参时如果传入切片,那么会是引用传递

下面,数组大小为5,申请空间为10,和c++vector一样

numbers := make([]int, 5, 10) // 创建一个长度为5的切片

直接初始化:

numbers := []int{1, 2, 3, 4, 5} // 创建一个长度为5的切片
numbers = append(numbers, 4, 5) // numbers 现在是 [1, 2, 3, 4, 5]

如果,用make后再append,那么会在5后面插入,而不是10后面

删除。注意,[:]新生成的数组只是在原数组上加了两个新的范围指针,没有复制新的内存

这里把后面的数据追加到0号数据,这样会删除0号,其中。。。用来展开

numbers := []int{1, 2, 3, 4, 5}
if len(numbers) > 0 {numbers = append(numbers[:0], numbers[1:]...)
}
扩容,一共四种情况

4.interface

        类似于类中的函数,不同的interface可以相互继承,直接在interface中添加就行,用这种方式实现继承,一个struct必须要实现interface的所有方法才可以实现多态

        也可以做万能类型

5.万能指针

        类似于模板参数

    func myfunc(arg interface){//断言value,ok:=arg.(string)
if !ok{fmt.Println("not string")
}else{fmt.Println("string")
fmt.Println(value)
}
}

6.pair映射

        每个数据都用pair<type,value>

        这里,alltype万能类型会传递a的pair

var a string
a = "aasdad"
var allType interface{}
allType = a
func reflectNum(arg interface{}){inputType := reflect.TypeOf(arg)inputValue := reflect.ValueOf(arg)Println("type:",reflect.TypeOf(arg))Println("value:",reflect.ValueOf(arg))for i:=0;i<inputType.NumField();i++{field := inputType.Field(i)value := inputValue.Field(i).Interface()Printf("name:%s: %v=%v\n", field.name, field.type, value)}
}

7.init

每个包都会有默认的init函数,如果只想执行init,不想执行其他函数,那么用

import _ "xxx"

8.结构体标签和json

package main
import ("encoding/json""fmt"
)
type Movie struct{Title string `json:"title"`Year int `json:"year"`Price int `json:"rmb"`Actor []string `json:"actors"`
}func main(){movie := Movie{"喜剧之王", 2000, 10, []string{"xingye", "zhangbozhi"}}jsonStr, err:=json.Marshal(movie)if err!=nil{fmt.Println("json marshal error", err)return}// fmt.Printf("jsonStr = %s\n", jsonStr)mymovie := Movie{}err = json.Unmarshal(jsonStr, &mymovie)if err!=nil{fmt.Println("json unmarshal error", err)return}fmt.Printf("%v \n", mymovie)
}

9.GMP

解说Golang GMP 实现原理_哔哩哔哩_bilibili

一、复用线程

p为processor,为调度器。m为内核级线程,g为goroutine。

每一个p中,都有一个g0,可以称之为调度协程。而g必须要绑定p才能执行。

查找流程

每61次调度,会从全局队列调度一次。

否则,先找本地队列,调度失败则找全局队列,调度失败则找网络协程,调度失败则窃取其他p的一半goroutine(尝试4次,随机窃取,只要有一次成功窃取就停止)到本地p队列中。

即本地->全局->网络->窃取

每61次调度->全局->...

hand off机制

当用户主动让出p时,首先会把gouroutine的状态由running转换成runnable,之后goroutine和线程解绑,之后把goroutine放置到全局队列中。

gouroutine被动阻塞时,把goroutine的状态转换成waiting,之后和线程解绑。之后哪个p唤醒了gouroutine,则把它放在这个p的当前队列中。

当goroutine正常结束时,把状态换成dead,之后解绑,进行下一轮的调度。

可以看到,被动阻塞唤醒抢占成功率比主动让出唤醒抢占成功率要低。

抢占调度,当m进入阻塞时,会导致g长时间运行,而p无法自主完成解绑,需要外界调度器强制调度。当有非繁忙m时,则进行绑定,如果没有,则需要创建一个新的m

二、利用并行

三、抢占

以前的线程需要主动让出cpu,但是现在有了限制时间

四、全局G队列

当main gorotine结束时,子gorotine会立即结束

10.channel

用来协程之间的通信,本身可以让main go和子go同步,不会让main go提前结束

package main
import ("fmt"
)func main(){c :=make(chan int)go func(){defer fmt.Println("goprotine结束")fmt.Println("goroutine 正在运行。。。")c <- 666}()num := <-cfmt.Println(num)
}

defer fmt.Println("goprotine结束") 永远会在num := <-c之后执行

当缓存超出,那么会阻塞,等待其他go协程取出channel元素, 然后协程才会继续进行

当缓存为空,取数据也会阻塞

往已经关闭的channel发送数据会报panic错误

从已经关闭的channel读数据,需要看缓存中是否有数据,如果没有则报错,否则读取

对于nil channel,不管读写都会报错

func main(){c := make(chan int, 4)go func(){for i:=0; i< 4;i++{c<-i}close(c)}()for{if data,ok<-c;ok{fmt.Println(data)}else{break}}
}

可以简化为

for data:= range c{fmt.Println(data)}
select

会在case中寻找满足条件,哪个先满足选哪个,如果都不满则,则会走default,如果没有default,则阻塞

func ff(c, quit chan int){x,y :=1,1for{select{case c<-x:x = yy = x + ycase <-quit:fmt.Println("quit")returndefault:return}}
}
func main(){c:=make(chan int, 6)quit:=make(chan int)go func(){for i:=0;i<6;i++{fmt.Println(<-c)}quit<-0}()ff(c,quit)
}
 context

context_interface_哔哩哔哩_bilibili

数据结构

Done,可以看到,输入通道的是空结构体,所以只能用来发送信号

当context未终止时,Done()读取空channel,会阻塞。当context终止时,会关闭channel,Done()会读取到0值并终止阻塞。

用来进行传输数据,取消信号等

有context.Context 为interface,一个Context实例

context.Background() 创建一个父context,启动goroutine 

ctx.Done()   判断协程是否结束

使用withcancel创建。

可以看到,可以调用第二个返回值来取消context。

ctx,cancel := context.WithCancel(context.Context)取消一个协程 

cancel()会取消当前线程

ctx = context.WithValue(context.Context, string,string)        传入父context,值key,value,可以

在其他协程中使用。如果当前context没有找到key,则会在父context中循环查找

当有key相同时,,则会生成两个结点a,所以函数结果需要考虑当前context位置。但是不需要考虑并发写的问题,因为会生成多个结点

ctx.Value(key) 获得对应context的key的value

ctx,cancel := context.WithDeadline(context.Context,time.Now().Add(time.Second))        在一秒后自动删除协程 

ctx,cancel := context.WithTimeout(context.Context, time.Second)   在一秒后自动删除协程 

11.内存管理

页索引&heapArena_哔哩哔哩_bilibili

p为处理器,每个mcache都会有自己的一部分缓存,首先程序需要在mcache找是否有合适的缓存,这一部分没有锁。如果没有需要找mcentral,mcentral共有67个等级,每个等级的预留缓存大小也不相同,程序根据自己的大小,去mcentral寻找是否有合适的缓存,由于可能有多线程,所以需要加锁处理,但是锁粒度较小。如果没有,再去mheap找,这里锁粒度较大。如果还是没有,需要从操作系统申请更多缓存。

mcentral根据大小划分等级。

在mspan中加标签,确定哪些页被程序占用。

在 Go 语言的内存管理系统中,mspan 作为内存分配的基本单位,通常表示的是一个或多个连续的内存页(page)。然而,对于较小的内存请求,Go 语言采用了特殊的优化技术来减少内存浪费,这就是所谓的“小对象分配优化。所以可能会有内存碎片产生

nospan,写错了。

如果mspan中都是基础类型,那么最低位为0,如果只要有1个指针,那么最低位就会为1.只要最低位为1,就需要给整个mspan检查,看是否需要给指针数据释放内存

mcache内容,等级0为无内存上限,所以总共136种。

mcenctral内容。每一个mcentral对应一个mspan,同时把span分成空闲列表和满列表

在mheap中,会给所有的页加标签,如果为0则自由,如果为1则被mspan申请了。

由于在mheap中可能有很多内存,找出连续未使用的内存,使用基数树

有一个64位的pallocsum,首位不用,剩下的分为3个部分,分别是start,max和end,表示首次出现空闲页的mspan序号,连续空闲空间最大的mspan序号,以及最后出现空闲mspan的序号。图画错了,不是连续大小。和span分配位图取与来获得对应的数据

同时,给pallocsum进行分级,把位逐渐的细粒度化,最后一级的单位为512个页

P申请内存过程。P在小于16B为微对象,16B到32KB为小对象,大于32KB为大对象,对应mspan的0号等级,即直接在mheap找。

mcache的tiny allocator,以2B的倍数为单位

12.垃圾回收

并发三色标记_哔哩哔哩_bilibili

三色标记法

把自身存活并且所指向的结点也被标记的结点,变成黑色结点

把自身存活,但是指向结点没有被标记的结点,变成灰色结点

把未扫描的结点,加上白色结点

采用dijkstra算法

第一步,把根节点(包括全局变量,栈上局部变量)变黑,根节点指向的结点变灰,并从灰色结点逐步扫描

第二步,从灰色结点扫描,并把周围所有可以置成灰色的结点变灰

第三步,如果所有结点都变灰,那么结点变黑,如果有结点是白色,则对白色结点的引用

第四步,从第二步循环

第五步,如果有结点依旧是白色,则垃圾回收

并发三色标记法

在并发下,可能出现漏标的问题

也有可能出现多标的问题

混合写屏障机制

可以看出,漏标的原因有两点,一是黑色结点指向了白色结点,二是灰色对象删除了对白色对象的引用,导致白色结点不会被扫描,由此可以引出强弱三色不变式

强三色不变式:插入写屏障 

白色不能被黑色对象引用

做法为,如果黑色对象引用了一个白色对象,那么就把黑色对象变灰

弱三色不变式:删除写屏障

不会删除对白色对象的引用

做法为,如果一个白色对象被引用,那么就把白色对象变灰,并不会删除对这个对象的引用

为什么需要混合两者:

如果频繁的使用屏障调用函数,那么开销很大,因此屏障只会作用于非栈对象

那么,看看能否解决漏标和多标的问题:

13.map

map不能够并行的读写,或并行写,只能并行读

map采用桶数组。每一个桶有8个key-value pair。

可以说,map解决hash冲突的方式是拉链法和开放寻址法的结合。

对比:c++ map的扩容条件是hash因子达到0.75

map的数据结构:

包括两个map。其中,溢出桶用来存放hash桶溢出的数据,避免桶因扩容导致的频繁的再hash

14.sync.map

作为map的可并行版本,下面是数据结构

可以看到,相对于map,多了一个dirty map和锁,misses。

dirty map用来把读操作和写错做分开,从而减少因并行导致的加锁行为。

删除数据时,当删除read map数据,则把数据指针变成nil,称之为软删除态。当删除dirty 数据,则物理删除,为硬删除态。

在读数据时,如果在read map中读不到数据,则进入dirty map中读取,并且misses++,当misses达到阈值时,则把dirty map作为新read map,新dirty map暂时为空。

在写数据时,需要先查看read map是否有数据,因为可能是修改操作。当dirty map为nil时,且需要写入到dirty map,需要把read map复制dirty map,同时遍历read map,把非删除态数据复制,软删除态数据进行物理删除。

可以看到,如果频繁的把数据从dirty map复制到read map,那么sync.map效率不会很高。

具体来说,可以看到,当misses频繁增加,则会有很大性能影响。所以当有频繁读取新加数据时,会造成sync.map性能不如直接加锁的性能好。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.xdnf.cn/news/10103.html

如若内容造成侵权/违法违规/事实不符,请联系一条长河网进行投诉反馈,一经查实,立即删除!

相关文章

【Unity】Unity拖拽在Android设备有延迟和卡顿问题的解决

一、介绍 在制作Block类游戏时&#xff0c;其核心的逻辑就是拖拽方块放入到地图中&#xff0c;这里最先想到的就是Unity的拖拽接口IDragHandler,然后通过 IPointerDownHandler, IPointerUpHandler 这两个接口判断按下和松手&#xff0c;具体的实现逻辑就是下面 public void On…

云计算在esxi 主机上创建 4g磁盘,同时在此磁盘上部署linux

1 创建4g 磁盘 这个状态说明esxi 已经启动好 开启esxi 这个操作系统已经安装 这个在我们pc 上ping esxi 主机可以正常通信 这个是esxi 主机的界面 开始添加硬盘4g 重新登 在我们的esxi 主机上新增了8g的空间 很明显这是给我们 的磁盘空间装文件系统 这个很明显是格式化把文件…

关于圆周率-4

在这里总结一下&#xff0c;以上分析&#xff0c;都是基于“单位”的。计算圆周率的时候&#xff0c;我们考虑的是做一个单位来理解&#xff0c;而它的倍数则作为某种比例缩放来理解。同理欧拉函数&#xff0c;也是用弧长来作为单位的&#xff0c;其它弧长则是基于这个单位的比…

嘉吉携百余款产品与解决方案再度亮相进博会

第七届中国国际进口博览会&#xff08;下称“进博会”&#xff09;于11月5日至10日在上海国家会展中心举办。嘉吉连续第七年参与进博会&#xff0c;并以“新质绿动&#xff0c;共赢未来”为参展主题&#xff0c;携超过120款创新产品与解决方案&#xff0c;共赴进博之约。 今年嘉…

docker网络配置:bridge模式、host模式、container模式、none模式

docker网络模式选择 docker网络配置&#xff1a;bridge模式、host模式、container模式、none模式 - 熊仔其人 - 博客园 docker网络配置&#xff1a;bridge模式、host模式、container模式、none模式 在docker平台里有四种网络模式&#xff0c;今天继续分享一下它们的常用知识&a…

教材下载 3.2.5| 国家中小学智慧教育平台下载器,支持预览

教材下载是一款国家中小学智慧教育平台的下载器&#xff0c;绿色免安装&#xff0c;用户只需解压后双击exe文件即可使用。软件涵盖了小学、初中、高中以及特殊教育的教材内容&#xff0c;并支持选择不同的学科和版本。所有教材均支持在线预览&#xff0c;用户还可以下载PDF文件…

系统架构(01架构的特点,本质...)

目录 学习前言 一、软件架构简介 二、系统复杂性的来源与应对 三、大型网站的特点 四、大型网站架构目标 五、参考文献 学习前言 本节总结下架构相关的基础知识&#xff1a;概述&#xff0c;特点&#xff0c;目标&#xff0c;本质... 一、软件架构简介 所谓架构&#x…

飞凌嵌入式FET527N-C核心板现已适配Android 13

飞凌嵌入式FET527N-C核心板现已成功适配Android13&#xff0c;新系统的支持能够为用户提供更优质的使用体验。那么&#xff0c;运行Android13系统的FET527N-C核心板具有哪些突出的优势呢&#xff1f; 1、性能与兼容性提升 飞凌嵌入式FET527N-C核心板搭载了全志T527系列高性能处…

如何借助AI 来提高开发效率

前言 随着人工智能&#xff08;AI&#xff09;技术的快速发展&#xff0c;特别是大规模语言模型&#xff08;如 GPT 系列&#xff09;的崛起&#xff0c;软件开发领域正在经历一场革命。AI 大模型不仅在代码生成方面展现出强大的能力&#xff0c;还在测试、维护和创新等多个环…

C++ 高效率整型大数运算项目优化——内置类型存储与计算

C 高效率整型大数运算项目优化——内置类型存储与计算 一、前言二、优化设计分析类的设计 三、设计实现加法减法乘法对于 lint&#xff1a;对于 iint&#xff1a; 左移与右移左移右移 除法基本除法借用内置类型计算第一种情况第二种情况其他情况区间定位二分计数内置类型求近似…

Qt教程(007):资源文件添加

文章目录 7.1 创建新的项目7.2 添加资源文件7.2 设置页面7.1 创建新的项目 选择创建项目类型 输入项目名称 勾选UI界面 7.2 添加资源文件 选中项目名称,右键,选择【Add New】 添加资源文件 选择Qt Resource File文件

利用轻易云高效集成旺店通与金蝶云星空销售出库单

重跑数据—分销旺店通销售出库单>金蝶销售出库单&#xff08;正常销售&刷单&#xff09;(ok) 在企业信息化管理中&#xff0c;数据的准确性和及时性至关重要。本文将分享一个实际案例&#xff0c;展示如何通过轻易云数据集成平台&#xff0c;将旺店通企业奇门的数据高效…

CAN总线协议

电气特性 高速CAN&#xff1a;电压差为0V时表示逻辑1&#xff08;隐性电平&#xff09;&#xff0c;电压差为2V时表示逻辑0&#xff08;显性电平&#xff09;&#xff0c;速率&#xff1a;125Kbps&#xff5e;1Mbps。低速CAN&#xff1a;电压差为-1.5V时表示逻辑1&#xff08;…

Nginx简易配置将内网网站ssh转发到外网

声明&#xff1a;本内容仅供交流学习使用&#xff0c;部署网站上线还需要根据有关规定申请域名以及备案。 背景 在内网的服务器有一个运行的网页&#xff0c;现使用ssh反向代理&#xff0c;将它转发到外网的服务器。 但是外网的访问ip会被ssh反向代理拦截 所以使用Nginx进行…

决策树算法

决策树算法对数据进行分类的一种算法&#xff0c;根据数据的属性进行分类&#xff0c;例如对鸢尾花进行分类&#xff0c;可以根据花瓣大小进行分类。决策树可以使用信息熵和基尼指数进行数据分类。 信息熵&#xff1a;信息熵越低&#xff0c;样本不确定性越小&#xff0c;对应…

程序员学长 | 最强总结,机器学习中处理不平衡数据集的五种方法!!

本文来源公众号“程序员学长”&#xff0c;仅用于学术分享&#xff0c;侵权删&#xff0c;干货满满。 原文链接&#xff1a;最强总结&#xff0c;机器学习中处理不平衡数据集的五种方法&#xff01;&#xff01; 今天给大家分享处理不平衡数据集的常用方法。 在开始之前&…

08 Oracle数据库故障应对与恢复策略:全面掌握RMAN恢复方法

文章目录 Oracle数据库故障应对与恢复策略&#xff1a;全面掌握RMAN恢复方法一、故障场景及恢复策略1.1 实例失败1.2 介质故障1.3 数据丢失 二、RMAN恢复方法详解2.1 全库恢复2.2 增量恢复2.3 时间点恢复 三、实践与总结 Oracle数据库故障应对与恢复策略&#xff1a;全面掌握RM…

线段树专题(1)

线段树 线段树可维护的信息类型 线段树可以维护的信息类型&#xff0c;父范围上的某个信息&#xff0c;可以用O(1)的时间&#xff0c;从子范围的信息加工得到&#xff0c;例如求某个范围的最大最小值&#xff0c;给某个范围每个位置加相同的数字&#xff0c;进行求和。 0到2范…

Linux应用开发基础知识——tslib应用编程(十一)

文章目录 一、tslib是啥&#xff1f;二、tslib 框架分析三、交叉编译、测试 tslib3.1、交叉编译tslib&#xff08;1&#xff09;设置交叉编译工具链&#xff08;2&#xff09;进入tslib目录&#xff08;3&#xff09;安装工具链&#xff08;4&#xff09;确定工具链中头文件、库…

MySQL必会知识精华6(组合WHERE子句)

我们的目标是&#xff1a;按照这一套资料学习下来&#xff0c;大家可以完成数据库增删改查的实际操作。同时轻松应对面试或者笔试题中MySQL相关题目。 上篇文章我们先做一下数据库的where条件过滤的方法&#xff0c;都是单个条件的过滤。本篇文章主要介绍查询的组合WHERE子句的…