Golang使用Elasticsearch

創(chuàng)建es.go文件

在懷遠(yuǎn)等地區(qū)，都構(gòu)建了全面的區(qū)域性戰(zhàn)略布局，加強(qiáng)發(fā)展的系統(tǒng)性、市場前瞻性、產(chǎn)品創(chuàng)新能力，以專注、極致的服務(wù)理念，為客戶提供網(wǎng)站建設(shè)、成都網(wǎng)站設(shè)計(jì) 網(wǎng)站設(shè)計(jì)制作定制網(wǎng)站開發(fā),公司網(wǎng)站建設(shè),企業(yè)網(wǎng)站建設(shè),品牌網(wǎng)站建設(shè),全網(wǎng)整合營銷推廣,成都外貿(mào)網(wǎng)站建設(shè)公司,懷遠(yuǎn)網(wǎng)站建設(shè)費(fèi)用合理。

根據(jù)elasticsearch版本拉取對應(yīng)的go包： github.com/elastic/go-elasticsearch

API文檔：

Index 在索引中創(chuàng)建或更新文檔

索引不存在的情況下，會自動創(chuàng)建索引。

默認(rèn)的_type（類型）是_doc，下面是指定doc類型創(chuàng)建添加的。

Search 搜索

DeleteByQuery 通過匹配條件刪除文檔

Delete通過_id刪除文檔

Create 添加文檔（需要指定_id，_id已存在返回409）

Get 通過id獲取文檔

Update 通過_id更新文檔

UpdateByQuery 通過匹配條件更新文檔

golang map delete 會釋放value嗎

不會釋放value，僅僅標(biāo)記為不可用，但實(shí)際內(nèi)存還是在占用

package?main

import?(

"log"

"runtime"

)

var?intMap?map[int]int

var?cnt?=?8192

func?main()?{

printMemStats()

initMap()

runtime.GC()

printMemStats()

log.Println(len(intMap))

for?i?:=?0;?i??cnt;?i++?{

delete(intMap,?i)

}

log.Println(len(intMap))

runtime.GC()

printMemStats()

intMap?=?nil

runtime.GC()

printMemStats()

}

func?initMap()?{

intMap?=?make(map[int]int,?cnt)

for?i?:=?0;?i??cnt;?i++?{

intMap[i]?=?i

}

}

func?printMemStats()?{

var?m?runtime.MemStats

runtime.ReadMemStats(m)

log.Printf("Alloc?=?%v?TotalAlloc?=?%v?Sys?=?%v?NumGC?=?%v\n",?m.Alloc/1024,?m.TotalAlloc/1024,?m.Sys/1024,?m.NumGC)

}

GoLang -- Gin框架

? 何為框架：

框架一直是敏捷開發(fā)中的利器，能讓開發(fā)者很快的上手并做出應(yīng)用，甚至有的時(shí)候，脫離了框架，一些開發(fā)者都不會寫程序了。成長總不會一蹴而就，從寫出程序獲取成就感，再到精通框架，快速構(gòu)造應(yīng)用，當(dāng)這些方面都得心應(yīng)手的時(shí)候，可以嘗試改造一些框架，或是自己創(chuàng)造一個(gè)。

Gin是一個(gè)golang的微框架，封裝比較優(yōu)雅，API友好，源碼注釋比較明確，已經(jīng)發(fā)布了1.0版本。具有快速靈活，容錯(cuò)方便等特點(diǎn)。其實(shí)對于golang而言，web框架的依賴要遠(yuǎn)比Python，Java之類的要小。自身的net/http足夠簡單，性能也非常不錯(cuò)。框架更像是一些常用函數(shù)或者工具的集合。借助框架開發(fā)，不僅可以省去很多常用的封裝帶來的時(shí)間，也有助于團(tuán)隊(duì)的編碼風(fēng)格和形成規(guī)范。

（1）首先需要安裝，安裝比較簡單，使用go get即可

go get github.com/gin-gonic/gin

如果安裝失敗，直接去Github clone下來，放置到對應(yīng)的目錄即可。

（2）代碼中使用：

下面是一個(gè)使用Gin的簡單例子：

package main

import (

"github.com/gin-gonic/gin"

)

func main() {

router := gin.Default()

router.GET("/ping", func(c *gin.Context) {

c.JSON(200, gin.H{

"message": "pong",

})

})

router.Run(":8080") // listen and serve on 0.0.0.0:8080

}

簡單幾行代碼，就能實(shí)現(xiàn)一個(gè)web服務(wù)。使用gin的Default方法創(chuàng)建一個(gè)路由handler。然后通過HTTP方法綁定路由規(guī)則和路由函數(shù)。不同于net/http庫的路由函數(shù)，gin進(jìn)行了封裝，把request和response都封裝到gin.Context的上下文環(huán)境。最后是啟動路由的Run方法監(jiān)聽端口。麻雀雖小，五臟俱全。當(dāng)然，除了GET方法，gin也支持POST,PUT,DELETE,OPTION等常用的restful方法。

Gin可以很方便的支持各種HTTP請求方法以及返回各種類型的數(shù)據(jù)，詳情可以前往查看。

2.1 匹配參數(shù)

我們可以使用Gin框架快速的匹配參數(shù)，如下代碼所示：

冒號:加上一個(gè)參數(shù)名組成路由參數(shù)。可以使用c.Param的方法讀取其值。當(dāng)然這個(gè)值是字串string。諸如/user/rsj217，和/user/hello都可以匹配，而/user/和/user/rsj217/不會被匹配。

瀏覽器輸入以下測試：

返回結(jié)果為：

其中c.String是gin.Context下提供的方法，用來返回字符串。

其中c.Json是gin.Context下提供的方法，用來返回Json。

下面我們使用以下gin提供的Group函數(shù)，方便的為不同的API進(jìn)行分類。

我們創(chuàng)建了一個(gè)gin的默認(rèn)路由，并為其分配了一個(gè)組 v1，監(jiān)聽hello請求并將其路由到視圖函數(shù)HelloPage，最后綁定到 0.0.0.0:8000

C.JSON是Gin實(shí)現(xiàn)的返回json數(shù)據(jù)的內(nèi)置方法，包含了2個(gè)參數(shù)，狀態(tài)碼和返回的內(nèi)容。http.StatusOK代表返回狀態(tài)碼為200，正文為{"message": “welcome"}。

注：Gin還包含更多的返回方法如c.String, c.HTML, c.XML等，請自行了解。可以方便的返回HTML數(shù)據(jù)

我們在之前的組v1路由下新定義一個(gè)路由：

下面我們訪問

可以看到，通過c.Param(“key”)方法，Gin成功捕獲了url請求路徑中的參數(shù)。同理，gin也可以捕獲常規(guī)參數(shù)，如下代碼所示：

在瀏覽器輸入以下代碼：

通過c.Query(“key”)可以成功接收到url參數(shù)，c.DefaultQuery在參數(shù)不存在的情況下，會由其默認(rèn)值代替。

我們還可以為Gin定義一些默認(rèn)路由：

這時(shí)候，我們訪問一個(gè)不存在的頁面：

返回如下所示：

下面我們測試在Gin里面使用Post

在測試端輸入：

附帶發(fā)送的數(shù)據(jù)，測試即可。記住需要使用POST方法.

繼續(xù)修改，將PostHandler的函數(shù)修改如下

測試工具輸入：

發(fā)送的內(nèi)容輸入：

返回結(jié)果如下：

備注：此處需要指定Content-Type為application/x-www-form-urlencoded，否則識別不出來。

一定要選擇對應(yīng)的PUT或者DELETE方法。

Gin框架快速的創(chuàng)建路由

能夠方便的創(chuàng)建分組

支持url正則表達(dá)式

支持參數(shù)查找（c.Param c.Query c.PostForm）

請求方法精準(zhǔn)匹配

支持404處理

快速的返回給客戶端數(shù)據(jù)，常用的c.String c.JSON c.Data

go面試題整理（附帶部分自己的解答）

原文：【 】

如果有解答的不對的，麻煩各位在評論寫出來~

go的調(diào)度原理是基于GMP模型，G代表一個(gè)goroutine，不限制數(shù)量；M=machine，代表一個(gè)線程，最大1萬，所有G任務(wù)還是在M上執(zhí)行；P=processor代表一個(gè)處理器，每一個(gè)允許的M都會綁定一個(gè)G，默認(rèn)與邏輯CPU數(shù)量相等（通過runtime.GOMAXPROCS(runtime.NumCPU())設(shè)置）。

go調(diào)用過程：

可以能，也可以不能。

因?yàn)間o存在不能使用==判斷類型：map、slice，如果struct包含這些類型的字段，則不能比較。

這兩種類型也不能作為map的key。

類似棧操作，后進(jìn)先出。

因?yàn)間o的return是一個(gè)非原子性操作，比如語句 return i ，實(shí)際上分兩步進(jìn)行，即將i值存入棧中作為返回值，然后執(zhí)行跳轉(zhuǎn)，而defer的執(zhí)行時(shí)機(jī)正是跳轉(zhuǎn)前，所以說defer執(zhí)行時(shí)還是有機(jī)會操作返回值的。

select的case的表達(dá)式必須是一個(gè)channel類型，所有case都會被求值，求值順序自上而下，從左至右。如果多個(gè)case可以完成，則會隨機(jī)執(zhí)行一個(gè)case，如果有default分支，則執(zhí)行default分支語句。如果連default都沒有，則select語句會一直阻塞，直到至少有一個(gè)IO操作可以進(jìn)行。

break關(guān)鍵字可跳出select的執(zhí)行。

goroutine管理、信息傳遞。context的意思是上下文，在線程、協(xié)程中都有這個(gè)概念，它指的是程序單元的一個(gè)運(yùn)行狀態(tài)、現(xiàn)場、快照，包含。context在多個(gè)goroutine中是并發(fā)安全的。

應(yīng)用場景：

例子參考：

waitgroup

channel

len：切片的長度，訪問時(shí)間復(fù)雜度為O(1)，go的slice底層是對數(shù)組的引用。

cap：切片的容量，擴(kuò)容是以這個(gè)值為標(biāo)準(zhǔn)。默認(rèn)擴(kuò)容是2倍，當(dāng)達(dá)到1024的長度后，按1.25倍。

擴(kuò)容：每次擴(kuò)容slice底層都將先分配新的容量的內(nèi)存空間，再將老的數(shù)組拷貝到新的內(nèi)存空間，因?yàn)檫@個(gè)操作不是并發(fā)安全的。所以并發(fā)進(jìn)行append操作，讀到內(nèi)存中的老數(shù)組可能為同一個(gè)，最終導(dǎo)致append的數(shù)據(jù)丟失。

共享：slice的底層是對數(shù)組的引用，因此如果兩個(gè)切片引用了同一個(gè)數(shù)組片段，就會形成共享底層數(shù)組。當(dāng)sliec發(fā)生內(nèi)存的重新分配（如擴(kuò)容）時(shí)，會對共享進(jìn)行隔斷。詳細(xì)見下面例子：

make([]Type,len,cap)

map的底層是hash table(hmap類型)，對key值進(jìn)行了hash，并將結(jié)果的低八位用于確定key/value存在于哪個(gè)bucket（bmap類型）。再將高八位與bucket的tophash進(jìn)行依次比較，確定是否存在。出現(xiàn)hash沖撞時(shí)，會通過bucket的overflow指向另一個(gè)bucket，形成一個(gè)單向鏈表。每個(gè)bucket存儲8個(gè)鍵值對。

如果要實(shí)現(xiàn)map的順序讀取，需要使用一個(gè)slice來存儲map的key并按照順序進(jìn)行排序。

利用map，如果要求并發(fā)安全，就用sync.map

要注意下set中的delete函數(shù)需要使用 delete(map) 來實(shí)現(xiàn)，但是這個(gè)并不會釋放內(nèi)存，除非value也是一個(gè)子map。當(dāng)進(jìn)行多次delete后，可以使用make來重建map。

使用sync.Map來管理topic，用channel來做隊(duì)列。

參考：

多路歸并法:

pre class="vditor-reset" placeholder="" contenteditable="true" spellcheck="false"p data-block="0"(1)假設(shè)有K路a href=""數(shù)據(jù)流/a，流內(nèi)部是有序的，且流間同為升序或降序；

/pp data-block="0"(2)首先讀取每個(gè)流的第一個(gè)數(shù)，如果已經(jīng)EOF，pass；

/pp data-block="0"(3)將有效的k(k可能小于K)個(gè)數(shù)比較，選出最小的那路mink，輸出，讀取mink的下一個(gè)；

/pp data-block="0"(4)直到所有K路都EOF。

/p/pre

假設(shè)文件又1個(gè)G，內(nèi)存只有256M，無法將1個(gè)G的文件全部讀到內(nèi)存進(jìn)行排序。

第一步：

可以分為10段讀取，每段讀取100M的數(shù)據(jù)并排序好寫入硬盤。

假設(shè)寫入后的文件為A,B，C...10

第二步:

將A，B,C...10的第一個(gè)字符拿出來，對這10個(gè)字符進(jìn)行排序，并將結(jié)果寫入硬盤，同時(shí)記錄被寫入的字符的文件指針P。

第三步：

將剛剛排序好的9個(gè)字符再加上從指針P讀取到的P+1位數(shù)據(jù)進(jìn)行排序，并寫入硬盤。

重復(fù)二、三步驟。

go文件讀寫參考：

保證排序前兩個(gè)相等的數(shù)其在序列的前后位置順序和排序后它們兩個(gè)的前后位置順序相同的排序叫穩(wěn)定排序。

快速排序、希爾排序、堆排序、直接選擇排序不是穩(wěn)定的排序算法。

基數(shù)排序、冒泡排序、直接插入排序、折半插入排序、歸并排序是穩(wěn)定的排序算法。

參考：

head只請求頁面的首部。多用來判斷網(wǎng)頁是否被修改和超鏈接的有效性。

get請求頁面信息，并返回實(shí)例的主體。

參考:

401：未授權(quán)的訪問。

403: 拒絕訪問。

普通的http連接是客戶端連接上服務(wù)端，然后結(jié)束請求后，由客戶端或者服務(wù)端進(jìn)行http連接的關(guān)閉。下次再發(fā)送請求的時(shí)候，客戶端再發(fā)起一個(gè)連接，傳送數(shù)據(jù)，關(guān)閉連接。這么個(gè)流程反復(fù)。但是一旦客戶端發(fā)送connection:keep-alive頭給服務(wù)端，且服務(wù)端也接受這個(gè)keep-alive的話，兩邊對上暗號，這個(gè)連接就可以復(fù)用了，一個(gè)http處理完之后，另外一個(gè)http數(shù)據(jù)直接從這個(gè)連接走了。減少新建和斷開TCP連接的消耗。這個(gè)可以在Nginx設(shè)置，

這個(gè)keepalive_timout時(shí)間值意味著：一個(gè)http產(chǎn)生的tcp連接在傳送完最后一個(gè)響應(yīng)后，還需要hold住keepalive_timeout秒后，才開始關(guān)閉這個(gè)連接。

特別注意TCP層的keep alive和http不是一個(gè)意思。TCP的是指：tcp連接建立后，如果客戶端很長一段時(shí)間不發(fā)送消息，當(dāng)連接很久沒有收到報(bào)文，tcp會主動發(fā)送一個(gè)為空的報(bào)文（偵測包）給對方，如果對方收到了并且回復(fù)了，證明對方還在。如果對方?jīng)]有報(bào)文返回，重試多次之后則確認(rèn)連接丟失，斷開連接。

tcp的keep alive可通過

net.ipv4.tcp_keepalive_intvl = 75 // 當(dāng)探測沒有確認(rèn)時(shí)，重新發(fā)送探測的頻度。缺省是75秒。

net.ipv4.tcp_keepalive_probes = 9 //在認(rèn)定連接失效之前，發(fā)送多少個(gè)TCP的keepalive探測包。缺省值是9。這個(gè)值乘以tcp_keepalive_intvl之后決定了，一個(gè)連接發(fā)送了keepalive之后可以有多少時(shí)間沒有回應(yīng)

net.ipv4.tcp_keepalive_time = 7200 //當(dāng)keepalive起用的時(shí)候，TCP發(fā)送keepalive消息的頻度。缺省是2小時(shí)。一般設(shè)置為30分鐘1800

修改：

可以

tcp是面向連接的，upd是無連接狀態(tài)的。

udp相比tcp沒有建立連接的過程，所以更快，同時(shí)也更安全，不容易被攻擊。upd沒有阻塞控制，因此出現(xiàn)網(wǎng)絡(luò)阻塞不會使源主機(jī)的發(fā)送效率降低。upd支持一對多，多對多等，tcp是點(diǎn)對點(diǎn)傳輸。tcp首部開銷20字節(jié)，udp8字節(jié)。

udp使用場景：視頻通話、im聊天等。

time-wait表示客戶端等待服務(wù)端返回關(guān)閉信息的狀態(tài)，closed_wait表示服務(wù)端得知客戶端想要關(guān)閉連接，進(jìn)入半關(guān)閉狀態(tài)并返回一段TCP報(bào)文。

time-wait作用：

解決辦法：

close_wait:

被動關(guān)閉，通常是由于客戶端忘記關(guān)閉tcp連接導(dǎo)致。

根據(jù)業(yè)務(wù)來啊~

重要指標(biāo)是cardinality（不重復(fù)數(shù)量），這個(gè)數(shù)量/總行數(shù)如果過小（趨近于0）代表索引基本沒意義，比如sex性別這種。

另外查詢不要使用select *，根據(jù)select的條件+where條件做組合索引，盡量實(shí)現(xiàn)覆蓋索引，避免回表。

僵尸進(jìn)程：

即子進(jìn)程先于父進(jìn)程退出后，子進(jìn)程的PCB需要其父進(jìn)程釋放，但是父進(jìn)程并沒有釋放子進(jìn)程的PCB，這樣的子進(jìn)程就稱為僵尸進(jìn)程，僵尸進(jìn)程實(shí)際上是一個(gè)已經(jīng)死掉的進(jìn)程。

孤兒進(jìn)程：

一個(gè)父進(jìn)程退出，而它的一個(gè)或多個(gè)子進(jìn)程還在運(yùn)行，那么那些子進(jìn)程將成為孤兒進(jìn)程。孤兒進(jìn)程將被init進(jìn)程(進(jìn)程號為1)所收養(yǎng)，并由init進(jìn)程對它們完成狀態(tài)收集工作。

子進(jìn)程死亡需要父進(jìn)程來處理，那么意味著正常的進(jìn)程應(yīng)該是子進(jìn)程先于父進(jìn)程死亡。當(dāng)父進(jìn)程先于子進(jìn)程死亡時(shí)，子進(jìn)程死亡時(shí)沒父進(jìn)程處理，這個(gè)死亡的子進(jìn)程就是孤兒進(jìn)程。

但孤兒進(jìn)程與僵尸進(jìn)程不同的是，由于父進(jìn)程已經(jīng)死亡，系統(tǒng)會幫助父進(jìn)程回收處理孤兒進(jìn)程。所以孤兒進(jìn)程實(shí)際上是不占用資源的，因?yàn)樗K究是被系統(tǒng)回收了。不會像僵尸進(jìn)程那樣占用ID,損害運(yùn)行系統(tǒng)。

原文鏈接：

產(chǎn)生死鎖的四個(gè)必要條件：

（1） 互斥條件：一個(gè)資源每次只能被一個(gè)進(jìn)程使用。

（2） 請求與保持條件：一個(gè)進(jìn)程因請求資源而阻塞時(shí)，對已獲得的資源保持不放。

（3） 不剝奪條件：進(jìn)程已獲得的資源，在末使用完之前，不能強(qiáng)行剝奪。

（4） 循環(huán)等待條件：若干進(jìn)程之間形成一種頭尾相接的循環(huán)等待資源關(guān)系。

避免方法：

端口占用：lsof -i:端口號 或者 nestat

cpu、內(nèi)存占用：top

發(fā)送信號：kill -l 列出所有信號，然后用 kill [信號變化] [進(jìn)程號]來執(zhí)行。如kill -9 453。強(qiáng)制殺死453進(jìn)程

git log:查看提交記錄

git diff ：查看變更記錄

git merge：目標(biāo)分支改變，而源分支保持原樣。優(yōu)點(diǎn)：保留提交歷史，保留分支結(jié)構(gòu)。但會有大量的merge記錄

git rebase：將修改拼接到最新，復(fù)雜的記錄變得優(yōu)雅，單個(gè)操作變得(revert)很簡單；缺點(diǎn)：

git revert:反做指定版本，會新生成一個(gè)版本

git reset:重置到某個(gè)版本，中間版本全部丟失

etcd、Consul

pprof

節(jié)省空間（非葉子節(jié)點(diǎn)不存儲數(shù)據(jù)，相對b tree的優(yōu)勢），減少I/O次數(shù)（節(jié)省的空間全部存指針地址，讓樹變的矮胖），范圍查找方便（相對hash的優(yōu)勢）。

explain

其他的見：

runtime2.go 中關(guān)于 p 的定義： 其中 runnext 指針決定了下一個(gè)要運(yùn)行的 g，根據(jù)英文的注釋大致意思是說：

所以當(dāng)設(shè)置 runtime.GOMAXPROCS(1) 時(shí)，此時(shí)只有一個(gè) P，創(chuàng)建的 g 依次加入 P， 當(dāng)最后一個(gè)即 i==9 時(shí)，加入的最后 一個(gè) g 將會繼承當(dāng)前主 goroutinue 的剩余時(shí)間片繼續(xù)執(zhí)行，所以會先輸出 9， 之后再依次執(zhí)行 P 隊(duì)列中其它的 g。

方法一：

方法二：

[圖片上傳失敗...(image-4ef445-1594976286098)]

方法1：to_days，返回給的日期從0開始算的天數(shù)。

方法2：data_add。向日期添加指定時(shí)間間隔

[圖片上傳失敗...(image-b67b10-1594976286098)]

名稱欄目：go語言用delete嗎 go語言chan
當(dāng)前鏈接：http://chinadenli.net/article24/dojdsje.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供微信小程序、App設(shè)計(jì)、網(wǎng)站改版、標(biāo)簽優(yōu)化、ChatGPT、面包屑導(dǎo)航

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請盡快告知，我們將會在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來源： 創(chuàng)新互聯(lián)