AWS開源可跨關(guān)聯(lián)式與NoSQL數(shù)據(jù)庫(kù)的查詢語(yǔ)言PartiQL

AWS推出了與SQL兼容的查詢語(yǔ)言PartiQL，只要數(shù)據(jù)庫(kù)查詢引擎提供PartiQL支持，使用者就能以PartiQL單一查詢關(guān)聯(lián)式數(shù)據(jù)庫(kù)的結(jié)構(gòu)化資料，以及開放資料格式中的巢狀資料或是半結(jié)構(gòu)化資料，甚至還能用來(lái)查詢NoSQL或是文件數(shù)據(jù)庫(kù)中無(wú)固定結(jié)構(gòu)（Schema-less）的資料。除了AWS自家的數(shù)據(jù)庫(kù)服務(wù)，NoSQL數(shù)據(jù)庫(kù)Couchbase Server也承諾將會(huì)支持PartiQL。

創(chuàng)新互聯(lián)是專業(yè)的洛浦網(wǎng)站建設(shè)公司，洛浦接單;提供網(wǎng)站設(shè)計(jì)、網(wǎng)站建設(shè),網(wǎng)頁(yè)設(shè)計(jì),網(wǎng)站設(shè)計(jì),建網(wǎng)站,PHP網(wǎng)站建設(shè)等專業(yè)做網(wǎng)站服務(wù);采用PHP框架,可快速的進(jìn)行洛浦網(wǎng)站開發(fā)網(wǎng)頁(yè)制作和功能擴(kuò)展;專業(yè)做搜索引擎喜愛的網(wǎng)站,專業(yè)的做網(wǎng)站團(tuán)隊(duì),希望更多企業(yè)前來(lái)合作!

企業(yè)資料分散在關(guān)聯(lián)式數(shù)據(jù)庫(kù)、非關(guān)聯(lián)式數(shù)據(jù)庫(kù)以及資料湖泊中。高度結(jié)構(gòu)化的資料，儲(chǔ)存在SQL數(shù)據(jù)庫(kù)或是資料倉(cāng)儲(chǔ)；無(wú)固定結(jié)構(gòu)的資料則由鍵值儲(chǔ)存、圖形數(shù)據(jù)庫(kù)（Graph Database）、分類帳數(shù)據(jù)庫(kù)或是時(shí)間序列數(shù)據(jù)庫(kù)等NoSQL數(shù)據(jù)庫(kù)處理；而在資料湖泊中的資料，可能也有部分缺乏結(jié)構(gòu)，或是可能為巢狀或是多值結(jié)構(gòu)。不同的資料類型適用于不同的使用案例，而每種類型的資料，可能都有自己的查詢語(yǔ)言。

不同的資料儲(chǔ)存對(duì)應(yīng)不同的查詢語(yǔ)言，當(dāng)企業(yè)更換資料格式或是數(shù)據(jù)庫(kù)引擎時(shí)，可能還需要跟著改變應(yīng)用程式和查詢語(yǔ)法，AWS提到，這對(duì)于資料的應(yīng)用，特別是使用資料湖泊的靈活性與效率，有著很大的阻礙。為了統(tǒng)一不同類型數(shù)據(jù)庫(kù)存取方法，AWS發(fā)布了查詢語(yǔ)言PartiQL，這是個(gè)與SQL兼容的查詢語(yǔ)言，可以用來(lái)查詢以各種格式儲(chǔ)存在各地的資料。

用戶可以使用PartiQL來(lái)查詢關(guān)聯(lián)式數(shù)據(jù)庫(kù)，像是在Redshift實(shí)作交易或是資料分析等應(yīng)用，或?qū)τ贏mazon S3資料湖泊的開放資料格式，同樣能使用PartiQL對(duì)巢狀資料與半結(jié)構(gòu)化資料例如Amazon Ion格式進(jìn)行查詢，另外，PartiQL也可用于文件數(shù)據(jù)庫(kù)等NoSQL數(shù)據(jù)庫(kù)，查詢無(wú)固定結(jié)構(gòu)的資料。

AWS表示，PartiQL的出現(xiàn)，是為了滿足自家查詢和轉(zhuǎn)換大量資料的需求，其提供嚴(yán)格的SQL兼容性，可與標(biāo)準(zhǔn)SQL混合使用，執(zhí)行連接（Join）、過濾（Filtering）與聚合（Aggregation）操作，并以最小擴(kuò)充支持巢狀和半結(jié)構(gòu)化資料，讓開發(fā)者以簡(jiǎn)單且一致的方法，不需要更改查詢語(yǔ)言，就能查詢各種格式和服務(wù)的資料。

PartiQL具格式獨(dú)立性與儲(chǔ)存獨(dú)立性，PartiQL語(yǔ)法和語(yǔ)義不依賴任何資料格式，無(wú)論使用者是要查詢JSON、Parquet、ORC、CSV還是Ion等格式，查詢語(yǔ)句的寫法都相同，PartiQL的查詢?cè)诰C合邏輯類型系統(tǒng)上運(yùn)作，才對(duì)應(yīng)到不同底層的格式。而PartiQL也不相依于特定資料儲(chǔ)存，因此適用于不同的底層資料儲(chǔ)存。

雖然過去針對(duì)跨不同類型數(shù)據(jù)庫(kù)查詢的問題，已有不少解決方案，AWS指出，像是Postgres JSON同樣也兼容于SQL，但是卻無(wú)法良好地處理JSON巢狀資料；而半結(jié)構(gòu)化查詢語(yǔ)言，雖然能良好處理巢狀資料，但卻無(wú)法與SQL語(yǔ)言兼容。AWS提到，PartiQL是第一個(gè)能夠完全解決這些問題的查詢語(yǔ)言。

目前AWS已在自家多項(xiàng)服務(wù)支持PartiQL，包括Amazon S3 Select、Amazon Glacier Select、Amazon Redshift Spectrum、Amazon QLDB，接下來(lái)幾個(gè)月將會(huì)有更多的AWS服務(wù)支持PartiQL，Couchbase也公布將加入支持PartiQL的行列。現(xiàn)在PartiQL以Apache2.0授權(quán)許可開源，公開教學(xué)、規(guī)范以及參考實(shí)作，所有社群都能使用并參與貢獻(xiàn)。

常用的監(jiān)控協(xié)議有哪些

一、監(jiān)控系統(tǒng)

1、監(jiān)控系統(tǒng)概念

監(jiān)控系統(tǒng)應(yīng)用在監(jiān)控硬件、軟件和業(yè)務(wù)上，并及時(shí)獲取相應(yīng)的數(shù)據(jù)并分析保存數(shù)據(jù)，發(fā)送報(bào)警通知管理者，并自動(dòng)做出相應(yīng)的處理，通過接口展示以利于運(yùn)維人員分析，保證業(yè)務(wù)的正常運(yùn)行。

2、運(yùn)維監(jiān)控系統(tǒng)具備以下幾個(gè)模塊：

采樣：從被監(jiān)控主機(jī)上周期性地獲取某個(gè)關(guān)注指標(biāo)相關(guān)的數(shù)據(jù)，常見獲取數(shù)據(jù)通道有：ssh/telnet、agent、IPMI、SNMP、JMX等等

存儲(chǔ)：用于存儲(chǔ)被監(jiān)控主機(jī)采樣的數(shù)據(jù)和分析的數(shù)據(jù)，利于調(diào)用和分析，常用的有mysql、mariadb等數(shù)據(jù)庫(kù)

數(shù)據(jù)：分析被監(jiān)控主機(jī)采樣數(shù)據(jù)，計(jì)算出歷史數(shù)據(jù)、趨勢(shì)數(shù)據(jù)、速率、最大最小值等等。

展示：將被監(jiān)控主機(jī)的數(shù)據(jù)通過圖表方式展現(xiàn)出來(lái)，利于觀察比對(duì)，常見的展示接口有：webGUI、GUI、APP等等。

報(bào)警：當(dāng)被監(jiān)控主機(jī)發(fā)生異常時(shí)，系統(tǒng)用于通知相關(guān)人員的報(bào)警媒介。常用的報(bào)警媒介有：郵件、短信、微信或通過腳本實(shí)施。

3、被監(jiān)控對(duì)象： 主機(jī)、服務(wù)器、交換機(jī)、路由器、ups等

nms：網(wǎng)絡(luò)監(jiān)控主機(jī)NMS是移動(dòng)通信網(wǎng)中的網(wǎng)絡(luò)管理系統(tǒng)，它的管理對(duì)象可以包括網(wǎng)絡(luò)中所有的實(shí)體，如：網(wǎng)絡(luò)設(shè)備、應(yīng)用程序、服務(wù)器系統(tǒng)、路由器、交換機(jī)、HUB、輔助設(shè)備（如UPS電源）等，給網(wǎng)絡(luò)系統(tǒng)管理員提供一個(gè)全系統(tǒng)的網(wǎng)絡(luò)視圖。

4、監(jiān)控系統(tǒng)采取的數(shù)據(jù)通道

ssh/telnet：安全傳輸協(xié)議

agent方式：代理方式，由監(jiān)控主機(jī)（master）和安裝代理進(jìn)程的被監(jiān)控主機(jī)（agent）組成

ipmi：因特爾智慧平臺(tái)，硬件監(jiān)控接口

snmp：簡(jiǎn)單網(wǎng)絡(luò)管理協(xié)議,版本有 v1,v2(community ，pulic)v3

JMX：java管理擴(kuò)展

jvm：監(jiān)控java虛擬機(jī)

5、儲(chǔ)存系統(tǒng)

歷史數(shù)據(jù) ：每次采樣的結(jié)果。保存時(shí)長(zhǎng)較短

趨勢(shì)數(shù)據(jù)： 聚合數(shù)據(jù)，保存時(shí)長(zhǎng)較長(zhǎng)周期內(nèi)的數(shù)據(jù)

存儲(chǔ)系統(tǒng)：

關(guān)系型數(shù)據(jù)庫(kù)： mysql pgsql oracle

rrd： roudrobin database

nosql：redis、mongo、時(shí)間序列數(shù)據(jù)庫(kù)

二、常見的開源監(jiān)控項(xiàng)目

1、cacti

Cacti是一套基于PHP,MySQL,SNMP及RRDTool開發(fā)的網(wǎng)絡(luò)流量監(jiān)測(cè)圖形分析工具。

2、nagios

Nagios是一款開源的免費(fèi)網(wǎng)絡(luò)監(jiān)視工具，能有效監(jiān)控Windows、Linux和Unix的主機(jī)狀態(tài)，交換機(jī)路由器等網(wǎng)絡(luò)設(shè)備，打印機(jī)等。在系統(tǒng)或服務(wù)狀態(tài)異常時(shí)發(fā)出郵件或短信報(bào)警第一時(shí)間通知網(wǎng)站運(yùn)維人員，在狀態(tài)恢復(fù)后發(fā)出正常的郵件或短信通知。

cacti和nagios這兩個(gè)功能上有所欠缺

3、ganglia

Ganglia是UC Berkeley發(fā)起的一個(gè)開源集群監(jiān)視項(xiàng)目，設(shè)計(jì)用于測(cè)量數(shù)以千計(jì)的節(jié)點(diǎn)。Ganglia的核心包含gmond、gmetad以及一個(gè)Web前端。主要是用來(lái)監(jiān)控系統(tǒng)性能，如：cpu 、mem、硬盤利用率， I/O負(fù)載、網(wǎng)絡(luò)流量情況等，通過曲線很容易見到每個(gè)節(jié)點(diǎn)的工作狀態(tài)，對(duì)合理調(diào)整、分配系統(tǒng)資源，提高系統(tǒng)整體性能起到重要作用。

4、zebbix

功能齊備且好用

zabbix是一個(gè)基于WEB界面的提供分布式系統(tǒng)監(jiān)視以及網(wǎng)絡(luò)監(jiān)視功能的企業(yè)級(jí)的開源解決方案。

zabbix能監(jiān)視各種網(wǎng)絡(luò)參數(shù)，保證服務(wù)器系統(tǒng)的安全運(yùn)營(yíng)；并提供靈活的通知機(jī)制以讓系統(tǒng)管理員快速定位/解決存在的各種問題。

zabbix由2部分構(gòu)成，zabbix server與可選組件zabbix agent。

zabbix server可以通過SNMP，zabbix agent，ping，端口監(jiān)視等方法提供對(duì)遠(yuǎn)程服務(wù)器/網(wǎng)絡(luò)狀態(tài)的監(jiān)視，數(shù)據(jù)收集等功能，它可以運(yùn)行在Linux等多種平臺(tái)上。

三、SNMP協(xié)議

1、SNMP概念

SNMP是基于TCP/IP協(xié)議族的網(wǎng)絡(luò)管理標(biāo)準(zhǔn)，是一種在IP網(wǎng)絡(luò)中管理網(wǎng)絡(luò)節(jié)點(diǎn)（如服務(wù)器、工作站、路由器、交換機(jī)等）的標(biāo)準(zhǔn)協(xié)議。SNMP能夠使網(wǎng)絡(luò)管理員提高網(wǎng)絡(luò)管理效能，及時(shí)發(fā)現(xiàn)并解決網(wǎng)絡(luò)問題以及規(guī)劃網(wǎng)絡(luò)的增長(zhǎng)。網(wǎng)絡(luò)管理員還可以通過SNMP接收網(wǎng)絡(luò)節(jié)點(diǎn)的通知消息以及告警事件報(bào)告等來(lái)獲知網(wǎng)絡(luò)出現(xiàn)的問題。

2、SNMP版本

SNMP主要有三個(gè)版本，SNMPv1，SNMPv2，SNMPv3。

SNMPv1是最初始的版本，實(shí)現(xiàn)簡(jiǎn)單，存在較多安全缺陷。

SNMPv2本質(zhì)上與SNMPv1相同，只是在前一個(gè)版本功能上做了加強(qiáng)，并增加了getbulk操作，還增加了一些更加直觀的錯(cuò)誤響應(yīng)

SNMPv3解決了兩個(gè)版本在安全上的問題，采用了USM和VACM技術(shù)，增加了更強(qiáng)的認(rèn)證機(jī)制。

目前使用最多的依然是SNMPv1版。有些廠家的IT設(shè)備中，還不支持SNMPv3

3、 術(shù)語(yǔ)

縮略語(yǔ) -------------英文全稱-------------- 中文解釋

MIB ----Management Information Base ------管理信息庫(kù)

NMS ------Network Managerment Station -------網(wǎng)絡(luò)管理站

OID ------Object Identifier -------對(duì)象標(biāo)識(shí)符

SNMP ------Simple Network Management Protocol-------- 簡(jiǎn)單網(wǎng)絡(luò)管理協(xié)議

SMI -----Structure of Management Information ------管理信息機(jī)構(gòu)

USM -----User-based Security Model -----基于用戶的安全模型

VACM ------View-based Access Control Model ------基于視圖的訪問控制模型

PDU ------Protocol data unit -------協(xié)議數(shù)據(jù)單元

4、SNMP管理的網(wǎng)絡(luò)主要由三部分組成：

被管理的設(shè)備

SNMP代理

網(wǎng)絡(luò)管理系統(tǒng)（NMS）

網(wǎng)絡(luò)結(jié)構(gòu)

網(wǎng)絡(luò)中被管理的每一個(gè)設(shè)備都存在一個(gè)管理信息庫(kù)（MIB）用于收集并儲(chǔ)存管理信息。通過SNMP協(xié)議，NMS能獲取這些信息。被管理設(shè)備，又稱為網(wǎng)絡(luò)單元或網(wǎng)絡(luò)節(jié)點(diǎn)，可以是支持SNMP協(xié)議的路由器、交換機(jī)、服務(wù)器或者主機(jī)等等。

SNMP代理是被管理設(shè)備上的一個(gè)網(wǎng)絡(luò)管理軟件模塊，擁有本地設(shè)備的相關(guān)管理信息，并用于將它們轉(zhuǎn)換成與SNMP兼容的格式，傳遞給NMS。

NMS運(yùn)行應(yīng)用程序來(lái)實(shí)現(xiàn)監(jiān)控被管理設(shè)備的功能。另外，NMS還為網(wǎng)絡(luò)管理提供大量的處理程序及必須的儲(chǔ)存資源。

5、MIB管理信息庫(kù)

IETF規(guī)定的管理信息庫(kù)MIB（由中定義了可訪問的網(wǎng)絡(luò)設(shè)備及其屬性，由對(duì)象識(shí)別符（OID：Object Identifier）唯一指定。MIB是一個(gè)樹形結(jié)構(gòu)，SNMP協(xié)議消息通過遍歷MIB樹形目錄中的節(jié)點(diǎn)來(lái)訪問網(wǎng)絡(luò)中的設(shè)備。下圖給出了NMS系統(tǒng)中SNMP可訪問網(wǎng)絡(luò)設(shè)備的對(duì)象識(shí)別樹（OID：Object Identifier）結(jié)構(gòu)。

網(wǎng)絡(luò)設(shè)備的對(duì)象識(shí)別樹

對(duì)一個(gè)線路狀態(tài)進(jìn)行查詢的OID設(shè)置例子

萬(wàn)洲金業(yè)跟華鑫投貴金屬比較好用的是哪一家？

我選擇這類型的交易平臺(tái)比較看重它是否正規(guī)，而且功能是否齊全，綜合考慮的話，我比較推薦華鑫投貴金屬，畢竟他們擁有美國(guó)監(jiān)管最嚴(yán)格NFA牌照，而且它的功能也是比較多的，操作起來(lái)也很方便。

新聞名稱：nosql時(shí)間序列的簡(jiǎn)單介紹
當(dāng)前網(wǎng)址：http://chinadenli.net/article20/dseocco.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供關(guān)鍵詞優(yōu)化、電子商務(wù)、面包屑導(dǎo)航、營(yíng)銷型網(wǎng)站建設(shè)、靜態(tài)網(wǎng)站、服務(wù)器托管

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來(lái)源： 創(chuàng)新互聯(lián)