国产99久久精品_欧美日本韩国一区二区_激情小说综合网_欧美一级二级视频_午夜av电影_日本久久精品视频

最新文章專題視頻專題問答1問答10問答100問答1000問答2000關鍵字專題1關鍵字專題50關鍵字專題500關鍵字專題1500TAG最新視頻文章推薦1 推薦3 推薦5 推薦7 推薦9 推薦11 推薦13 推薦15 推薦17 推薦19 推薦21 推薦23 推薦25 推薦27 推薦29 推薦31 推薦33 推薦35 推薦37視頻文章20視頻文章30視頻文章40視頻文章50視頻文章60 視頻文章70視頻文章80視頻文章90視頻文章100視頻文章120視頻文章140 視頻2關鍵字專題關鍵字專題tag2tag3文章專題文章專題2文章索引1文章索引2文章索引3文章索引4文章索引5123456789101112131415文章專題3
問答文章1 問答文章501 問答文章1001 問答文章1501 問答文章2001 問答文章2501 問答文章3001 問答文章3501 問答文章4001 問答文章4501 問答文章5001 問答文章5501 問答文章6001 問答文章6501 問答文章7001 問答文章7501 問答文章8001 問答文章8501 問答文章9001 問答文章9501
當前位置: 首頁 - 科技 - 知識百科 - 正文

互聯(lián)網(wǎng)創(chuàng)業(yè)的準備數(shù)據(jù)庫:硬盤iops、mysql

來源:懂視網(wǎng) 責編:小采 時間:2020-11-09 09:45:07
文檔

互聯(lián)網(wǎng)創(chuàng)業(yè)的準備數(shù)據(jù)庫:硬盤iops、mysql

互聯(lián)網(wǎng)創(chuàng)業(yè)的準備數(shù)據(jù)庫:硬盤iops、mysql:《互聯(lián)網(wǎng)創(chuàng)業(yè)的準備》系列文章 硬盤常識: 機械硬盤HDD固態(tài)硬盤SSD 最小單位1個扇區(qū)為512B,或4K(2012年民用普及)1個分頁為4K、8K或更高() 性能因素轉速(rpm):5400、7200、1w、1.5w層數(shù):SLC(單層快)、MLC(雙層慢)、TLC(三層更慢,SSD暫
推薦度:
導讀互聯(lián)網(wǎng)創(chuàng)業(yè)的準備數(shù)據(jù)庫:硬盤iops、mysql:《互聯(lián)網(wǎng)創(chuàng)業(yè)的準備》系列文章 硬盤常識: 機械硬盤HDD固態(tài)硬盤SSD 最小單位1個扇區(qū)為512B,或4K(2012年民用普及)1個分頁為4K、8K或更高() 性能因素轉速(rpm):5400、7200、1w、1.5w層數(shù):SLC(單層快)、MLC(雙層慢)、TLC(三層更慢,SSD暫

《互聯(lián)網(wǎng)創(chuàng)業(yè)的準備》系列文章 硬盤常識: 機械硬盤HDD固態(tài)硬盤SSD 最小單位1個扇區(qū)為512B,或4K(2012年民用普及)1個分頁為4K、8K或更高() 性能因素轉速(rpm):5400、7200、1w、1.5w層數(shù):SLC(單層快)、MLC(雙層慢)、TLC(三層更慢,SSD暫未采用,

《互聯(lián)網(wǎng)創(chuàng)業(yè)的準備》系列文章——

硬盤常識:

機械硬盤HDD 固態(tài)硬盤SSD

最小單位 1個扇區(qū)為512B,或4K(2012年民用普及) 1個分頁為4K、8K或更高()

性能因素 轉速(rpm):5400、7200、1w、1.5w 層數(shù):SLC(單層快)、MLC(雙層慢)、TLC(三層更慢,SSD暫未采用,U盤大量采用)

接口 SATA 3G、SATA 6G(2012年民用普及)、SAS 6G SATA 3G、SATA 6G、SAS 6G、PCI-E

尺寸 2.5英寸、3.5英寸 2.5英寸、PCI-E版型

常見品牌 西部數(shù)據(jù)、希捷 Intel、鎂光(Crucial)、浦科特(PLEXTOR)

硬盤性能指標:

連續(xù)讀寫(常用單位為MB/s):文件在硬盤上存儲位置是連續(xù)的,適用場景:大文件拷貝(比如視頻音樂)。速度即使很高,對數(shù)據(jù)庫性能也沒有參考價值。

4K隨機讀寫(常用單位為iops):在硬盤上隨機位置讀寫數(shù)據(jù),每次4KB,適用場景:操作系統(tǒng)運行、軟件運行、數(shù)據(jù)庫。(圖片靜態(tài)服務器、視頻靜態(tài)服務器是大文件,測試64K隨機或更大)

常用硬盤性能測試軟件:

Windows:AS SSD Benchmark、CrystalDiskMark、HD Tune Pro、iometer

Linux:iometer

Align I/Os:硬盤IO大小。測試設備時根據(jù)硬盤最小單位進行選擇,機械硬盤上選512B或4K,SSD上選4K、8K等。測試分區(qū)時受分區(qū)sector size影響。由于Linux ext3的sector size為4096,所以在扇區(qū)為512B的機械硬盤上也無法選擇Align I/Os on 512B進行測試,測試效果不佳。vps無法進行設備測試,如果是自購服務器,應使用設備測試。

Seq 即 Sequential 即連續(xù)讀寫。AS SSD會先以16MB的尺寸為單位,持續(xù)向受測分區(qū)寫入生成1個達到1GB大小的文件,然后再以同樣的單位尺寸讀取這個,最后計算平均成績而給出結果。

4K 即 Random 4k, Queue Depth=1 即 隨機4K并發(fā)1個隊列。AS SSD會以512KB的單位尺寸生成1GB大小的測試文件,然后在其地址范圍(LBA)內進行隨機4KB單位尺寸進行寫入及讀取測試,直到跑遍這個范圍為止,最后同樣計算平均成績給出結果。

4K QD32 即 Random 4k, Queue Depth=32 即 隨機4K并發(fā)32個隊列。

4K-64Thrd 即 4K, 64 Thread 即 隨機4K并發(fā)64個線程,和 4K QD64是一個意思。AS SSD會生成64個16MB大小的測試文件(共計1GB),然后同時以4KB的單位尺寸,同時在這64個文件中進行寫入和讀取測試,最后依然以平均成績?yōu)榻Y果。

通過AS SSD可以看出,iops與MB/s可以直接換算,比如4K讀取是6227iops,即每秒鐘可以讀取6227個4K的文件,即 6227 * 4K / 1024 = 24.3 MB/s。

Intel的SSD性能數(shù)據(jù)采用iometer 4K QD32的測試結果:

價格與速度:

型號 容量 2012價格 4K QD32隨機讀/寫(iops) 4K QD64 連續(xù)讀寫(MB/s)

民用 機械7200rpm 3.5英寸 SATA 6G 希捷Barracuda 7200.14 3TB ¥1.1k 409/365 386/291 200/180

企業(yè)級 機械10000rpm 2.5英寸 SAS 6G 希捷Savvio 10K.5 300GB ¥1k 750/700 170/170

企業(yè)級 機械15000rpm 2.5英寸 SAS 6G 希捷Savvio 15K.3 300GB ¥2.2k

企業(yè)級 固態(tài)SLC 2.5英寸 SATA 3G Intel X25-E 32G ¥2.5k 3.5w/3.3k 250/170

企業(yè)級 固態(tài)MLC PCI-E Intel 910 400G ¥14w 9w/3.8w 1000/750

企業(yè)級 固態(tài)MLC PCI-E Intel 710 100G ¥2.5k 3.8w/2.3k 270/170

民用 固態(tài)MLC 2.5英寸 SATA 6G Intel 520 120G ¥840 2.5w/8w 550/500

民用 固態(tài)MLC 2.5英寸 SATA 6G 鎂光 M4 128G ¥800 7.8w/4.2w 7w/4w 500/175

為什么民用SSD的iops很高價格卻很低,而企業(yè)級SSD的iops有的很低而價格卻很高?因為企業(yè)級SSD的耐用性高,比如Intel 710 100G壽命為4K寫入500TB,即5000次全盤寫入。

Intel SSD壽命指標:smart中的“E8:Avai lable Reserved Space”:可用的預留閃存數(shù)量、“E9:Media Wearout Indicator”:閃存磨耗指數(shù)。其他廠商的SSD類似,比如鎂光的wear leaving count。

SSD新盤的剩余磨損為100,當?shù)陀?0時,應更換,報廢。

todo:數(shù)據(jù)庫的選擇

關系型數(shù)據(jù)庫用Mysql還是PostgreSQL,或者全用NoSQL?mongo還是hbase?

Mysql 和 PostgreSQL都可以。mysql用的人多,但是oracle收購sun以后,把mysql限制的更加封閉,正在衰落,和可能和OpenOffice一樣被oracle整死,免備案空間,衍生出LibreOffice。但不用很擔心,即使mysql被oracle整死,也會衍生出開源版本,使用方式一樣。

關系型數(shù)據(jù)庫和NoSQL搭配使用較好,關系型適合底層業(yè)務,NoSQL適合上層業(yè)務。關注淘寶hbase的使用。

Mysql性能與硬盤iops的關系:

mysql可以把讀取結果放在內存中,即query cache,所以db server安裝大內存即可實現(xiàn)只讀內存、不讀硬盤。

當預計數(shù)據(jù)量會增長到超過內存大小時,進行分表(把一個表中的數(shù)據(jù)拆分),放到多個大內存服務器上,保證每個服務器上的數(shù)據(jù)都小于內存大小,香港服務器,即可實現(xiàn)全部緩存。

2012年內存價格:UDIMM no ECC DDR3 1600民用內存 ¥270/8GB,RDIMM ECC DDR3 1600服務器內存 ¥440/8G。但一臺服務器能安裝的內存有限,2012年典型的Dell服務器有24個插槽,主板芯片支持768G內存,2012年DDR3內存生產(chǎn)工藝最高是單條8G(DDR4已實現(xiàn)單條16G,但主板尚未支持DDR4),所以一臺服務器最大內存192G(¥440 * 24條 = 1w)。

數(shù)據(jù)庫寫入時必須寫硬盤(否則就不叫持久化存儲了……),¥2.5k的Intel 710企業(yè)級SSD的寫入iops為2.3k,而萬轉硬盤的iops為700,如果要達到SSD的性能,需要多塊萬轉硬盤組RAID。如果使用iops為3w的SSD,性能比機械硬盤提升了30倍。

如果數(shù)據(jù)量不大,遠低于192G,就不需要做分表了嗎?

仍然要分表,原因有2個:

1、大內存會提升mysql讀取性能,但并發(fā)讀取能力也是有上限的,香港虛擬主機,這時受CPU性能限制,2012年典型的服務器是雙路,即2個8核CPU(mysql內存并發(fā)待測試)。

2、內存很大,對并發(fā)寫入能力沒有作用,寫入能力完全依賴于硬盤的iops。一臺服務器的寫入性能很有限,請看下面的測試。

聲明:本網(wǎng)頁內容旨在傳播知識,若有侵權等問題請及時與本網(wǎng)聯(lián)系,我們將在第一時間刪除處理。TEL:177 7030 7066 E-MAIL:11247931@qq.com

文檔

互聯(lián)網(wǎng)創(chuàng)業(yè)的準備數(shù)據(jù)庫:硬盤iops、mysql

互聯(lián)網(wǎng)創(chuàng)業(yè)的準備數(shù)據(jù)庫:硬盤iops、mysql:《互聯(lián)網(wǎng)創(chuàng)業(yè)的準備》系列文章 硬盤常識: 機械硬盤HDD固態(tài)硬盤SSD 最小單位1個扇區(qū)為512B,或4K(2012年民用普及)1個分頁為4K、8K或更高() 性能因素轉速(rpm):5400、7200、1w、1.5w層數(shù):SLC(單層快)、MLC(雙層慢)、TLC(三層更慢,SSD暫
推薦度:
  • 熱門焦點

最新推薦

猜你喜歡

熱門推薦

專題
Top
主站蜘蛛池模板: 伊人久久综合成人网小说 | 欧美国产日韩在线观看 | 911国产视频 | 久久精品视频观看 | 99视频九九精品视频在线观看 | 亚洲码欧美码一区二区三区 | 国产伦精品一区二区三区视频小说 | 亚洲一区色| 激情综合亚洲欧美日韩 | 香蕉视频在线免费看 | 日韩在线欧美高清一区 | 久久一次 | 国产网站精品 | 久久亚洲欧美综合激情一区 | 日韩资源在线 | 日韩在线观看不卡 | 911国产视频| 亚洲综合欧美 | 蜜桃视频一区二区三区四区 | 在线视频一区二区 | 伊人一区 | 日韩不卡手机视频在线观看 | 亚洲一区二区三区精品影院 | 91爱国产| 亚洲码欧美码一区二区三区 | 亚欧美色 | 亚洲美女一区二区三区 | 亚洲国产精品免费在线观看 | 欧美孕妇性xxxⅹ精品hd | 日韩欧美在线免费观看 | 夜夜骑首页| 精品免费久久久久国产一区 | 欧美综合图片区 | 欧美日韩精品一区二区三区四区 | 欧美激情国产日韩精品一区18 | 色 在线播放 | 亚洲国产成人久久综合一区 | 国产欧美日韩精品综合 | 九九精品成人免费国产片 | 国产成人精品一区二三区2022 | 九草伊人|