搜索引擎ElasticSearch億級(jí)數(shù)據(jù)檢索深度優(yōu)化 運(yùn)維文檔

搜索引擎ElasticSearch億級(jí)數(shù)據(jù)檢索深度優(yōu)化

一、前言數(shù)據(jù)平臺(tái)已迭代三個(gè)版本,從頭開始遇到很多常見的難題,終于有片段時(shí)間整理一些已完善的文檔,在此分享以供所需朋友的實(shí)現(xiàn)參考,少走些彎路,在此篇幅中偏重于ES的優(yōu)化,關(guān)于HBase,Hadoop的設(shè)...
閱讀全文
MySQL批量SQL插入性能優(yōu)化 運(yùn)維文檔

MySQL批量SQL插入性能優(yōu)化

對(duì)于一些數(shù)據(jù)量較大的系統(tǒng),數(shù)據(jù)庫(kù)面臨的問(wèn)題除了查詢效率低下,還有就是數(shù)據(jù)入庫(kù)時(shí)間長(zhǎng)。特別像報(bào)表系統(tǒng),每天花費(fèi)在數(shù)據(jù)導(dǎo)入上的時(shí)間可能會(huì)長(zhǎng)達(dá)幾個(gè)小時(shí)或十幾個(gè)小時(shí)之久。因此,優(yōu)化數(shù)據(jù)庫(kù)插入性能是很有意義的。...
閱讀全文
MySQL數(shù)據(jù)庫(kù)的優(yōu)化 運(yùn)維文檔

MySQL數(shù)據(jù)庫(kù)的優(yōu)化

我們究竟應(yīng)該如何對(duì)MySQL數(shù)據(jù)庫(kù)進(jìn)行優(yōu)化?下面我就從MySQL對(duì)硬件的選擇、MySQL的安裝、my.cnf的優(yōu)化、MySQL如何進(jìn)行架構(gòu)設(shè)計(jì)及數(shù)據(jù)切分等方面來(lái)說(shuō)明這個(gè)問(wèn)題。服務(wù)器物理硬件的優(yōu)化在挑選...
閱讀全文