最近EFK遇到一個問題，就是當(dāng)集群的歷史日志過多的時候，新安裝的EFK會因為數(shù)據(jù)太多導(dǎo)致無法把數(shù)據(jù)轉(zhuǎn)發(fā)到Elasticsearch，如果Elasticsearch內(nèi)小會出現(xiàn)內(nèi)存溢出的情況。Fluent...
運(yùn)維問題
運(yùn)維問題
科技視界
Apache Log4j存在遠(yuǎn)程代碼執(zhí)行漏洞播
漏洞性質(zhì)：任意代碼執(zhí)行漏洞描述：Apache Log4j 是 Apache 的一個開源項目，Apache Log4j2是一個基于Java的日志記錄工具。該工具重寫了Log4j框架，并且引入了大量豐富的...
運(yùn)維問題
RocketMQ客戶端日志配置不生效問題
SpringBoot在集成RocketMQ啟動以后，默認(rèn)會在user.home下創(chuàng)建一個rocketmq_client.log日志文件，文件全路徑是：${user.home}/logs/rocketm...
運(yùn)維問題
SpringBoot1.5日志配置logging.file.max-history、max-size不生效
今天突然收到服務(wù)器告警磁盤快滿了，當(dāng)時還是比較驚訝，因為服務(wù)日志我配置了大小和個數(shù)限制，鏡像和系統(tǒng)日志我也設(shè)置了定時清理。才運(yùn)行兩個月怎么這么快就要滿了，然后馬上登錄了其中一臺服務(wù)器排查，發(fā)現(xiàn)一些運(yùn)行...
運(yùn)維問題
阿里云日志服務(wù)SLS采集kubernetes集群日志踩坑記
最近在使用阿里云日志進(jìn)行“上下文瀏覽”和“LiveTail”的時候突然發(fā)現(xiàn)無法正常過濾。比如：我要實時查看eureka服務(wù)的日志，通過“Pod名稱”或者“容器名稱”過濾以后，LiveTail還是會顯示...
運(yùn)維視界
Linux日志文件系統(tǒng)原理詳解
文件系統(tǒng)要解決的一個關(guān)鍵問題是怎樣防止掉電或系統(tǒng)崩潰造成數(shù)據(jù)損壞，在此類意外事件中，導(dǎo)致文件系統(tǒng)損壞的根本原因在于寫文件不是原子操作，因為寫文件涉及的不僅僅是用戶數(shù)據(jù)，還涉及元數(shù)據(jù)(metadata)...
運(yùn)維問題
Prometheus報錯Error refreshing service Unexpected response code: 503解決辦法
今天終于把這個擱置了幾個月沒有解決的問題解決了，真的是找遍了Google、百度文檔，沒有找到一個解決方案，這里分享一下解決辦法。公司項目使用的是spring cloud，注冊中心使用的Eureka，監(jiān)...
運(yùn)維問題
docker部署elasticsearch報錯None of the configured nodes are available處理
之前一直都是通過yum安裝es，最近使用docker-compose部署了一個單節(jié)點es，java調(diào)用9300端口的時候，總是報錯：None of the configured nodes are a...
運(yùn)維文檔
kubernetes 部署ELK日志
1、下載官方y(tǒng)aml配置文件到master服務(wù)器https://github.com/kubernetes/kubernetes/tree/master/cluster/addons/fluentd-...
運(yùn)維文檔
fluentd對java（log4j2）日志多行匹配采集格式化
log4j2日志格式：%d %-5level %class{36}.%M:%L - %msg%n通過tomcat日志輸出為：2019-01-22 14:07:10,599 INFO ne...
運(yùn)維視界
日志采集工具Logstash、Filebeat、Fluentd、Logagent、logtail、rsyslog、syslog-ng對比
LogstashLogstash 不是這個列表里最老的傳輸工具（最老的應(yīng)該是 syslog-ng ，諷刺的是它也是唯一一個名字里帶有 new 的），但 Logstash 絕對可以稱得上最有名的。因為它...
運(yùn)維文檔
fluentd代替logstash搭建EFK日志管理系統(tǒng)
logstash的替代軟件有很多，常用有的fluentd和Filebeat，這里主要以fluentd替換logstash進(jìn)行日志采集。elasticsearch和kibana安裝可以參考ELK日志分析...
運(yùn)維問題
Tomcat重復(fù)請求，log4j2日志重復(fù)顯示問題排查
前提：公司項目用的是nginx+tomcat+java，線上環(huán)境和線下環(huán)境版本配置都是一樣，采用的是jenkins自動化部署。問題：前段時間突然發(fā)現(xiàn)瀏覽器訪問一個頁面，后端日志會出現(xiàn)重復(fù)的兩條日志記錄...
運(yùn)維文檔
ELK日志分析平臺集群搭建
一、準(zhǔn)備工作架構(gòu)圖1、準(zhǔn)備三臺虛擬機(jī)，系統(tǒng)版本：CentOS Linux release 7.5.1804master 192.168.133.128node1 192.168.133.1...
運(yùn)維命令
Linux Web服務(wù)器網(wǎng)站故障分析常用的命令
系統(tǒng)連接狀態(tài)篇：1.查看TCP連接狀態(tài)netstat -nat |awk ‘{print $6}’|sort|uniq -c|sort -r...
運(yùn)維筆記
Linux日志系統(tǒng)以及日志文件功能詳解
Linux上的日志系統(tǒng)syslogsyslog-ng: 開源日志系統(tǒng)：syslog()A:B:D:syslog服務(wù)：sysload:系統(tǒng)，非內(nèi)核產(chǎn)生的信息klogd:內(nèi)核，專門負(fù)責(zé)記錄內(nèi)核產(chǎn)生的日志信...
網(wǎng)站優(yōu)化
如何分析網(wǎng)站日志
網(wǎng)站日志是網(wǎng)站管理員和搜索引擎對話溝通的途徑。通過日志，了解搜索引擎蜘蛛的訪問情況。從日志中，挑出一段來，就是如下的形式：2015-12-01 01:05:03 202.173.122.109 GET...
