摘要:kafka副本(replication)包含兩種類型:leader副本,follower副本 leader副本負責讀寫請求,follower副本負責同步leader副本消息,通過副本選舉實現故障轉移。 閱讀全文
posted @ 2019-10-19 00:12 guoew 閱讀 (59) 評論 (0) 編輯
摘要:crontab命令常見于Unix和類Unix的操作系統之中,用于設置周期性被執行的指令,來完成一些自動、定時、重復性的工作 閱讀全文
posted @ 2019-09-03 15:19 guoew 閱讀 (62) 評論 (0) 編輯
摘要:實驗環境:ubuntu16.04 python環境: 3.6.7 安裝參考:https://superset.incubator.apache.org/installation.html 閱讀全文
posted @ 2019-07-04 14:06 guoew 閱讀 (310) 評論 (0) 編輯
摘要:下面是一些工作過程中比較常見的工具方法,但不代表最終答案。希望能對你有所幫助,如果您有更好更多的方法工具,歡迎推薦! 閱讀全文
posted @ 2019-07-04 13:47 guoew 閱讀 (63) 評論 (0) 編輯
摘要:一. Header相關的幾個概念 CORS: 跨域資源共享(CORS) 是一種機制,它使用額外的?HTTP頭來告訴瀏覽器 讓運行在一個 origin (domain) 上的Web應用被準許訪問來自不同源服務器上的指定的資源。當一個資源從與該資源本身所在的服務器不同的域、協議或端口請求一個資源時,資源 閱讀全文
posted @ 2019-06-06 18:43 guoew 閱讀 (617) 評論 (1) 編輯
摘要:java.lang.OutOfMemoryError這個錯誤我相信大部分開發人員都有遇到過,產生該錯誤的原因大都出于以下原因:JVM內存過小、程序不嚴密,產生了過多的垃圾。 閱讀全文
posted @ 2019-04-15 10:28 guoew 閱讀 (43) 評論 (0) 編輯
摘要:前提:需要搭建和部署nginx服務以及后端服務,以便測試反向代理使用,這部分工作省略。 一. 設置緩存空間 在nginx的http??櫓鋅僖豢槊猰y_cache的緩存空間,緩存路徑為/tmp/nginxcache,大小為10m。 二. 設置緩存 在nginx server??檣柚梅聰虼砘捍?三 閱讀全文
posted @ 2019-02-17 23:15 guoew 閱讀 (157) 評論 (0) 編輯
摘要:一. 故障處理部分 1.1. spark提交任務報錯java.lang.NoClassDefFoundError: com/alibaba/fastjson/JSON 報錯原因: 在運行環境沒有找到fastjson的依賴庫 解決方法: 在SPARK_HOME/jars/ 添加fastjson VER 閱讀全文
posted @ 2019-02-17 14:13 guoew 閱讀 (495) 評論 (0) 編輯
摘要:一. kubernetes是什么 kubernetes是一個全新得基于容器技術得分布式架構領先方案。是google Borg得一個開源版本。Borg是google得一個久負盛名得內部使用得大規模集群管理系統,它基于容器技術,目的是實現資源管理的自動化,以及跨多個數據中心的資源利用率的最大化。 二. 閱讀全文
posted @ 2019-02-14 22:54 guoew 閱讀 (183) 評論 (0) 編輯
摘要:wrk 是一個很簡單的 http 性能測試工具,沒有Load Runner那么復雜,他和 apache benchmark(ab)同屬于HTTP性能測試工具,但是比 ab 功能更加強大,并且可以支持lua腳本來創建復雜的測試場景。 wrk 的一個很好的特性就是能用很少的線程壓出很大的并發量,原因是它 閱讀全文
posted @ 2019-02-14 22:29 guoew 閱讀 (450) 評論 (0) 編輯