Revert use of DaemonSet for logstash 98/72598/1
authorGary Wu <gary.i.wu@huawei.com>
Wed, 14 Nov 2018 02:08:02 +0000 (18:08 -0800)
committerGary Wu <gary.i.wu@huawei.com>
Wed, 14 Nov 2018 02:29:01 +0000 (18:29 -0800)
Using a DaemonSet for logstash is problematic for HA k8s
because pods are being scheduled on etcd and orchestration
nodes where we do not want them.  Reverting back to a
Deployment with a default of 5 replicas instead.

Issue-ID: LOG-181
Change-Id: I8bbc165a6f23c31b372320c3a94181c689f1baef
Signed-off-by: Gary Wu <gary.i.wu@huawei.com>
kubernetes/log/charts/log-logstash/templates/deployment.yaml
kubernetes/log/charts/log-logstash/values.yaml

index 86b1a8c..7f19bc5 100644 (file)
@@ -14,7 +14,7 @@
 # limitations under the License.
 
 apiVersion: extensions/v1beta1
-kind: DaemonSet
+kind: Deployment
 metadata:
   name: {{ include "common.fullname" . }}
   namespace: {{ include "common.namespace" . }}
@@ -24,6 +24,7 @@ metadata:
     release: {{ .Release.Name }}
     heritage: {{ .Release.Service }}
 spec:
+  replicas: {{ .Values.replicaCount }}
   template:
     metadata:
       labels:
index 7779ffe..955a02a 100644 (file)
@@ -39,7 +39,9 @@ config:
   elasticsearchServiceName: log-es
   elasticsearchPort: 9200
 
-# default number of instances matches cluster size via DaemonSet deployment
+# default number of instances
+# 30+ logs/sec will saturate a single node to 6+ vCores
+replicaCount: 5
 
 nodeSelector: {}