지혜를 창출할 창고

1. values.yaml # values.yaml config: webserver: expose_config: 'True' # by default this is 'False'i postgresql: enabled: true postgresqlPassword: postgres postgresqlUsername: postgres volumePermissions: enabled: true createUserJob: useHelmHooks: false migrateDatabaseJob: useHelmHooks: false persistence: enabled: false volumePermissions: enabled: true executor: "KubernetesExecutor" 2. pv.yaml kin..

안녕하세요. 쿠버네티스 클러스터에 카프카를 설치(배포)하는 과정에 발생한 이슈입니다. 클러스터 상태 총 3대의 노드가 있고, 모두 taint 해제한 상태입니다. 이슈 내용 1번 마스터 노드에 뜬 kafka(노드)만 정상이고, 나머지는 권한 오류로 pod가 실행되지 않는 현상이었습니다. 심지어 1개 카프카만 2번 노드에 배포되도 권한 이슈가 발생했습니다. replicasCount 3 해결 이때는 볼륨 마운트 권한을 추가해주면 됩니다. helm install kafka bitnami/kafka --set volumePermissions.enabled=true --create-namespace --namespace kafka -f values.yaml strimzi부터 scrach까지 많은 시도를 했었지만, ..

1. PersistentVolume kafka, zookeeper PersistentVolume 정의 및 생성 (본문 내에 claimRef는 중복이니 편하신 방법으로 생성하시면 됩니다.) 1-1 kafka data persistent volume # vim kafka-persistent-volume.yaml apiVersion: v1 kind: PersistentVolume metadata: namespace: kafka name: kafka-pv labels: name: kafka spec: storageClassName: kafka-data capacity: storage: 2Gi volumeMode: Filesystem accessModes: - ReadWriteOnce claimRef: names..

헬름을 이용한 spark 클러스터 생성하기입니다. (하나씩 구현했는데 이번엔 성공하지 못했어요.) helm은 너무 간편하고, 전 클러스터에 잡만 제출하면 되기 때문에.... 타협했습니다. namespace 생성 # vim ns.yaml apiVersion: v1 kind: Namespace metadata: name: spark kubectl apply -f ns.yaml bitnami helm helm repo add bitnami https://charts.bitnami.com/bitnami helm install spark bitnami/spark -n spark # Read more about the installation in the Apache Spark packaged by Bitnami C..