지혜를 창출할 창고

1. values.yaml # values.yaml config: webserver: expose_config: 'True' # by default this is 'False'i postgresql: enabled: true postgresqlPassword: postgres postgresqlUsername: postgres volumePermissions: enabled: true createUserJob: useHelmHooks: false migrateDatabaseJob: useHelmHooks: false persistence: enabled: false volumePermissions: enabled: true executor: "KubernetesExecutor" 2. pv.yaml kin..

1. PersistentVolume kafka, zookeeper PersistentVolume 정의 및 생성 (본문 내에 claimRef는 중복이니 편하신 방법으로 생성하시면 됩니다.) 1-1 kafka data persistent volume # vim kafka-persistent-volume.yaml apiVersion: v1 kind: PersistentVolume metadata: namespace: kafka name: kafka-pv labels: name: kafka spec: storageClassName: kafka-data capacity: storage: 2Gi volumeMode: Filesystem accessModes: - ReadWriteOnce claimRef: names..

헬름을 이용한 spark 클러스터 생성하기입니다. (하나씩 구현했는데 이번엔 성공하지 못했어요.) helm은 너무 간편하고, 전 클러스터에 잡만 제출하면 되기 때문에.... 타협했습니다. namespace 생성 # vim ns.yaml apiVersion: v1 kind: Namespace metadata: name: spark kubectl apply -f ns.yaml bitnami helm helm repo add bitnami https://charts.bitnami.com/bitnami helm install spark bitnami/spark -n spark # Read more about the installation in the Apache Spark packaged by Bitnami C..

mac spark java scala Ventura 13.1 version 3.3.1 19.0.1 2.12.15 로컬에 설치된 버전입니다. # java openjdk 17.0.5 2022-10-18 LTS OpenJDK Runtime Environment Zulu17.38+21-CA (build 17.0.5+8-LTS) OpenJDK 64-Bit Server VM Zulu17.38+21-CA (build 17.0.5+8-LTS, mixed mode, sharing) # scala Scala code runner version 3.2.1 -- Copyright 2002-2022, LAMP/EPFL 진행 순서 홈브루에 스크립트 설치 java 설치 scala 설치 (선택) spark 설치 hello world..

보호되어 있는 글입니다.

안녕하세요. 해당 글은 리눅스 서버에서 사용할 elastic stack 설치 과정입니다. 패키지 관리자를 사용하지 않고 설치합니다. 글의 순서 설치 설정 실행 1. 설치 kibana wget https://artifacts.elastic.co/downloads/kibana/kibana-7.10.2-linux-x86_64.tar.gz tar xvf kibana-7.10.2-linux-x86_64.tar.gz mv kibana-7.10.2-linux-aarch64 kibana elasticsearch wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-7.10.2-linux-aarch64.tar.gz tar xvf elasticse..