Data Engineering(13)
-
[Mac, M1]openJDK 설치 및 삭제
1. openJDK 설치 1) adoptopenjdk/openjdk 저장소 추가 $ brew tap adoptopenjdk/openjdk 2) cask 설치 $ brew install cask 3) 설치 가능한 openjdk 리스트 확인 $ brew search adoptopenjdk 4) 원하는 버전 설치 $ brew install --cask adoptopenjdk16 5) 확인 2. openJDK 삭제 1) 삭제할 openJDK 확인 $ cd /Library/Java/JavaVirtualMachines $ ls # 아래와 같이 설치되어 있는 openJDK 를 확인할 수 있다.(ex: adoptopenjdk-16.jdk) stopleaf@stopleaf JavaVirtualMachines % ls a..
2022.07.28 -
[Mac, M1]pyenv, Python, python-virtualenv 설치
환경 Mac, M1 - macOS Monterey 12.4 참고 pyenv: 파이썬 버전 관리 pyenv-virtualenv: 파이썬 가상환경 관리 1. pyenv 설치 $ brew install pyenv * Homebrew 가 설치되어 있지 않다면, Homebrew 설치 참고. $ vi ~/.zshrc # ~/.zshrc 에 아래 내용 추가 export PYENV_ROOT="$HOME/.pyenv" export PATH="$PYENV_ROOT/bin:$PATH" if command -v pyenv 1>/dev/null 2>&1; then eval "$(pyenv init --path)" fi $ source ~/.zshrc 2. Python 설치 $ brew install zlib bzip2 $ vi..
2022.07.09 -
(작성중)하둡 클러스터 구축 1
하둡 클러스터를 처음 구축하시는 분들에게 도움이 되었으면 합니다. 실습을 위해 VirtualBox 로 우분투 가상 머신을 생성하여 진행하겠습니다. 기본 환경 VitrualBox 6.1.32 Ubuntu 20.04 일단 가상 머신 3개를 생성합니다. 단순 구축 실습이 목적이므로 가상 머신별 리소스를 RAM 2GB, 용량 20GB 으로 할당하여 생성했습니다. 클러스터 환경을 만들기 위한 가상 머신 개수는 2개 이상이면 됩니다. VirtualBox 로 Ubuntu 를 설치하는 과정은 생략하겠습니다. 아래 내용부터 가상 머신을 서버로 표현하겠습니다. 1. 하둡용 계정 생성 서버들이 준비 되었다면, 하둡용 계정을 생성합니다. * root 에서 작업하면 보안 문제가 있을 수 있고, 여러 프로세스가 실행되는 한 ..
2022.03.06