데이터 엔지니어

Operating System/Linux

[Linux] 우분투에 ELK 설치하고 실행해보기

1. 설치 가능한 패키지 리스트 업데이트 apt update 2. 설치한 패키지들을 최신 버전으로 업그레이드 apt upgrade -y 3. openjdk 8버전 설치하기 apt-get install openjdk-8-jdk -y 4. java 환경설정 vi /etc/profile 맨 아랫줄에 다음과 같은 내용 입력 export JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64 export PATH=$JAVA_HOME/bin:$PATH export Class_PATH=$JAVA_HOME/lib:$CLASS_PATH 자바 버전 확인 명령어 입력 java -version 5. ELK 설치하기 GPG 키 추가 wget -qO - https://artifacts.elastic.co/..

Operating System/Linux

[WSL] 윈도우 WSL Ubuntu 설치하기

1. 윈도우에 깔려있는 마이크로소프트 스토어 접속 2. ubuntu 검색 3. 나는 첫번째 Ubuntu 를 클릭해서 설치하고 싶다 첫번째 Ubuntu 클릭 4. 설치 클릭 설치를 클릭하면 다운로드가 시작된다 다운로드가 완료되면 열기라는 클릭 버튼이 생긴다 "열기"를 눌러보자 창이 뜨고 시간을 좀 기다리면 다음 화면이 된다. 본인이 원하는 리눅스 이름을 설정해주면 된다 비밀번호도 본인이 원하는것으로 설정하자. 완성 5. 윈도우에 명령프롬프트 창을 실행시켜보자 윈도우 키를 누르고 cmd 입력 후 엔터 다음 명령어를 입력해서 wsl 어떤 것이 깔려있는지 확인해보자 wsl -l -v 방금 설치한 우분투가 기본값으로 잘 설정 돼 있다. 다음 명령어로 접속해보자 wsl

Operating System/Linux

[WSL] WSL 삭제하기

1. powershell 관리자 권한으로 실행하기 2. wsl 설치돼있는지 확인하기 wslconfig.exe /l 3. 설치된 wsl ubuntu 삭제하기 wslconfig.exe /u Ubuntu-18.04 4. wsl 확인하기 wslconfig.exe /l

Operating System/Docker

[docker] 도커 컴포즈로 주키퍼 카프카 컨테이너 만들기

1. 바탕화면에 docker_test 라는 이름을 가진 폴더 만들기 2. 메모장을 열어서 다음 내용 복사 붙여넣기 version: "2.2" services: # zookeeper 3.4.6 zookeeper: hostname: zookeeper container_name: zookeeper image: wurstmeister/zookeeper:3.4.6 ports: - "2181:2181" # kafka 2.12-2.3.0 kafka: hostname: kafka container_name: kafka image: wurstmeister/kafka:2.12-2.3.0 ports: - "9092:9092" environment: KAFKA_ZOOKEEPER_CONNECT: zookeeper:2181 KA..

Data Engineering/AI

[NLP] 코랩에 konlpy 설치 후 okt 사용해보기

1. 라이브러리 설치 # bash 셸로 명령어 입력하여 라이브러리 설치하기 %%bash apt-get update apt-get install g++ openjdk-8-jdk python-dev python3-dev pip3 install JPype1 pip3 install konlpy 2. 환경설정 # JAVA_HOME 환경변수 설정하기 %env JAVA_HOME "/usr/lib/jvm/java-8-openjdk-amd64" 3. okt 테스트 # okt 사용해보기 from konlpy from konlpy.tag import Okt okt=Okt() # 형태소 print("okt.morphs : ", okt.morphs('안녕하세요. 저는 딥러닝 입니다.')) # 명사 print("okt.nouns..

Data Engineering/AI

[NLP] 코랩에 konlpy 설치 후 Komaran 사용해보기

1. 라이브러리 설치 # bash 셸로 명령어 입력하여 라이브러리 설치하기 %%bash apt-get update apt-get install g++ openjdk-8-jdk python-dev python3-dev pip3 install JPype1 pip3 install konlpy 2. 환경변수 설정 # JAVA_HOME 환경변수 설정하기 %env JAVA_HOME "/usr/lib/jvm/java-8-openjdk-amd64" 3. 테스트 # Komaran 사용해보기 from konlpy from konlpy.tag import Komoran komoran=Komoran() # 형태소 print("komoran.morphs : ", komoran.morphs('안녕하세요. 저는 딥러닝 입니다.')..

Data Engineering/AI

[NLP] 코랩에 konlpy 설치 후 Kkma 사용해보기

1. 라이브러리 설치 # bash 셸로 명령어 입력하여 라이브러리 설치하기 %%bash apt-get update apt-get install g++ openjdk-8-jdk python-dev python3-dev pip3 install JPype1 pip3 install konlpy 2. 자바 환경변수 설정 # JAVA_HOME 환경변수 설정하기 %env JAVA_HOME "/usr/lib/jvm/java-8-openjdk-amd64" 3. 형태소 테스트 # Kkma 사용해보기 from konlpy from konlpy.tag import Kkma kkma=Kkma() # 형태소 print("kkma.porphs : ", kkma.morphs('안녕하세요. 저는 딥러닝 입니다.')) # 명사 prin..

Data Engineering/AI

[NLP] 코랩에 konlpy 설치 후 Hannanum 사용해보기

1. 라이브러리 설치 # bash 셸로 명령어 입력하여 라이브러리 설치하기 %%bash apt-get update apt-get install g++ openjdk-8-jdk python-dev python3-dev pip3 install JPype1 pip3 install konlpy 2. 환경변수 설정 # JAVA_HOME 환경변수 설정하기 %env JAVA_HOME "/usr/lib/jvm/java-8-openjdk-amd64" 3. hannanum 테스트 # Hannanum 사용해보기 from konlpy from konlpy.tag import Hannanum hannanum = Hannanum() # 형태소 print("hannanum.morphs : ", hannanum.morphs('안녕하..

Data Engineering/AI

[NLP] 코랩에 konlpy 설치 후 mecab 사용해보기

1. 필수 라이브러리 설치 # bash 셸로 명령어 입력하여 라이브러리 설치하기 %%bash apt-get update apt-get install g++ openjdk-8-jdk python-dev python3-dev pip3 install JPype1 pip3 install konlpy 2. 환경변수 설정하기 # JAVA_HOME 환경변수 설정하기 %env JAVA_HOME "/usr/lib/jvm/java-8-openjdk-amd64" 3. Mecab 설치하기 # bash 셸로 명령어 입력하여 mecab 설치하기 %%bash bash

Operating System/Docker

[docker] 도커에 파이썬 컨테이너 생성해서 사용해보기

1. 파이썬 이미지 찾기 docker search python 2. 도커 파이썬 컨테이너 생성 후 실행하기 docker run -it --rm --name python python 3. hello world 출력해보기 print("hello world") 2*5 출력해보기 print(2*5) 4. 새로운 터미널 열어서 현재 도커 컨테이너 확인하기 docker ps 파이썬 종료하기 exit() 실행중인 컨테이너 확인하기 docker ps 전체 컨테이너 확인하기 docker ps -a 도커 이미지 확인하기 docker images 도커 이미지 삭제 docker rmi 1e76b28bfd4e

박경태
'분류 전체보기' 카테고리의 글 목록 (97 Page)