Apache Zeppelin 내부 통신Apache Zeppelin은 다양한 언어 인터프리터와 통합하여 데이터 분석 작업을 수행할 수 있는 오픈 소스 노트북 애플리케이션임.이 과정에서 Zeppelin은 내부적으로 다양한 통신 메커니즘을 사용하여 여러 구성 요소 간에 데이터를 교환함.Zeppelin의 내부 통신을 이해하기 위해서는 다음의 주요 요소들을 이해해야 함. 인터프리터와 인터프리터 프로세스Apache Zeppelin의 가장 중요한 기능 중 하나는 다양한 언어(파이썬, 스칼라, SQL 등)를 지원하는 인터프리터임.각 언어마다 별도의 인터프리터가 존재하며, 이러한 인터프리터는 Zeppelin 인터프리터 프로세스 내에서 실행됨.이 프로세스는 사용자가 제출한 코드를 해당 언어로 실행하고 결과를 반환하는 역할..
원본 코드package org.apache.zeppelin.python;import org.apache.commons.codec.binary.Base64;import org.slf4j.Logger;import org.slf4j.LoggerFactory;import py4j.GatewayServer;import java.io.IOException;import java.net.Inet4Address;import java.net.InetAddress;import java.net.UnknownHostException;import java.security.SecureRandom;import java.util.Properties;public class PythonUtils { private static final..
원본 코드package org.apache.zeppelin.python;import org.apache.zeppelin.interpreter.ZeppelinContext;import org.apache.zeppelin.interpreter.InterpreterHookRegistry;import java.util.List;import java.util.Map;/** * ZeppelinContext for Python */public class PythonZeppelinContext extends ZeppelinContext { public PythonZeppelinContext(InterpreterHookRegistry hooks, int maxResult) { super(hooks, maxResu..
해결 방법sudo ln -sf /Applications/Docker.app/Contents/Resources/cli-plugins/docker-compose /usr/local/bin/docker-compose참고https://github.com/docker/for-mac/issues/7345
Apache Thrift란Apache Thrift는 다양한 프로그래밍 언어 간에 효율적으로 서비스를 정의하고 상호 운영할 수 있도록 설계된 인터페이스 정의 언어 및 바이너리 통신 프로토콜임.Thrift는 원래 페이스북에서 개발됐으며, 이후 아파치 소프트웨어 재단에 기부되어 현재 오픈 소스 프로젝트로 관리됨. Apache Thrift의 주요 기능 및 개념1. 인터페이스 정의 언어Thrift는 IDL을 사용하여 서비스 인터페이스 및 데이터 구조를 정의함.이 정의는 Thrift 컴파일러를 사용하여 여러 프로그래밍 언어의 클라이언트 및 서버 코드를 생성하는 데 사용됨.예를 들어, Thrift 파일 (.thrift)에서 데이터 구조와 서비스 메서드를 정의하면, 이를 바탕으로 Java, Python, C++, Go..
원본# Licensed to the Apache Software Foundation (ASF) under one or more# contributor license agreements. See the NOTICE file distributed with# this work for additional information regarding copyright ownership.# The ASF licenses this file to You under the Apache License, Version 2.0# (the "License"); you may not use this file except in compliance with# the License. You may obtain a copy of the ..
아파치 제플린이란?아파치 제플린은 데이터 분석, 시각화, 협업을 위한 웹 기반의 노트북 인터페이스임.다양한 데이터 소스에 접근하여 데이터를 분석하고, 시각화할 수 있으며, 다양한 언어를 지원하여 개발자, 데이터 과학자, 분석가가 함께 작업할 수 있도록 도와줌. 아파치 제플린의 주요 기능과 특징1. 노트북 인터페이스아파치 제플린은 주피터 노트북과 유사한 웹 기반의 노트북 환경을 제공함.사용자는 코드, 텍스트, 그리고 시각화된 데이터를 같은 노트북에서 함께 다룰 수 있음.노트북 형식으로 작업을 문서화하고, 분석 과정을 공유하거나 재현할 수 있음. 2. 다양한 언어 지원아파치 제플린은 여러 프로그래밍 언어를 지원함.기본적으로 Scala, Python, SQL, R 등을 사용할 수 있으며, 플러그인이나 인터프리..
웹페이지 첫 접속 INFO [2024-07-29 21:33:10,314] ({qtp730923082-36} NoAuthenticationService.java[]:38) - NoAuthenticationService is initialized WARN [2024-07-29 21:33:10,321] ({qtp730923082-36} SecurityRestApi.java[ticket]:82) - {"status":"OK","message":"","body":{"principal":"anonymous","ticket":"anonymous","roles":"[]"}} WARN [2024-07-29 21:33:10,396] ({qtp730923082-28} ClusterRestApi.java[]:66) - Cl..
시작지점ZeppelinServerzeppelin-server/src/main/java/org/apache/zeppelin/server/ZeppelinServer.java public static void main(String[] args) throws Exception { ZeppelinConfiguration conf = ZeppelinConfiguration.load(); conf.printShortInfo(); try (ZeppelinServer server = new ZeppelinServer(conf)) { server.startZeppelin(); } } ZeppelinConfigurationzeppelin-interpreter/src/main/java/org..
1. Docker Desktop 설치https://www.docker.com/products/docker-desktop/ 2. hyperkit 버전 확인hyperkit -version 3. kubernetes-cli 설치brew install kubernetes-cli 4. minikube 설치brew install minikube 5. minikube 실행minikube startkubectl versionkubectl get componentstatuses 6. 쿠버네티스 대시보드 보기minikube dashboard
