IT Log

Hive 구성 : newly0513.tistory.com/147 요구사항 Java 1.8 이상 설치 : yum install -y java-1.8.0-openjdk-devel.x86_64 Hadoop Hadoop 구성 : newly0513.tistory.com/144 Hive Hive 구성 : newly0513.tistory.com/147 Connector/J 8.0.21 Local Metastore MySQL Community Server 8.0.21 RPM Download & Install wget http://repo.mysql.com/mysql80-community-release-el7-3.noarch.rpm; \ rpm -ivh mysql80-community-release-el7-3.noarc..

CentOS 7 PostgreSQL 원격접속 : https://newly0513.tistory.com/164 PostgreSQL Yum Repository 1. Install the repository RPM yum install -y https://download.postgresql.org/pub/repos/yum/reporpms/EL-7-x86_64/pgdg-redhat-repo-latest.noarch.rpm 2. Install PostgreSQL # PostgreSQL13 yum install -y postgresql13-server # PostgreSQL12 yum install -y postgresql12-server # PostgreSQL11 yum install -y postgresql11..

CentOS 7 MySQL 8.0 Install : https://newly0513.tistory.com/161 Install MySQL 1. Download Repository 2가지 방법 중 선택하여 Download 합니다. # repo wget http://repo.mysql.com/mysql57-community-release-el7-11.noarch.rpm # dev wget https://dev.mysql.com/get/mysql57-community-release-el7-11.noarch.rpm 2. Install Repository Repository 설치합니다. rpm -ivh mysql57-community-release-el7-11.noarch.rpm 3. Repository Chec..

기본 구성 매개변수 (Basic Configuration Parameters) 구성 매개변수 설명 javax.jdo.option.ConnectionURL Metadta를 포함하는 데이터 저장소에 대한 JDBC 연결 문자열 javax.jdo.option.ConnectionDriverName Metadta를 포함하는 데이터 저장소의 JDBC 드라이버 클래스 이름 hive.metastore.uris Hive는 이러한 URI 중 하나에 연결하여 원격 Metastore에 대한 메타 데이터 요청을 수행합니다. (쉼표로 구분 된 URI 목록) hive.metastore.local 로컬 또는 원격 메타 스토어 (Hive 0.10부터 제거됨 : hive.metastore.uris가 비어있는 경우 로컬 모드, 그렇지 않으..

[이전 단계] Zookeeper 구성 (Standalone) : https://newly0513.tistory.com/146 [다음 단계] HBase 구성 (Standalone) : newly0513.tistory.com/149 요구사항 (Requirements) 지원되는 플랫폼 GNU/LINUX Solaris FreeBSD Windows Mac OS X 필수 소프트웨어 Java 1.8 이상 ( JDK 8 LTS, JDK 11 LTS, JDK 12-Java 9 및 10은 지원되지 않음 ) 최소 3대의 Zookeeper 서버 클러스터 모드 (Clustered Setup) 홀수 서버 사용 권장 유지보수 중 최대의 안정성을 위해 5개의 서버를 설치 Download 진행 노드 : master 위치 : /usr/..

[이전 단계] Hive 구성 : https://newly0513.tistory.com/147 [다음 단계] Zookeeper 구성 ( Multi-Server ) : https://newly0513.tistory.com/148 요구사항 (Requirements) 지원되는 플랫폼 GNU/LINUX Solaris FreeBSD Windows Mac OS X 필수 소프트웨어 Java 1.8 이상 ( JDK 8 LTS, JDK 11 LTS, JDK 12-Java 9 및 10은 지원되지 않음 ) 독립형 모드 ( Standalone ) Download 진행 노드 : master 위치 : /usr/local stable 버전을 다운로드 합니다. cd /usr/local; \ wget http://apache.mirro..

[이전 단계] Hadoop 완전 분산 모드(Fully-Distributed) : https://newly0513.tistory.com/144 [다음 단계] Zookeeper : https://newly0513.tistory.com/146 요구사항 (Requirements) Java Hive 1.2 이상인 경우 Java 1.7 이상 필요 Hive 0.14~1.1은 Java 1.6 이상 필요 Java 1.8 을 권장 Hadoop Hadoop 2.x 권장 Hadoop 1.x ( Hive 2.0.0 이상은 지원X ) 플랫폼 Linux Windows ( 사용하려면 약간 다른 단계 필요 ) Mac 설치 (Install) 진행 노드 : master 위치 : /usr/local cd /usr/local; \ wget ..

vi 텍스트 편집기 Linux에서 가장 많이 사용되는 텍스트 편집기로, 파일을 생성하거나 편집할 때 사용합니다. 사용법 : vi 파일명 이미 있는 파일명일 경우 해당 파일에 작성된 텍스트를 보여주고, 새로운 파일명의 경우 빈 화면이 출력된다. 모드 입력모드 : 직접 텍스트를 입력하여 작성할 수 있는 상태 명령모드 : 명령을 이용하여, 텍스트를 복사/붙여넣기/삭제 등 편집할 수 있는 상태 각 상태는 편집하는 파일 좌측하단에 'INSERT' 출력 여부로 구분할 수 있습니다. 모드 변경 입력모드와 명령모드를 변경할 수 있는 명령들 입니다. 명령모드 → 입력모드 설명 i 커서가 있는 위치부터 입력 I 커서가 있는 줄의 맨 앞에서부터 입력 a 커서 위치의 한 칸 오른쪽부터 입력 A 커서가 있는 줄의 마지막 텍스트..