Amazon EMR 6.0.0을 사용하여 Docker로 Spark 애플리케이션 실행하기

2020-08-31 KENNETH 0

Amazon EMR 6.0.0을 사용하여 Docker로 Spark 애플리케이션 실행하기 지난 4월 Amazon EMR 6.0.0 버전을 정식 출시했습니다. Amazon EMR 6.0.0을 사용하면, Spark 사용자가 Docker Hub 및 Amazon Elastic Container Registry(Amazon ECR)의 Docker 이미지를 사용하여 환경 및 라이브러리 종속성을 정의할 수 있습니다. 사용자는 Docker를 사용하여 종속성을 손쉽게 정의하고 개별 작업에 사용할 수 있으므로 개별 클러스터 호스트에 종속성을 설치할 필요가 없습니다. 이 글에서는 EMR 6.0.0에서 Docker를 사용하는 방법을 보여 줍니다. EMR 클러스터를 시작하고 Docker Hub 및 Amazon ECR에서 Docker 컨테이너를 사용하여 Spark 작업을 실행하는 방법에 대해 배우게 됩니다. Hadoop 3 Docker 지원 EMR 6.0에는 Hadoop 3.1.0이 포함되어 있어 YARN NodeManager가 클러스터의 호스트 시스템 또는 Docker 컨테이너 내부에서 직접 컨테이너를 시작할 수 있습니다. Docker 컨테이너는 애플리케이션의 코드가 YARN NodeManager 및 기타 애플리케이션의 실행 환경과 분리되어 실행되는 맞춤형 실행 환경을 제공합니다. 이러한 컨테이너에는 애플리케이션에 필요한 특수 라이브러리가 포함될 수 있으며 R, Python, Python 라이브러리와 같은 [ more… ]

[도서] 알기 쉽게 해설한 자바

2020-08-31 KENNETH 0

[도서] 알기 쉽게 해설한 자바 분야별 신상품 – 국내도서 – 컴퓨터와 인터넷 [도서]알기 쉽게 해설한 자바 김충석 저 | 이한미디어 | 2020년 09월 판매가 28,000원 (0%할인) | YES포인트 0원(0%지급) 탄탄해진 이론과 예제로 자바의 객체지향 개념을 보다 쉽게 설명하고, 개념을 응용한 다양한 예제 수록했다. 새롭게 추가된 JDBC 프로젝트로 학습한 개념을 기반으로 한 자바 응용 프로젝트와 데이터베이스 시스템과 Source: [도서] 알기 쉽게 해설한 자바

[도서] JPA 퀵스타트

2020-08-31 KENNETH 0

[도서] JPA 퀵스타트 분야별 신상품 – 국내도서 – 컴퓨터와 인터넷 [도서]JPA 퀵스타트 채규태 저 | 루비페이퍼 | 2020년 09월 판매가 27,000원 (10%할인) | YES포인트 1,500원(5%지급) 자바 기반의 데이터베이스 연동 기술의 변화를 개념으로만 설명하는 것에 그치지 않고, 하나의 예제를 JDBC, 마이바티스, 하이버네이트로 모두 구현해봄으로써 각 기술의 장단점은 물론 ORM이 등장하게 된 배경을 몸 Source: [도서] JPA 퀵스타트

[도서] 한눈에 보이는 CMYK 배색&톤 가이드 – 아르떼지

2020-08-31 KENNETH 0

[도서] 한눈에 보이는 CMYK 배색&톤 가이드 – 아르떼지 분야별 신상품 – 국내도서 – 컴퓨터와 인터넷 [도서]한눈에 보이는 CMYK 배색&톤 가이드 – 아르떼지 탁연상 저 | DIgitalNew | 2020년 09월 판매가 31,000원 (0%할인) | YES포인트 0원(0%지급) 『한눈에 보이는 CMYK 배색&톤 가이드』는 컬러 디자인 작업에서 배색 작업을 할 때의 현실적인 어려움을 도와주기 위한 책이다. 컬러 이론대로 배색을 하려면 CMYK 색공간이 아닌 HSL과 같은 가상의 색 공간에서 컬 Source: [도서] 한눈에 보이는 CMYK 배색&톤 가이드 – 아르떼지