aws

AWS 주간 소식 모음 – 2019년 2월 18일 안녕하세요! 여러분~ 매주 월요일 마다 지난 주에 업데이트된 국내 AWS관련 콘텐츠를 정리해 드립니다. AWS 클라우드에 대한 새로운 소식을 확인하시는데 많은 도움 되시길 바랍니다. 혹시 빠지거나 추가할 내용이 있으시면, 저에게 메일 주시면 추가 공유해 드리겠습니다. 지난 주에는 다가오는 4월 17일-18일 양일간 개최되는 국내 최대 클라우드 행사인 AWS Summit 2019 행사 등록을 시작하였습니다. 자세한 사항은 홈페이지를 참고해 주시기 바랍니다.   AWS코리아 블로그 Amazon EC2 신규 베어 메탈 인스턴스: M5, M5d, R5, R5d (서울 리전 포함) 및 z1d 정식 출시 (2019-02-18) Amazon Elastic File System(EFS) Infrequent Access Storage 클래스 정식 출시 (서울 리전 포함) (2019-02-18) Amazon EMR의 Amazon S3기반 Apache HBase로의 이관: 가이드라인과 모범 사례 (2019-02-16) Amazon EMR 클러스터 스토리지의 동적 스케일링 (2019-02-15) 국내 금융사를 위한 ‘AWS 금융 고객 성공 사례집'(PDF) 공개 (2019-02-14) Amazon Kinesis와 Amazon Athena를 활용한 VPC 네트워크 트래픽의 분석과 시각화 (2019-02-14) AWS [ more… ]

Amazon Elastic File System(EFS) Infrequent Access Storage 클래스 정식 출시 (서울 리전 포함) Amazon Elastic File System에서 페타바이트급의 파일 시스템을 생성하고, 애플리케이션 중단 없이 온디맨드로 크기를 조정하면서 수백 또는 수천 개 EC2 인스턴스 및 온프레미스 서버에서 고도로 병렬화된 방식으로 이러한 파일 시스템에 액세스할 수 있습니다. EFS가 출시된 2016년 중반 이후로 저장된 데이터 및 전송 중 데이터의 암호화, 많은 공간을 차지하지 않는 파일 세트 액세스 시 높은 처리량이 요구되는 경우를 위한 프로비저닝된 처리량 옵션, AWS Direct Connect를 통한 온프레미스 액세스, EFS 파일 동기화, AWS VPN 및 리전 간 VPC 피어링 등 다수의 새로운 기능이 추가되었습니다. 신규 EFA Infrequent Access Storage 클래스 오늘은 AWS re:Invent에서 미리 발표된 새로운 Amazon EFS Infrequent Access Storage 클래스에 대해 알려드리려고 합니다. EFS 파일 시스템에 대한 새로운 수명 주기 관리 옵션의 일부로, 이제 지난 30일간 액세스하지 않은 파일을 85% 저렴한 스토리지 클래스로 이동할 수 있습니다. 새 EFS [ more… ]

Amazon EMR의 Amazon S3기반 Apache HBase로의 이관: 가이드라인과 모범 사례 Amazon EMR 버전 5.2.0 이상에서는 Amazon S3기반 Apache HBase를 실행할 수 있습니다. Amazon S3을 Apache HBase용 데이터 스토어로 사용하면 클러스터의 스토리지와 컴퓨팅 노드를 분리할 수 있습니다. 이는 클러스터의 크기를 컴퓨팅 요구 사항에 따라 조정하므로 비용이 절감됩니다. 더이상 전체 데이터세트를 클러스터상의 HDFS에 3벌 복제 저장하는 형태로 비용을 지불하지 않아도 됩니다. 많은 고객들이 데이터 스토리지를 위한 Amazon S3를 기반으로 Apache HBase를 실행할 때 따르는 이점을 활용하고 있습니다. 이러한 장점에는 비용 절감, 데이터 내구성, 보다 효율적인 확장성이 포함됩니다. Financial Industry Regulatory Agency(FINRA)와 같은 고객은 Amazon S3 아키텍처상의 Apache HBase로 이전하여 비용을 60%나 절감했습니다. 또한 이러한 고객은 스토리지를 컴퓨팅에서 분리하고 Amazon S3를 스토리지 레이어로 사용함에 따른 운영 혜택도 경험했습니다. 이 백서는 마이그레이션 과정을 단계별로 안내합니다. 또한 해당 백서는 Amazon S3상의 Amazon EMR 기반 Apache HBase를 선택할 시점을 선정하고, 플랫폼 보안을 계획하고, 애플리케이션 SLA를 지원하도록 Apache [ more… ]

Amazon EMR 클러스터 스토리지의 동적 스케일링 Amazon EMR과 같은 관리형 Apache 하둡 환경에서는 클러스터의 스토리지 용량이 가득 찬 경우 손쉽게 대응할 수 있는 솔루션이 없습니다. 이 상황은 고객이 클러스터를 시작할 때 Amazon Elastic Block Store(Amazon EBS) 볼륨을 설정하고 마운트 지점을 구성했기 때문에 발생합니다. 따라서 클러스터가 실행된 후에는 스토리지 용량을 수정하기 어렵습니다. 이를 위한 솔루션은 일반적으로 클러스터에 노드를 추가하고 데이터를 데이터 레이크로 백업한 다음 더 큰 스토리지 용량으로 새 클러스터를 시작하는 방식을 사용합니다. 또는 스토리지를 차지하는 데이터를 폐기 가능한 경우 과다한 데이터를 제거하는 것이 일반적인 방식입니다. 이에 대해 Amazon EMR에서 관리 가능한 방식으로 해결하는 데 도움이 될 수 있게 Amazon EBS의 탄력적 볼륨 기능을 사용하여 스토리지를 동적으로 확장하는 방안에 대해 알려 드리겠습니다. 이 기능을 통해 볼륨을 사용하는 중에도 볼륨 크기를 늘리거나, 성능을 조정하거나, 볼륨 유형을 변경할 수 있습니다. 변경이 적용되는 동안에는 EMR 클러스터를 계속 사용하여 빅 데이터 애플리케이션을 실행할 수 있습니다. [ more… ]