Amazon Managed Workflows for Apache Airflow(MWAA) 정식 출시

2020-12-01 KENNETH 0

Amazon Managed Workflows for Apache Airflow(MWAA) 정식 출시 데이터 처리 파이프라인의 양과 복잡성이 증가함에 따라 전체 프로세스를 일련의 작은 태스크로 분해하여 간소화하고 워크플로의 일부로 이러한 태스크의 실행을 조정할 수 있습니다. 이를 위해 많은 개발자와 데이터 엔지니어가 커뮤니티에서 만든 플랫폼인 Apache Airflow를 사용하여 워크플로를 프로그래밍 방식으로 작성, 예약 및 모니터링합니다. Airflow를 사용하면 워크플로를 스크립트로 관리하고, 사용자 인터페이스(UI)를 통해 모니터링하며, 강력한 플러그인 세트를 사용해 기능을 확장할 수 있습니다. 그러나 Airflow를 수동으로 설치, 유지 관리 및 확장하는 동시에 사용자의 보안, 인증 및 권한 부여를 처리하려면 실제 비즈니스 문제 해결에 쏟는 시간보다 더 많은 시간이 할애됩니다. 이러한 이유로 AWS에서 오픈 소스 버전의 Apache Airflow를 쉽게 실행하고 추출-변환-로드(ETL) 작업 및 데이터 파이프라인을 실행할 워크플로를 구축할 수 있는 완전관리형 서비스, Amazon Managed Workflows for Apache Airflow(MWAA)의 출시 소식을 전하게 되어 정말 기쁩니다. Airflow 워크플로는 Amazon Athena 쿼리를 사용하여 Amazon Simple Storage Service(S3)와 같은 소스에서 입력을 검색하고, [ more… ]

CodeBuild Report를 통한 UnitTest 및 Code Coverage 시각화

2020-11-30 KENNETH 0

CodeBuild Report를 통한 UnitTest 및 Code Coverage 시각화 유닛테스트는 모듈의 기능을 테스트 할 수 있는 작은 단위의 효과적인 테스트입니다. 하나의 소프트웨어는 여러개의 모듈로 이루어져있으며 유닛테스트는 이런 각각의 모듈이 정상적으로 기능을 수행하는지 시험할 수 있는 최소 수준의 시험단위를 뜻합니다. AWS CodeBuild에서는 유닛테스트와 코드 커버리지의 결과를 시각화하여 리포트로 받아볼 수 있습니다. 덕분에 CI/CD 파이프라인의 일부로서 CodeBuild 를 보다 효과적으로 활용할 수 있게 되었습니다. CodeBuild 보고서가 지원하는 테스트 보고서 파일 형식은 다음과 같습니다. Cucumber JSON JUnit XML NUnit XML NUnit3 XML TestNG XML Visual Studio TRX 샘플 코드는 https://github.com/aws-samples/amazon-cicd-concurrency-sample-application.git 을 사용하였습니다. HashMap의 동시성 이슈를 가지고 있으며 테스트를 위해 Junit으로 유닛테스트를 수행하고 있습니다. 또한 얼마나 많은 범위를 테스트하고 있는지 Jacoco를 이용해 코드 커버리지를 측정하고 있습니다. 해당 유닛테스트와 코드 커버리지 도구에 대한 정보는 Junit, Jacoco를 검색해보세요. 먼저 유닛테스트 보고서를 만들기위해 보고서의 결과 경로를 buildspec에 추가한 후 CodeBuild Report에서 리포트 그룹을 생성합니다. 1. 오른쪽 Build 탭의 [ more… ]

AWS re:Invent 2020 라이브 블로그: Andy Jassy 기조 연설

2020-11-30 KENNETH 0

AWS re:Invent 2020 라이브 블로그: Andy Jassy 기조 연설 저는 항상 새로운 것을 시도할 준비가 되어 있습니다! 올해에는 Andy Jassy의 AWS RE:INVENT 기조 연설titletitle을 라이브 블로그에 게시할 예정입니다. 이 기조 연설은 12월 1일(화요일) 오전 8시부터 오전 11시까지 진행될 예정입니다(태평양 표준시). 저는 홈 오피스에서 편안하게 Andy의 연설을 시청하면서 이 게시물을 몇 분마다 업데이트할 예정입니다. 향후 업데이트를 기다려 주세요! — Jeff (본 라이브 블로그 업데이트는 영문으로 실시간으로 이루어집니다. 한국 시간 12월 2일 새벽 1시 부터 re:Invent 2020 Liveblog: Andy Jassy Keynote을 참고하세요. 한국어 버전은 키노트 후에 업데이트 될 예정입니다.) Source: AWS re:Invent 2020 라이브 블로그: Andy Jassy 기조 연설

AWS 주간 소식 모음 – 2020년 11월 30일

2020-11-30 KENNETH 0

AWS 주간 소식 모음 – 2020년 11월 30일 안녕하세요! 여러분~ 매주 월요일 마다 지난 주 업데이트된 국내 AWS관련 콘텐츠를 정리해 드리는 AWS 주간 소식 모음입니다. 드디어 이번 주 부터 AWS re:Invent 2020이 시작됩니다. 참여하시는 분들은 AWS re:Invent 온라인으로 3주간 함께 합니다! – 한국 고객을 위한 5가지 팁을 참고하시고, 아래 일정을 보시고 필요한 부분에 꼭 참여해 보시기 바랍니다. 앞으로 3주간은 월요일 주간 소식 모음은 쉬고, 리인벤트 주간 리뷰로 만나뵙도록 하겠습니다. 지금 바로 등록하기≫ AWS코리아 블로그 새로운 기능 – AWS Lambda를 위한 신뢰 및 무결성 제어를 위한 코드 서명 기능 출시 (2020-11-27) 새로운 기능 – AWS SSO용 WebAuthn을 통한 Multi-Factor Authentication (2020-11-27) AWS Managed Microsoft Active Directory를 위한 다중 리전 복제 기능 제공 (2020-11-24) Amazon S3 Storage Lens 소개 – 객체 스토리지에 대한 기업 전반의 가시성 제공 (2020-11-24) Amazon SageMaker Studio, 서울 리전 출시 (2020-11-24) AWS re:Invent 온라인으로 3주간 함께 합니다! – [ more… ]

새로운 기능 – AWS Lambda를 위한 신뢰 및 무결성 제어를 위한 코드 서명 기능 출시

2020-11-27 KENNETH 0

새로운 기능 – AWS Lambda를 위한 신뢰 및 무결성 제어를 위한 코드 서명 기능 출시 코드 서명은 코드가 변경되지 않고 그대로 유지되며 신뢰할 수 있는 게시자로부터 제공되었는지를 확인하기 위해 사용되는 업계의 표준 기술입니다. AWS Lambda 함수 내에서 실행되는 코드는 고도로 강화된 시스템에서 실행되며 안전한 방식으로 실행됩니다. 그러나 함수 코드는 AWS 외부에서 실행되는 배포 파이프라인을 통해 이동하기 때문에 손상되기 쉽습니다. 오늘 우리는 AWS Lambda용 코드 서명을 출시합니다. 코드 서명은 관리자가 Lambda 함수에서 신뢰할 수 있는 게시자가 제공한 서명된 코드 패키지만 실행하고 서명 이후에는 코드가 변경되지 않도록 강제할 수 있도록 지원하는 신뢰 및 무결성 제어입니다. Lambda용 코드 서명은 Lambda에 신뢰할 수 있는 코드만 배포되도록 하는 최상의 메커니즘을 제공합니다. 따라서 조직이 배포 파이프라인에서 게이트키퍼 구성 요소를 빌드해야 하는 부담이 줄어듭니다. AWS Lambda용 코드 서명은 AWS의 완전 관리형 코드 서명 서비스인 AWS Signer를 활용합니다. 관리자는 서명을 만드는 데 사용되는 AWS Signer의 리소스인 서명 프로필을 [ more… ]