Apache Airflow
Apache Airflow에 대한 개요와 핵심 용어, 아키텍처, DAG(Directed Acyclic Graph)의 생성 및 실행 과정, Web UI, 내장 및 외부 Operator, Catch Up과 Backfill과 같은 데이터 처리 및 실행 제어 기능에 대해 설명합니다.
AWS Solution 및 기술 관련 카테고리
Apache Airflow에 대한 개요와 핵심 용어, 아키텍처, DAG(Directed Acyclic Graph)의 생성 및 실행 과정, Web UI, 내장 및 외부 Operator, Catch Up과 Backfill과 같은 데이터 처리 및 실행 제어 기능에 대해 설명합니다.
Keynotes Innovation Talk Break out
Keynotes Leadership Break out Dev Chat
이 개발자 채팅에서는 AWS Lambda, AWS Step Functions 및 Amazon Rekognition 과 같은 AWS 서버리스 서비스를 사용하여 스마트 초인종을 구축하는 모범 사례에 대한 설명합니다.
실시간 분석을 위해 스트리밍 데이터 분석 아키텍처를 현대화한 방법을 공유하며 Apache Flink용 Amazon Kinesis Data Analytics를 사용하여 자체 관리형 Apache Spark에서 완전 관리형 스트림 처리 플랫폼으로 전환한 방법과 완전 관리형 Kinesis Data Streams 및 Amazon MSK를 사용하여 규모에 맞게 데이터를 안전하게 스트리밍합니다.
AWS 에서 설계한 세 번째 DL (Deep Learning) / Inf1 Typoe 대비 최대 4배 높은 처리량 및 10배 낮은 지연시간 / 저렴한 비용
Block Public Access : S3 버킷에 적용하여 데이터 보안 설정 / Encryption : 버킷 레벨에서 기본 암호화 설정 활성화, S3 버킷 키를 통해 AWS KMS 비용 감소 / Bucket Policies : 범위를 지정하기 위해 deny 문구 사용 / Disable ACLs : 버킷 소유자가 S3 Object 소유권에 대해 ACLs를 비활성화 / IAM Access Analyzer and logging your request : IAM Access Analyzer을 통해 허용 설정 확인 및 S3 Server Access log와 Cloudtrail을 통해 Bucket에 대한 기록
Building at Amazon / Coupang data platform and architecture / Wrap up
SmartThings란? / Home IoT platform의 핵심요소 / SmartThings에 Amazon MemoryDB for Redis를 적용한 이유
Oracle 기반 온프레미스 시스템의 AWS 마이그레이션 / NAB((National Australia Bank)는 1981년 2개 은행이 합병하여 설립