본문 바로가기

AWS3

AWS Summit Korea 2022- DevOpsGuru DevOps Guru 관찰가능성? 제어 이론에서는 시스템의 외부출력 정보로 시스템의 내부 상태를 얼마나 잘 추론 할 수 있는지를 의미한다. 자제 관찰 가능성 요구사항에 AWS CloudWatch가 사용된다. 로그 Cloudwatch 에인전트를 통해 API 호출 및 기타 메커니즘을 사용하여 AWS뿐만 아니라 온프레미스 리소스의 환경에서도 수집 할 수 있다. 로그 인사이트에서 쿼리 언어를 사용하여 여러 로그 그룹에서 로그 데이터를 분석할 수 있다. 내용 및 수집 이유 시간 경과에 따른 발생한 개별 이벤트에 대한 타임스탬프가 기록되어 있어서 긴급하고 예측할 수 없는 행동을 발견하는데 유요하다. 메트릭 Cloudwatch 에인전트로 메트릭을 수집한다. 기본적인 하이퍼바이저에서 수집되는 메트릭뿐만 아니라 메모리나.. 2023. 6. 29.
AWS Glue + AWS Glue Studio + Redshift + Athena + QuickSight Glue AWS Serverless Data Catalog & ETL Service ETL Terms Meta Data : 데이터의 위치, 파일 형식, 압축 유형, 레코드 크기, 레코드 수, 컬럼 타입 Data Catalog : 메타 데이터 저장소, 메타 데이터를 이용하여 보통의 테이블처럼 접근 Crawling : 정형, 비정형, 반정형 소스 데이터로부터 Data Catalog 생성하는 작업 ETL : 추출 (Extract), 변환 (Transform), 적재 (Load) 작업 – 실제 분석의 전단계 Database & Table : 메타데이터를 table 형태로 저장한 객체 및 저장소 Job : Crawling 또는 ETL 실행 작업 Workflow : 연속적인 Job 의 묶음 Glue: Data Ca.. 2023. 6. 29.
aws lambda asynchronously 예약 동시성 0의 비동기처리 변경 AWS에서 lambda의 설정에서 예약 동시성이 0으로 설정되어 있을 때 AWS 람다 함수의 비동기 호출 작동 방식을 바꾸고 있는 이슈입니다. 예약된 동시성을 0으로 설정한 lambda가 아니면 해당하지 않습니다. '예약된 동시성이 0' 과 '예약되지 않은 계정 동시성 사용' 은 다른 의미입니다. 예약된 동시성을 0으로 설정하시면 제한을 제거할 때까지 모든 이벤트가 처리되지 않습니다. 따라서 함수가 예약된 동시성 0 으로 설정되면 동시성이 0으로 설정되기 때문에 해당 함수는 이벤트를 처리할 수 없으며 함수의 모든 호출 시도가 제한됩니다. 비동기식 기능의 경우 2021년 8월 16일 이후에는 이벤트가 재시도되지 않고 DLQ 또는 오류 발생 시 이벤트 대상으로 전송됩니다. 기존의 기능과 동일하지만 유일한 변.. 2023. 6. 26.

티스토리툴바