본문 바로가기

Database

(6)
[실습] Amazon Managed Workflows for Apache (MWAA) 구성하기 안녕하세요 서후아빠입니다. ^_^ 이번 세션은 Amazon Managed Workflows for Apache (MWAA = Airflow)을 사용하는 방법에 대해서 실습해 보도록 하겠습니다. Airflow를 구성하기 위해서는 3가지 역량이 필요합니다. 1단계 WorkFlow(DAG) 작성을 위한 Python 작성 능력, 2단계 Airflow 아키텍처 구성 능력, 3단계 데이터 정합성 확인 능력입니다. 1단계 및 3단계는 WorkFlow를 잘 알고 있는 직원이 진행하는 것이 적합하므로 가급적 고객이 처리하도록 협의하시기 바랍니다. AWS MWAA 구분 내용 설명 스크립트로 데이터 파이프라인 구성 및 관리하는 도구로서 DAG(Directed Acyclic Graph)로 워크플로우 정의 사용자 인터페이스로 ..
[이른/실습] Amazon OpenSearch Service-1편(생성) 안녕하세요 서후아빠입니다. ^_^ 이번 세션은 Amazon OpenSearch Service에 대해서 업무적으로 필요한 최소한의 개념과 사용방법에 대해서 정리해 보았습니다. 그리고 콘솔에서 지원되지 않는 스냅샷과 복원까지 알아보도록 하겠습니다. 개요 OpenSearch는 기존에 ElasticSearch로 알려진 서비스와 호환되는 서비스입니다. 원래는 AWS에서 ElasticSearch로 서비스를 하던 중, 양사간 분쟁이 발생함에 따라 AWS에서 OpenSearch로 이름을 바꾸고 서비스를 유지하고 있으며, 기능은 ElasticSearch에 비해 줄어들었다는 이야기가 있습니다. OpenSearch는 오픈 소스 기반으로 검색 및 분석에 특화된 서비스이며, 주로 애플리케이션 모니터링과 로그 분석 및 시각화에 ..
[실습] RDS 생성하기 (MySQL) 안녕하세요 서후아빠입니다. ^_^ 이번 세션은 Amazon RDS를 생성하는 실습을 해보겠습니다. 애플리케이션에서 RDS로 연결하는 과정은 생략하였습니다. 구성도 사전 작업 인프라 생성 : vpc, subnet, igw, routing table, ec2 등은 설명 생략합니다. 2022.07.02 - [Networking] - [실습] Amazon VPC 구성요소 생성하기 [실습] Amazon VPC 구성요소 생성하기 안녕하세요 서후아빠입니다. ^_^ 이번 세션은 VPC 관련 구성요소에 대해서 실습을 해보겠습니다. 구성도 1단계 : VPC 생성 VPC > Your VPCs > Create VPC 구분 VPC settings (VPC Only 방식) VPC settings (VPC a.. sh-t.tist..
[이론] AWS Database 기본 개념 안녕하세요 서후아빠입니다. ^_^ 이번 세션은 AWS Database에 대해서 업무적으로 필요한 최소한의 개념에 대해서 간단히 정리해 보았습니다. Database RDS : MSSQL, Oracle(Oracle OLAP), MySQL, PostgreSQL, MariaDB - MSSQL, Oracle : 별도 라이선스 비용 발생(자신의 라이선스 사용 가능) NoSQL : DynamoDB, DocumentDB, ElasticCashe EC2 인스턴스에서 동작 : OS를 AWS에서 관리하기 때문에 SSH로 액세스 불가능 Public IP 할당 : 필요한 경우 DNS로 접근 가능 스토리지 : EBS 활용, 고정 용량 설정, 추후 용량 증설 가능 CloudWatch 연동 : Log(error, general 등)..
[Tip] AWS DMS endpoint 실패 조치하기 안녕하세요 서후아빠입니다. ^_^ 이번 세션은 AWS DMS로 Migration 중인 엔드포인트 실패에 대한 메시지와 조치 방법에 대해서 간단히 알아보겠습니다. 확인 방법 엔드포인트 연결 테스트 확인 : DMS > Endpoint > 엔드포인트 선택(예: rds-ep) > endpoint connection test - Endpoint identifier : rds-ep - Status : failed - Message : The endpoint failed: Application-Status: ..... RetCode: SQL_ERROR SqlState: HY000 NativeErrpr: 1045 Message: [unixODBC][MySQL][ODBC 8.0(w) Driver]Access denied..
[Tip] Amazon RDS 서브넷 그룹 (Subnet groups) 생성 Error 조치 방법 알아보기 안녕하세요 서후아빠입니다. ^_^ 이번 세션은 Amazon RDS 서브넷 그룹 생성 시 발생되는 Error에 대해서 조치하는 방법에 대해서 알아보겠습니다. Error 메시지 "죄송합니다. DB 서브넷 그룹 ****** 생성 요청이 실패했습니다. DBSubnetGroupDescription 매개변수를 제공해야 하며 비워 둘 수 없습니다." DB 서브넷 그룹 생성 시 설명(Description) 입력 항목 내용이 비어 있기 때문에 발생한 Error입니다. 보통 Description 비어 있어도 Error가 발생하지 않는데, DB 서브넷 그룹은 특이하게 Error가 발생하였습니다. 조치 방법 RDS > Subnet groups > Create DB subnet group > Name 아래 Description..