Public Cloud 28

SageMaker로 Fraud Detection 구현할 때 오류들

1. Template 파일이 없음 원래는 SageMaker에 탬플릿으로 있었던 샘플 중 하나인데, 아예 Fraud Detector라는 새로운 서비스로 생겨나면서, 이 샘플 자체가 deprecated 된 것 같다. 2년 전인데도 이렇다니.. AWS CloudFormation template - Fraud Detection Using Machine Learning AWS CloudFormation template - Fraud Detection Using Machine Learning AWS CloudFormation template This solution uses AWS CloudFormation to automate the deployment of the Fraud Detection Using Mach..

Public Cloud/AWS 2022.08.19

터미널로 aws EC2 인스턴스에 접근할 때 WARNING: REMOTE HOST IDENTIFICATION HAS CHANGED! 오류 해결

ssh -i "aws_key.pem" ec2-user@docker.cloudywinter.shop @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ @ WARNING: REMOTE HOST IDENTIFICATION HAS CHANGED! @ @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ IT IS POSSIBLE THAT SOMEONE IS DOING SOMETHING NASTY! Someone could be eavesdropping on you right now (man-in-the-middle attack)! It is also possible that a host key has ..

Public Cloud/AWS 2022.07.25

AWS - 스토리지 추가 기능

AWS Snow Family(제품군) - 스노우 제품군은 데이터 마이그레이션을 수행하기 위해 사용하는 오프라인 장치이다. - 보안이 뛰어나고, 휴대성이 있다. - edge에서 데이터를 모으고 처리하기 위해 사용된다. - 혹은 데이터를 AWS 안팎으로 마이그레이션 하기 위해 사용된다. 사용되는 케이스 - 연결이 불안정하거나 적을 때 - 대역폭(bandwidth)이 적을 때 - 네트워크 비용이 많이 들 때 - 대역폭을 공유하고 있을때 => 만약 네트워크를 통한 데이터 전송이 일주일 이상 걸린다면, 스노우 family를 사용하는 것이 낫다. Snowball Edge - 물리적으로 데이터를 전송해주는 방식 - AWS 안팎으로 TB나 PB단위의 데이터를 전송해 준다. - 데이터 전송 작업 당 비용이 든다. - 블..

Public Cloud/AWS 2022.07.11

AWS - 모니터링 및 감사

Amazon EventBridge - CloudWatch의 차세대 버전 - 다른 AWS 계정에서 접근할 수 있다. - 이벤트를 아카이빙하거나, 저장 기간을 지정해서 이벤트를 이후에도 볼 수 있도록 설정할 수 있다. - Rules : 어떻게 이벤트를 처리할 것인지 (CloudWatch와 동일하다) Event Bus의 종류 - Default Event Bus : CloudWatch에서 사용하는 것과 동일함 - Partner Event Bus : Saas 서비스나 애플리케이션으로 이벤트를 전달한다 - Custom Event Buses : 내 애플리케이션에 이벤트를 전송한다. Schema Registry - 버스의 이벤트를 분석하고 스키마를 추측할 수 있다. - Schema Registry가 코드를 생성하고 이..

Public Cloud/AWS 2022.07.05

AWS : Serverless - DynamoDB

Amazon DynamoDB 란? - 완전관리형 서비스, 고가용성, 여러 리전에 걸쳐 복제 가능 - NoSQL Database - join X, aggregation X - 방대한 워크로드, 분산 DB에 적절하다 -> 수평 확장, 용량이 크다 - 초당 수백만의 리퀘스트가 오고, 수 조의 행, 수백 TB의 용량이 있다. - Dynamo API는 성능이 빠르고 일관적이다. => 내부에서 프로비저닝 할 필요가 없다. - IAM과 완전 통합 -> 보안성, 인증, 관리 - DynamoDB Streams로 event driven programming이 가능하다. - 저렴한 가격, 오토 스케일링 가능 - Standard & Infrequent Access (IA) Table Class DynamoDB 기초 - 데이..

Public Cloud/AWS 2022.07.04

AWS - CloudFront

AWS CloudFront - Content Delivery Network(CDN)의 일종 - 콘텐츠를 edge location에 캐싱하여 read 성능을 높인다. => 먼 거리에 있는 사용자가 더 빠르게 컨텐츠를 볼 수 있다. - 근거리의 Edge location에 컨텐츠를 일정 기간동안 저장시켜 둔다. - edge location은 글로벌하게 216개 존재한다. - Ddos 차단, Shield와 통합, AWS 웹 app. 방화벽으로 보안성이 있다. - HTTPS으로 외부에 노출되고, 내부로는 HTTPS 백엔드로 소통 가능하다. - 인터넷 간 접속은 거리가 멀면 멀어질수록 접속 속도가 느려지기 때문이다. - 프랑스 사람이 드라마를 보기 위해 독일까지 접속하지 않아도, edge location까지만 가서..

Public Cloud/AWS 2022.07.04

AWS : Load Balancing

Scalability - 애플리케이션이나 시스템이 알아서 더 크거나 작은 로드(load)를 다루는 것이다. - HA와 연관되어 있으나, 다른 개념이다. Vertical Scalability (Scale Up / Down) Horizontal Scalability (Scale Out / In) - 인스턴스의 크기를 키우는 것 - DB와 같은 비분산 시스템, RDS, ElastiCache 등에서 활용된다. - 주로 하드웨어적으로 한계가 있다. - ex. t2.micro => t2.large - 인스턴스나 시스템의 개수를 늘리는 것 - 분산 시스템에 적용된다. - ex. Auto Scalling group, Load Balancer High Availability(고가용성) - horizontal scalin..

Public Cloud/AWS 2022.06.29

AWS : Serverless 개요, AWS Lambda

서버리스란? - 서버를 더이상 관리할 필요가 없다 - 단지 코드=함수를 배치하기만 하면 된다. - Serverless == FaaS(Function as a Service) - 원래는 AWS Lambda로 시작된 개념이지만, 현재는 원격 관리 등도 포함된다. - 서버가 없다는 뜻이 아니다. - 서버를 관리하거나, 프로비저닝하거나, 보지 않는다는 의미이다. - AWS Lambda, DynamoDB, AWS Cognito, AWS API Gateway, Amazon S3, AWS SNS & SQS, AWS Kinesis Data Firehose, Aurora Serverless, Step Functions, Fargate 등 AWS Lambda 장점 - 비용 측정이 쉽다 - request, compute t..

Public Cloud/AWS 2022.06.27

Hybrid Cloud 구축하기

도메인 네임 만들기 터미널로 접속할 때마다 아이피를 입력하기 번거로우므로 새로운 도메인을 만들어 줬다. 지역마다 다른 인스턴스에 연결되도록 지정하기 Route53 - 호스팅 영역 4개의 레코드를 만든다. 버지니아 북부로 Region을 옮긴다. 방금 만든 인스턴스를 선택하고 [연결]을 누른다. [RDP 클라이언트] 탭을 들어가면 [원격 데스크톱 파일 다운로드] 버튼이 있다. 클릭하면 rdp 파일이 다운로드 된다. 만든 파일을 클릭하면 [연결]이 뜬다. 암호가 필요하다. 직전 화면에서 [원격 데스크톱 파일 다운로드] 하단에 보면 [암호 가져오기] 가 있다. 클릭한다. [Browse]버튼을 클릭한 뒤, 아까 만든 win-key 값을 선택한다. [암호 해독] 버튼을 누르면 암호가 생겨 있다. 복사한뒤 연결 창에..

Public Cloud/AWS 2022.06.21