왕초보 개발자의 일기장

EB로 생성한 S3가 삭제가 안돼서 왜 그러나 봤더니 S3가 생성될 때 권한 - 버킷정책에서 DeleteBucket 자체를 막아놨습니다. 기존에 적혀있던 버킷정책들 모두 지운 뒤, DeleteBucket 권한을 준 뒤 삭제하면 됩니다.

Amazon Athena는 표준 SQL을 사용해 Amazon S3에 저장된 데이터를 간편하게 분석할 수 있는 대화식 쿼리 서비스입니다. Athena는 서버리스 서비스이므로 관리할 인프라가 없으며 실행한 쿼리에 대해서만 비용을 지불하면 됩니다.(출처 : AWS) 좀 더 쉽게 이야기한다면 S3에서 사용할 수 있는 다양한 포맷의 데이터에서 테이블을 만들 수 있다. 실 사용의 예시를 들자면, 1. S3에 저장된 CSV 파일을 Athena 에서 불러온다.2. Athena에서 불러온 데이터로 DB 테이블을 만든다.3. 만들어진 테이블에 쿼리를 실행하여 원하는 데이터를 얻는다.3. 원하는 대로 얻어진 데이터를 다시 S3에 저장하던지, 다운로드 한다.(CSV, Json 같은 데이터들을 DB테이블로 만들어 쿼리를 날릴 ..

평소에 Kinesis를 볼 때, 서비스 간의 용법과 정의가 헷갈렸다. 그래서 이참에 간단하게 정리해보고자 한다. Amazon Kinessis Data Streams : 처리버퍼처럼 동작하며, 프로듀서가 Kinesis Stream에 데이터를 전송하고 동시에 컨슈머가 데이터를 처리한다. 데이터를 저장하지 않는다. Amazon Kinesis Data Firehose : 저장S3 및 Redshift와 같은 다른 Amazon 서비스로 스트리밍 데이터를 캡처하고 로드하는 데 사용된다.스트림을 Elastic Map Reduce 및 Amazon Elasticsearch Service와 같은 데이터 처리 및 분석 도구에 로드 할 수 있다. Firehose를 사용하여 S3와 Redshift에 동일한 데이터를 동시에로드 할..

AWS 핸즈온랩 및 다양한 정보 공유를 목표로하는 AUSG의 페이스북 페이지가 오픈되었습니다. AWS뿐만 아니라 다양한 기술들을 공유하는 대학생들을 위한 기술페이지가 되려합니다. 팔로우하시고 다양한 정보들을 얻어가시기 바랍니다. https://www.facebook.com/ausgkr/

EC2 인스턴스를처음 생성하면 시간대가 다른것을 눈치채실 것입니다.서울 시간대로 재 설정을 해주어야 합니다. // 현재 시간대 확인$ date // 기존 시간대 삭제$ sudo rm /etc/localtime // 서울 시간대 설정$ sudo ln -s /usr/share/zoneinfo/Asia/Seoul /etc/localtime // 바뀐 시간 확인$ date