본문 바로가기
반응형

전체 글132

aws redshift의 Redshift query editor v2 활용해보기 이번에 프로젝트 하면서 editor v2를 처음 써봤다redshfit에 이렇게 바로 테이블을 만들 수 있는게 있구나,,      1. IAM role 생성 일단 데이터를 s3에서 가져온다 올 때 iam role 이 필요하다  AWS Management Console > IAM > 역할 (Roles) 로 이동새로운 역할 생성 (Create Role)"AWS 서비스" 선택"Redshift" 선택 후 "Redshift - Customizable" 선택권한 추가 (Attach policies)다음 정책을 추가:AmazonS3ReadOnlyAccess (S3 데이터 읽기 권한)AWSGlueConsoleFullAccess (Spectrum 사용 시 필요)역할 이름 지정 및 생성 (예: RedshiftS3Access.. 2025. 1. 19.
vscode에 postgreSQL연결하기 Redshift 연동하기 PostgreSQL이란??오픈 소스 관계형 데이터베이스 관리 시스템(RDBMS)라고 할 수 있다간단히 말하면, 데이터를 저장하고 관리할 수 있는 데이터베이스 소프트웨어로SQL을 사용해 데이터를 삽입, 조회, 업데이트, 삭제하는 쿼리를 실행할 수 있는 도구이다 이전에 postgreSQL을 활용해본 적이 있어서이번에 vscode에 한 번 연결해보기로 했다근데 redshift를 곁드린    1. VSCode에서 PostgreSQL 확장 설치Redshift는 PostgreSQL 기반이므로 PostgreSQL 확장을 설치하여 연결한다VSCode에서 Extensions 탭 열기 (Ctrl + Shift + X).PostgreSQL 검색 후 설치    2. redshfit와 연결시킨다 + 를 눌러서 생성  Endpo.. 2025. 1. 19.
AWS VPC 활용 및 실행 방법 AWS VPC (Virtual Private Cloud)란?AWS VPC(Virtual Private Cloud)는 AWS 클라우드 안에서 논리적으로 격리된 네트워크 환경을 제공하는 서비스입니다. 사용자는 자신의 네트워크 환경을 정의하고, 클라우드 리소스(예: EC2, RDS 등)를 안전하게 배포, 관리할 수 있습니다. VPC는 AWS 계정에서 기본적으로 생성되며, 사용자는 이를 커스터마이즈하여 네트워크 설정을 자유롭게 조정할 수 있습니다.AWS VPC의 주요 개념서브넷(Subnet)VPC 내에서 IP 주소 범위를 나누는 작은 네트워크 단위입니다.퍼블릭 서브넷: 인터넷에 접근할 수 있는 리소스를 배치.프라이빗 서브넷: 외부 인터넷 연결이 차단된 리소스를 배치.인터넷 게이트웨이(Internet Gatewa.. 2025. 1. 16.
AWS Clawer (글루 크롤러) 사용 해보기 이전이 작성한 glue job에 이어서 glue clawer에 대해서 사용해보자   https://toonovel.tistory.com/entry/AWS-Glue-Job%EA%B8%80%EB%A3%A8-%EC%9E%A1-%EC%82%AC%EC%9A%A9%ED%95%B4%EB%B3%B4%EA%B8%B0 AWS Glue Job(글루 잡) 사용해보기aws 신기한 것,, ETL을 이렇게 쉽게 할 수 있다비용만 안비싸면 자주 사용해보고 싶다    AWS GLUE 사이트https://ap-northeast-2.console.aws.amazon.com/gluestudio/home?region=ap-northeast-2#/jobs https://ap-northeast-2.consoltoonovel.tistory.com.. 2025. 1. 13.
반응형

티스토리툴바