전체22 [실습] 간단한 QuickSight 시각화 생성 12장에서는 풍부한 데이터 시각화를 만들고 공유하는 데 사용되는 BI 도구인 Amazon QuickSight 서비스에 대해 자세히 알아보았습니다. 실습 섹션에서는 Amazon QuickSight를 사용하여 시각적 개체를 만들 것입니다. 우리는 세계 도시의 인구에 대한 정보가 포함된 데이터의 예와 이를 사용하여 대도시가 지리적으로 어떻게 분포되어 있는지 쉽게 시각화할 수 있는 방법을 알아보겠습니다. 1. 새 QuickSight 계정 설정 및 데이터 세트 로드 계정 생성을 시작하기 전에 새 대시보드에서 세계 도시의 샘플 데이터 세트를 다운로드해야 합니다. https://simplemaps.com/ 에서 제공되는 기본 데이터 세트를 사용할 예정입니다. 1. https://simplemaps.com/data/w.. 2023. 3. 28. [AWS Data Engineering] 11장. Amazon Athena를 사용한 임시 쿼리 Amazon Athena는SQL을 사용하여 데이터 레이크의 데이터를 직접 쿼리하고 다양한 다른 데이터베이스를 쿼리할 수 있는 완전 관리형 서버리스 서비스입니다. 이 장에서는 Athena에 대해 자세히 살펴봅니다. 1. Amazon Athena - 데이터 레이크를 위한 인플레이스 SQL 분석 SQL(Structured Query Language)은 수십 년 동안 데이터 쿼리를 위한 매우 인기 있는 언어로 입니다. 매일 전 세계 수백만명의 사람들이 SQL을 직접 사용하여 다양한 데이터베이스의 데이터를 탐색하고 있으며 더 많은 사람들이 내부적으로 SQL을 사용하여 데이터베이스를 쿼리 하는 애플리케이션을 사용합니다. 2016년 말, AWS는 고객이 아마존 S3에 존재하는 구조화 및 반구조화 데이터를 직접 쿼리할.. 2023. 3. 21. [SQL - Bigquery/빅쿼리] 웹사이트 전체의 특징/경향 찾기 웹사이트 전체의 특징과 경향을 찾기 위한 쿼리를 소개하겠다. 0. 샘플 데이터 1. 날짜별 방문자 수 / 방문 횟수 / 페이지 뷰 집계하기 : substr, distinct, nullif 웹사이트에서는 방문자 수 , 방문 횟수, 페이지 뷰 집계가 기본이다. 먼저 각각의 지표가 무엇을 집계하는지 살펴보도록 하자. 방문자 수 브라우저를 꺼도 사라지지 않는 쿠키의 유니크 수 한 명의 사용자가 1일에 3회 사이트를 방문해도 1회로 집계 방문 횟수 브라우저를 껐을 때 사라지는 쿠키의 유니크 수 한 명의 사용자가 1일에 3회 사이트를 방문하면 3회로 집계 페이지 뷰 페이지를 출력한 로그의 수 '1회 방문당 페이지 뷰'를 날짜별로 집계하는 쿼리를 작성해 보겠다. select substr(cast(stamp as st.. 2023. 3. 9. [AWS Data Engineering] 6장. 배치 및 스트리밍 데이터 수집 데이터 아키텍처의 다양한 구성 요소에 대해 알아보도록 하겠습니다. 이 장에서는 여러 유형의 데이터 소스를 살펴보고 데이터를 수집하기 위해 AWS 내에서 사용할 수 있는 다양한 도구를 살펴봅니다. 또한 여러 수집 도구 중에서 작업에 적합한 도구를 사용하고 있는지 확인하기 위해 결정하는 방법을 살펴보도록 하겠습니다. 데이터 엔지니어가 직면하는 데이터의 5V 과제는 다음과 같습니다. Variety : 다양성 Volume : 데이터의 양 Velocity : 데이터의 속도 Validity : 데이터의 진실성 Value : 데이터의 가치 1. 데이터 소스 이해 1) 데이터 다양성 (Variety) 모든 데이터가 단순히 데이터 베이스의 관계형 데이터라면 데이터 분석 솔루션으로 옮기는 것은 비교적 쉬웠을 것입니다. 하.. 2023. 2. 21. 이전 1 2 3 4 5 6 다음
