본문 바로가기

🛋️ 데이터 분석24

[데이터 분석을 위한 통계개념2] 가설검정 (with A/B Test) 목차1. 모집단과 표본 서비스의 관점에서 모집단과 표본을 분류하고 A/B 테스트를 진행한다고 하자.그럴 때 모집단은 지금 우리의 전체 고객을 넘어 앞으로의 예비 고객을 모두 포함한 집단이다.그리고 표본은 우리가 실험을 위해 추출한 일부 고객집단이다. 여기서 중요한 점은, 우리가 건들일 수 있는 부분은 실험에 노출되는 '일부 고객'이지 모집단인 전체에 대해서는 알 수가 없다는 것이다. 1) 모집단과 데이터(표본) 사이의 오차 : 표본오차 전체를 알 수 없기에 우리는 표본을 가지고 모집단을 추정해야한다.이때 추출한 표본과 모집단의 데이터 사이에는 오차가 없을까 ? 일반적으로 표본평균과 모집단평균은 일치하지 않는다. 이로서 우리가 정말 알고 싶은 것(모집단)과 실제 손 안에 있는 데이터(표본)에는 오차가.. 2024. 12. 21.

이동평균의 개념과 SQL에서 구현하기 1. 이동평균이란이동 평균(Moving Average)은 데이터 분석에서 자주 사용되는 기법으로 주로 시계열 데이터의 변동성을 줄이고, 데이터의 패턴이나 추세를 파악하기 위해 사용된다. 이동 평균은 특정 기간 동안의 데이터 포인트의 평균을 계산하여, 데이터의 변화를 부드럽게 만들어 준다는 특징이 있다.따라서 데이터 내의 장기간, 단기간의 트랜드를 읽을 때 주로 사용한다. 1) 단순 이동 평균 (Simple Moving Average ; SMA)일정한 기간 동안의 평균을 계산한다.여기서 X_t는 현재 시점의 값, n은 평균을 계산할 기간이다. 2) 가중 이동 평균 (Weighted Moving Average; WMA)최근의 데이터 포인트에 더 큰 가중치를 부해 평균을 계산한다.여기서 W_i는 각 데이터 .. 2024. 12. 14.

LAG, LEAD로 이전, 다음행 가져오기 목차1. LAG: 이전 행의 값을 가져올 수 있다. LAG(col_name) OVER(ORDER BY )SELECT LAG(job) OVER(ORDER BY job, empno) AS JOB_PREV job, empno 기준 정렬하여 이전 값을 JOB_PREV 열로 가져옴. 2. LEAD: 다음 행의 값을 가져올 수 있다.LEAD(col_name) OVER(ORDER BY )SELECT LEAD(job) OVER(ORDER BY job, empono) AS JOB_NEXTjob, empno 기준 정렬하여 다음 값을 JOB_NEXT 열로 가져옴. 3. 고급 사용1) 가져올 행의 위치 지정하기바로 이전, 다음 값이 아니라 n행 뒤에 있는, 앞에 있는 등의 데이터를 가져오고 싶은 경우 사용할 수 있다 ... 2024. 12. 14.

[Advent of SQL 2024 🎄] 전력 소비량 이동 평균 구하기 (Day 14) 난이도4 Power Consumption of Tetouan City 데이터베이스는 모로코 북부 도시 중 하나인 테투안 지역의 전력 소비량과 기상 관측치가 들어있는 데이터베이스 입니다. 테투안 지역에는 Quads, Smir, Boussafou 총 3개 지역에 발전소가 있으며 해당 발전소로 부터의 전력 소비량이 각각 측정되어 있습니다. 전력 소비량 측정은 매 10분마다 시작해 10분간 진행하는 방식이고, measured_at 컬럼에 측정 시작 시각이 기록되어 있습니다. 전력 소비량은 순간순간 크게 변화하는 값이기에 트렌드를 보거나 수요 예측을 하기 위해서 단순 이동 평균을 자주 사용 합니다.2017년 1월 1일 0시부터 2017년 2월 1일 0시까지 10분 단위로 3개 발전소 전력 소비량의 1시간 범위 .. 2024. 12. 14.

COALESCE( )를 통해 NULL값 변환하기 COALESCE( ) COALESCE(col1, col2, col2, ..., ...) COALESCE함수는 인자로 주어진 col들 중에서 null이 아닌 첫 번째 값을 반환하는 함수이다. 따라서 NULL값을 특정 값으로 변환하는 데 사용한다고 보면 된다. SELECT COALESCE(col1, '공백') FROM member→ col1 컬럼에 NULL값이 있는 경우 이를 '공백'으로 대신 출력한다. SELECT COALESCE(col1, col2, '공백') FROM member→ col1 컬럼에 NULL값이 있는 경우 이를 col2으로 대신 반환한다. → 만일 col2 값도 NULL인 경우, '공백'을 대신 출력한다. IFNULL(col_name, 'NULL일 때의 반환값') 역시 NULL값을 처.. 2024. 12. 14.

COUNT OVER( )로 그룹별 집계하기 목차1. COUNT( ) OVER( ) COUNT 함수를 OVER절과 함께 사용하면 GROUP BY절을 사용하지 않고 전체 건수, 그룹별 건수를 집계해서 각 행에 표시할 수 있다. 1) 전체 총 건수 구하기COUNT(*) OVER()SELECT *, COUNT(*) OVER() AS TOTAL_COUNTFROM ECOLI_DATA 단순히 COUNT(*)만 사용하는 경우 조회된 데이터의 총 건수를 구한다. TOTAL_COUNT > 모두 동일하게 전체 데이터 건수 값을 표시함. * OVER 절은 데이터가 모두 조회된 후 ORDER BY 실행되기 바로 전에 실행됨. 2) 순차적 누적 건수 구하기 COUNT(*) OVER(ORDER BY COLNAME) AS ALIAS SELECT *, COUNT(*) OV.. 2024. 12. 14.

이전 1 2 3 4 다음

티스토리툴바