SQL로 For Loop(For문/반복작업) 구현하기

1.왜 이게 필요했을까?

  • 여러 언어를 오고가면서 분석작업을 진행할 때가 많은데,
  • 가끔은 SQL로만 하고 싶을 때가 있고, 그 때마다 문제가 되었던 부분 중 하나가 For Loop였다. 그래서 찾아보다가 알게 되었다.

2.구현하기

  • presto(0.241)에서 진행하였다.

A.기본 Sequence Table 생성

--Sequence Table 생성
CREATE TABLE temp.sequence AS (
    SELECT 0 AS num
    UNION ALL SELECT 1  AS num
    UNION ALL SELECT 2  AS num
    UNION ALL SELECT 3  AS num
    UNION ALL SELECT 4  AS num
    UNION ALL SELECT 5  AS num
    UNION ALL SELECT 6  AS num
    UNION ALL SELECT 7  AS num
    UNION ALL SELECT 8  AS num
    UNION ALL SELECT 9  AS num
)

Copy

B.필요한 반복수만큼의 Sequence 테이블 생성

-- 시퀀스 테이블의 조합을 통해서 For Loop을 하기 위한 Sequence 생성합니다.
--100번 돌리기 위한 방법

-- CREATE TABLE temp.for_loop AS (
--     SELECT 1 + s1.num + s2.num * 10 AS i
--     FROM temp.sequence s1
--     CROSS JOIN temp.sequence s2
--     ORDER BY i
-- )

-- 1000 번 돌리기 위한 방법
CREATE TABLE temp.for_loop AS (
    SELECT 1 + s1.num + s2.num * 10 + s3.num * 100 AS i
    FROM temp.sequence s1
    CROSS JOIN temp.sequence s2
    CROSS JOIN temp.sequence s3    
    ORDER BY i
)

Copy

C.사용하기

  • 이제 위 for_loop와 반복실행하려는 작업을 cross join으로 묶어 진행하면 된다.

3.예시( 동전 던지기 시뮬레이션)

A.확률 테이블 생성

CREATE TABLE temp.coin
(
      coin_name      varchar(10),
      probability    double
)

Copy

INSERT INTO temp.coin
VALUES ('FairCoin', 0.5),
       ('BiasCoin', 0.9)

Copy

B.For Loop 돌리기

CREATE TABLE temp.experiments AS (       
    SELECT c.coin_name, 
           CASE WHEN random() > c.probability THEN 'head' ELSE 'tail' END AS experiment
FROM temp.coin AS c
CROSS JOIN temp.for_loop AS f
)

Copy

C.결과 요약

SELECT coin_name, 
       COUNT(CASE WHEN experiment = 'head' then 1 end) as n_heads, 
       COUNT(*) as n_flips,  
       cast(COUNT(CASE WHEN experiment = 'head' then 1 end) as double) / COUNT(*) as head_prob
FROM temp.experiments
GROUP BY coin_name

Copy

4.결론

  • Cross Join을 사용하기 때문에 리소스를 엄청 먹기 때문에 주의를 요하지만, 가끔 쓰기에는 아주 좋은 방법이다. ?

5.Footnotes

Read more

내가 놓치고 있던 미래, 먼저 온 미래를 읽고

내가 놓치고 있던 미래, 먼저 온 미래를 읽고

장강명 작가의 책은, 유학시절 읽고 처음이었다. 유학시절 "한국이 싫어서"라는 책은 동기부여가 상당히 되는 책이었다. 한국을 떠나 새로운 정채성을 학생으로서 Build up 해나가고 있던 상황에서 이 책은 제목부터 꽤 솔깃하였다. 물론 결말이 기억날 정도로 인상깊은 책은 아니었지만 말이다. 그렇게 시간이 흘러 장강명 작가의 책은 더 이상 읽지 않던

By Bongho, Lee
고객 경험이란 무엇일까?

고객 경험이란 무엇일까?

고객경험이란 무엇일까? 1. 과거 어느 대형 프로젝트에서 있던 일이다. 신사업을 위해서 예측 모델 값을 제공해야 하는 상황이었다. 데이터도 없고,어느정도의 정확도를 제공해야 하는지 답이 없었다. 점추정을 할 것인가? 구간 추정을 할 것인가를 가지고 논의중이었다. Product Manager 줄기차게 고객경험을 내세우며 점추정으로 해야 한다고 주장하였다. 근거는 오롯이 "고객 경험"이었다.

By Bongho, Lee
수요예측, 수정구슬이 아닌 목표를 향한 냉정한 나침반

수요예측, 수정구슬이 아닌 목표를 향한 냉정한 나침반

수요예측의 정의와 비즈니스에서의 중요성 기업의 성장과 운영 효율화를 위해 **수요예측(Demand Forecasting)**은 선택이 아닌 필수 요소로 자리 잡았다. 많은 경영진들이 수요예측을 미래 판매량을 정확히 맞히는 '예언'으로 기대하지만, 이는 수요예측의 본질을 오해하는 것이다. 수요예측의 진짜 의미: 미래를 점치는 수정구슬이 아니라, 우리가 도달해야 할 '목표'를

By Bongho, Lee