안녕하세요. DB2 및 XpertMon 사용자 여러분!
㈜ 아이티엑스퍼트그룹 DB 사업부입니다.
이번주에는 DB2 UDB V8(FP 2) 에서 새로 추가된 Table Data를 Sampling 할 수 있는
기능에 대해 살펴보도록 하겠습니다.
예전에는 Table Data를 Sampling하기 위해서는 테이블 전체를 읽고 난 후 원하는 방식의
Sampling 프로그램을 작성해야만 했지만, 이제는 Row 레벨과 Block 레벨의 두 가지 방법을
이용하여 간단히 테이블의 표본을 추출할 수 있게 되었습니다.
아무쪼록 많은 도움되시길 바라며, 혹시라도 알고 싶은 내용이나 주제가 있다면 메일로
보내주십시오. 참조하여 반영하도록 하겠습니다.
Sampling Table Data
Sampling 방법
Row 레벨과 Block 레벨의 두 가지 방법이 있습니다.
기본적인 방법인 Row 레벨 Sampling 방법은 모든 x Row가 표본이 되고, 반면에
Block 레벨 Sampling 방법은 모든 y Page가 표본이 됩니다.
테이블에서 데이터를 추출하려면 select문장에 Tablesample이라는 문구를 추가하면 됩니다.
여기에는 Row 레벨과 Block 레벨의 두가지 방법이 있습니다.
Row 레벨일 경우에는 Select …. tablesample BERNOULLI 키워드를 사용하며,
Block 레벨일 경우에는 Select…. tablessample SYSTEM 키워드를 사용하게 됩니다.
SYSTEM 키워드를 적으면 Optimizer가 Row 레벨 보다 Block 레벨이 더 효과적이라고 판단할 때
Block 레벨 베르누이 표본추출 방법을 사용하게 됩니다.
성능 측면에서는 Block 레벨 표본추출이 한번의 I/O로 한 Page씩 읽어오므로 더 좋습니다.
테스트용 환경 설정
- 테이블 명 : EMP ( 건수 4,194,304)
- 버퍼풀 : IBMDEFAULTBP ( 1MB)
만약 이 EMP 테이블에서 D11 부서의 모든 근로자의 보너스 지급액의 합을 구하려 한다면
기본적인 Query는 다음과 같습니다.
Row 레벨 Sampling
만약 D11 부서의 모든 근로자중 10%에 해당하는 근로자를 추출해서 보너스 지급액의 합을
구한다면 다음과 같은 Query를 실행 할 것입니다.
여기서 (10)은 표본 추출을 위한 비율로 0 이상의 수를 입력해야 합니다. 그리고 (5)는
반복 값으로 query를 여러 번 반복 실행하여도 같은 결과를 같도록 해줍니다.
또한 반복 값을 바꿈으로써 결과값을 바꿀 수도 있어서 이 값을 이용한 실험으로
실제 결과와 가장 근접한 값을 가질 수 있도록 해줍니다.
Row 레벨 Sampling Query의 실행 1 - 비율의 조정
다음은 각각 다른 표본 추출 비율을 사용한 Row 레벨 Sampling을 적용하여 생성된 결과입니다.
이 SQL 실행 시간은 설정된 비율 값에 관계없이 거의 일정합니다. 그러나 해당 컬럼에
인덱스가 생성되어 있으면 표본 추출 비율이 낮을수록 훨씬 빠른 실행 속도를 가집니다.
여기서 봤을 때, 가장 실제 값 (576,716,800.00) 값에 가장 근접한 비율은 베르누이 값이
50일 경우입니다. ( 약 +0.02 차이)
정확성과 수행시간은 서로 Trade-Off 임을 알 수 있습니다.
Row 레벨 Sampling Query의 실행 2 - 반복 변수의 조정
반복 변수에 다른 값을 부여해서 Query를 실행시켜보면 결과는 다음과 같습니다.
각각의 반복 변수에 대한 Query 실행에 소요된 시간은 거의 같습니다.
그러나 결과값은 차이가 있습니다.
Full select의 결과가 576,716,800이므로, 반복 변수 중 가장 근사한 값이 대략 5가 됩니다.
여기서 같은 반복변수의 Query를 5번 반복 실행을 하였을 경우, 실행 결과값은
같은 수의 Row가 나오게 됩니다.
Block 레벨 Sampling
Block 레벨 표본추출문의 형태는 다음과 같습니다.
여기에서 system() 이 키워드이고, 10은 표본추출을 위한 Page들의 백분율입니다.
100은 모든 Page의 100%를 추출하는 것이기 때문에 백분율 값은 100보다 클 수는 없으며,
이것은 표본추출 기능을 사용하지 않는 것과 같은 효과를 내게 됩니다.
Block 레벨 Sampling Query의 실행
‘select sum(bonus) ..’ Query를 다른 system 백분율 값을 적용해서 반복 실행시켰습니다.
Block 레벨 표본 추출법의 실행시간은 Row 레벨 표본 추출법보다는 작게 나오지만
결과의 정확성은 조금 떨어짐을 볼 수 있습니다.
XpertMon for DB2 UDB V2
DB 사업부
Tel : 02-2108-1458
Fax : 02-2108-1459
Mobile : 011-896-6545
E-mail :
hjlee@iteg.co.kr
URL :
http://iteg.co.kr
