안녕하세요. DB2 및 XpertMon 사용자 여러분!
㈜ 아이티엑스퍼트그룹 DB 사업부입니다.
이번에는 ORACLE과 DB2 UDB의 데이터 이동의 두번째 시간으로 DB2 UDB의 데이터 이동
방법입니다. 즉 IMPORT, LOAD에 대해 살펴보도록 하겠습니다.

---

DB2 - import
DB2에서도 Oracle의 imp와 유사한 IMPORT 유틸리티를 제공합니다.
import와 export 를 지원하는 파일 형식은 4가지 입니다. 파일의 형식은 파일을 만들거나,
파일을 사용하는 툴에 의해 선택됩니다. 일반적으로 확장자는 파일 형식을 알 수 있도록
.ixf나 .del, .asc 로 사용합니다. 예를 들면, employee.ixf 는 수정 불가능한
DB2 interchange 형식을 담고 있습니다.
지원되는 4가지 파일 형식은 다음과 같습니다.

• Delimited ASCII files : DEL

이 형식에서 구분자는 문자 구분자, 칼럼 구분자, 행 구분자중 하나가 될 수 있습니다.
문자 구분자의 기본은 쌍따옴표("), 칼럼 구분자의 기본은 콤마(,) 입니다.
기본 구분자는 변경할 수 있습니다.
행 구분자는 UNIX에서 hex code로 X'0A'이며, WINDOWS 에서는 X'0D0A'입니다.

• Non-delimited ASCII file : ASC

Non-Delimited ASCII file 은 고정길이 필드를 가진 것들입니다.
레코드의 순차 row는 행으로 구분됩니다. 일반적으로 이 형식은 한 줄로 정렬된 칼럼을
사용하는 외부 application 과의 데이터 교환에 사용됩니다.

• Integrated Exchange Format file : IXF

DB2 데이터베이스간에 데이터를 교환할 때 주로 사용됩니다. IXF 파일은 데이터베이스
테이블 및 인덱스의 구조정보를 포함하고 있습니다. 이 형식의 파일은 편집기를 통해
편집 할 수 없습니다.

• Worksheet Format file : WSF

이 형식은 일반적으로 Lotus 1-2-3 및 Symphony 제품간에 데이터 교환에 사용됩니다.

DB2의 import 를 수행하기 위해서는 적절한 권한이 있어야 합니다. import를 수행하기
위해서는 SYSADM 권한 또는 DBA 권한을 갖고 있거나, 옵션에 따라 CREATETAB, CONTROL,
SELECT, INSERT 등의 권한이 필요합니다.
DB2 UDB의 import 문법은 직선적(straightforward)입니다. 온라인 상에서 문법정보를
알고 싶으면, 명령창에서 db2 "? Import" 명령을 수행하십시오.

IMPORT FROM filename OF {IXF | ASC | DEL | WSF} [LOBS FROM lob-path [ {,lob-path} ... ] ] [MODIFIED BY filetype-mod ...] [METHOD {L ( col-start col-end [ {,col-start col-end} ... ] ) [NULL INDICATORS (col-position [ {,col-position} ... ] )] | N ( col-name [ {,col-name} ... ] ) | P ( col-position [ {,col-position} ... ] )}] [ALLOW {NO | WRITE} ACCESS] [COMMITCOUNT {n | AUTOMATIC}] [{RESTARTCOUNT | SKIPCOUNT} n] [ROWCOUNT n] [WARNINGCOUNT n] [NOTIMEOUT] [MESSAGES message-file] {{INSERT | INSERT_UPDATE | REPLACE | REPLACE_CREATE} INTO {table-name [( insert-column , ... )] | hierarchy-description} | CREATE INTO {table-name [( insert-column , ... )] | hierarchy-description {AS ROOT TABLE | UNDER sub-table-name} [IN tablespace-name [INDEX IN tablespace-name] [LONG IN tablespace-name]]} [datalink-specification] filetype-mod: COMPOUND=x, INDEXSCHEMA=schema, FORCEIN, INDEXIXF, IMPLIEDDECIMAL, NOCHECKLENGTHS, NOEOFCHAR, NULLINDCHAR, RECLEN=x, STRIPTBLANKS, STRIPTNULLS, NO_TYPE_ID, NODOUBLEDEL, LOBSINFILE, USEDEFAULTS, CHARDELx, COLDELx, DLDELx, DECPLUSBLANK, DECPTx, DATESISO, DELPRIORITYCHAR, IDENTITYMISSING, IDENTITYIGNORE, GENERATEDMISSING, GENERATEDIGNORE, DATEFORMAT=x, TIMEFORMAT=x, TIMESTAMPFORMAT=x, KEEPBLANKS, CODEPAGE=x, NOROWWARNINGS, NOCHARDEL, USEGRAPHICCODEPAGE hierarchy-description: {ALL TABLES | (sub-table-name [(insert-column, ...)], ...)} [IN] HIERARCHY {STARTING sub-table-name | (sub-table-name, ...)} datalink-specification: ([DL_LINKTYPE URL][{DL_URL_REPLACE_PREFIX prefix | DL_URL_DEFAULT_PREFIX prefix}] [DL_URL_SUFFIX suffix], ...)

DB2 에서 import 를 수행하는 방법은 3가지가 있습니다.

• 제어센터 : GUI를 통한 방법
  제어센터는 대화식이고, 마법사가 각 단계를 안내해주므로 사용하기 편리합니다.
  SAMPLE 데이터베이스에 제어센터를 이용하여 import 를 수행하는 예제를 보겠습니다.
  Example 1. Importing a comma delimited files, employee.del into the existing employee table
  

  "000010","CHRISTINE","I","HAAS","A00","3978",19650101,"PRES ",18,"F",19330824, ... "000020","MICHAEL","L","THOMPSON","B01","3476",19731010,"MANAGER ",18,"M",19480202, ... "000030","SALLY","A","KWAN","C01","4738",19750405,"MANAGER ",20,"F",19410511, ... "000050","JOHN","B","GEYER","E01","6789",19490817,"MANAGER ",16,"M",19250915, ... "000060","IRVING","F","STERN","D11","6423",19730914,"MANAGER ",16,"M",19450707, ...

  
  제어센터를 수행하기 위해서는 "시작" --> "프로그램" --> "IBM DB2" -->
  "일반 관리 도구" --> "제어 센터" 로 이동합니다. SAMPLE 데이터베이스를 선택한 뒤
  "Tables" 를 클릭합니다. 화면 우측에 나타나는 테이블 목록에서 employee 테이블을
  오른쪽 클릭하면 나타나는 메뉴에서 import 를 선택합니다.
  Import 에 사용할 파일이 del 형식이기 때문에, 여러 옵션을 통해 세밀한 import 조작을 가
  능하게 합니다. 여기서는 데이터파일로 employee.del 파일을 사용하고, 로그 파일만
  지정하도록 하겠습니다. Import 모드로는 INSERT , INSERT_REPLACE , REPLACE 모드가
  있습니다. INSERT를 선택하면 기존의 데이터에 새로운 데이터를 추가하게 됩니다.
  INSERT_UPDATE를 사용하려면 기본적으로 최소한 하나의 기본 키가 있어야 합니다.
  새로운 데이터는 추가되고, 기존에 있던 데이터는 갱신됩니다. REPLACE 모드를
  선택하면, 기존의 데이터는 모두 삭제되고 새로운 내용이 insert 됩니다.
  
  그림. 8 Import - the file tab
  Example. 2. 이번 예에서는 마지막 2 칼럼이 빠진 del 파일을 사용하겠습니다.
  INSERT_UPDATE 옵션을 사용하여 import 작업을 수행하겠습니다.
  데이터 파일은 '*'가 구분자인 파일입니다.
  

  "000010"*"CHRISTINE"*"I"*"HAAS"*"A00"*"3978"*19650101*"PRES "*18*"F"*19330824* ... "000020"*"MICHAEL"*"L"*"THOMPSON"*"B01"*"3476"*19731010*"MANAGER "*18*"M"*19480202* ... "000030"*"SALLY"*"A"*"KWAN"*"C01"*"4738"*19750405*"MANAGER "*20*"F"*19410511* ... "000050"*"JOHN"*"B"*"GEYER"*"E01"*"6789"*19490817*"MANAGER "*16*"M"*19250915* ... "000060"*"IRVING"*"F"*"STERN"*"D11"*"6423"*19730914*"MANAGER "*16*"M"*19450707* ...

  
  기본적인 과정은 Example 1. 과 같지만, 이번에는 DEL 옵션 버튼을 사용해서 구분자를
  지정해 주어야 합니다. COLDEL 을 선택하고, '*'를 선택합니다.
  
  그림. 9 구분자 선택
  구분자를 선택한 뒤 칼럼 탭으로 이동하여 ‘칼럼’ 버튼을 누릅니다.
  여기서는 import 할 칼럼을 선택합니다.
  
  그림. 10 칼럼 선택 1
  BONUS, SALARY를 제외한 나머지 칼럼을 모두 선택합니다.
  
  그림. 11 칼럼 선택 2
  INSERT_UPDATE를 선택할 경우 주의할 점은, 기본 키가 있어야 한다는 점입니다.
  기본키가 없다면 먼저 SQL문으로 기본키를 지정해 주어야 합니다.
  
  alter table employee add constraint empno primary key (empno)
  
• 명령행 처리기(CLP) : 명령어를 통한 방법
  Example 1. 기존에 생성된 employee 테이블에 ','를 구분자로 사용하는
  데이터파일인 employee.del을 사용하겠습니다.
  명령창에서 다음의 명령을 수행하십시오.
  

  CONNECT TO SAMPLE; IMPORT FROM "E: mp1employee.del" OF DEL METHOD P (1, 2, 3, 4, 5, 6, 7, 8, 9, 10, 11, 12, 13, 14) MESSAGES "E: mp1employee.log" INSERT INTO ADMINISTRATOR.EMPLOYEE (EMPNO, FIRSTNME, MIDINIT, LASTNAME, WORKDEPT, PHONENO, HIREDATE, JOB, EDLEVEL, SEX, BIRTHDATE, SALARY, BONUS, COMM); CONNECT RESET;

  
  Example 2. 만약 구분자가 '*'이고, 마지막 두 칼럼을 제외한 나머지 칼럼을
  import 할 경우는 명령창에서 다음의 명령을 수행하십시오.
  

  CONNECT TO SAMPLE; IMPORT FROM "E: mp1employee.del" OF DEL MODIFIED BY COLDEL* METHOD P (1, 2, 3, 4, 5, 6, 7, 8, 9, 10, 11, 12) MESSAGES "E: mp1employee.log" INSERT_UPDATE INTO ADMINISTRATOR.EMPLOYEE (EMPNO, FIRSTNME, MIDINIT, LASTNAME, WORKDEPT, PHONENO, HIREDATE, JOB, EDLEVEL, SEX, BIRTHDATE, SALARY); CONNECT RESET;

  
  
  DB2 - LOAD
  

Import 외에도 DB2에서는 대량의 데이터를 DB2 UDB 데이터베이스로 훨씬 빨리 적재하는
LOAD 라는 유틸리티를 제공합니다. Import 가 insert SQL 문을 사용하는 것과 달리
LOAD는 데이터베이스 파일에 직접 기록하는 방식을 사용합니다. Import와 LOAD 모두
사용자 정의 테이블(UDT)와 LOB을 지원하지만, LOAD는 파티션된 테이블에도 데이터를
적재할 수 있습니다. 이 두 가지 툴의 주요 차이점과 사용에 대한 선택은 성능에 있습니다.
LOAD가 import 보다 훨씬 빠릅니다.

LOAD는 각각의 레코드에 대해 로그를 남기지 않습니다. 하지만 데이터의 재 적재는
가능합니다. load 중에 LIST UTILITIES 라는 DB2 명령어를 사용하면 load 과정을
살펴볼 수 있습니다. LOAD는 테이블 레벨의 잠금을 사용하므로 load 중인 테이블에
다른 사용자가 접근할 수 없습니다.
LOAD 를 사용하려면, SYSADM, DBADM 또는 SYSMAINT 권한을 가지고 있거나,
load 권한과 함께 load 옵션에 따라 INSERT나 DELETE 권한을 가지고 있어야 합니다.

LOAD 명령에 대한 문법은 다음과 같으며, 아래 내용은 db2 "? Load" 명령으로
확인 할 수 있습니다.

LOAD QUERY TABLE table-name [TO local-message-file] [NOSUMMARY | SUMMARYONLY] [SHOWDELTA] LOAD [CLIENT] FROM file/pipe/dev/cursor_name [ {,file/pipe/dev} ... ] OF {ASC | DEL | IXF | CURSOR} [LOBS FROM lob-path [ {,lob-path} ... ] ] [MODIFIED BY filetype-mod [ {filetype-mod} ... ] ]] [METHOD {L ( col-start col-end [ {,col-start col-end} ... ] ) [NULL INDICATORS (col-position [ {,col-position} ... ] )] | N ( col-name [ {,col-name} ... ] ) | P ( col-position [ {,col-position} ... ] )}] [SAVECOUNT n] [ROWCOUNT n] [WARNINGCOUNT n] [MESSAGES msg-file] [TEMPFILES PATH pathname] {INSERT | REPLACE | RESTART | TERMINATE} INTO table-name [( insert-column [ {,insert-column} ... ] )] [datalink-specification] [FOR EXCEPTION table-name] [STATISTICS {NO | USE PROFILE}] [{COPY {NO | YES { USE TSM [OPEN num-sess SESSIONS] | TO dir/dev [ {,dir/dev} ... ] | LOAD lib-name [OPEN num-sess SESSIONS]}} | NONRECOVERABLE} ] [HOLD QUIESCE] [WITHOUT PROMPTING] [DATA BUFFER buffer-size] [SORT BUFFER buffer-size] [CPU_PARALLELISM n] [DISK_PARALLELISM n] [INDEXING MODE {AUTOSELECT | REBUILD | INCREMENTAL | DEFERRED}] [CHECK PENDING CASCADE {DEFERRED | IMMEDIATE}] [ALLOW NO ACCESS | ALLOW READ ACCESS [USE tblspace-name]] [LOCK WITH FORCE] [[PARTITIONED DB CONFIG] partitioned-db-option [{partitioned-db-option}...]] filetype-mod: NOROWWARNINGS, ANYORDER, BINARYNUMERICS, CODEPAGE=x, DUMPFILE=x, FASTPARSE, NOHEADER, TOTALFREESPACE=x, INDEXFREESPACE=x, PAGEFREESPACE=x, FORCEIN, IMPLIEDDECIMAL, PACKEDDECIMAL, NOCHECKLENGTHS, NOEOFCHAR, NULLINDCHAR=x, RECLEN=x, STRIPTBLANKS, STRIPTNULLS, NODOUBLEDEL, LOBSINFILE, CHARDELx, COLDELx, DLDELx, DECPLUSBLANK, DECPTx, DATESISO, DELPRIORITYCHAR, USEDEFAULTS, DATEFORMAT=x, TIMEFORMAT=x, TIMESTAMPFORMAT=x, ZONEDDECIMAL, KEEPBLANKS, IDENTITYMISSING, IDENTITYIGNORE, IDENTITYOVERRIDE, GENERATEDMISSING, GENERATEDIGNORE, GENERATEDOVERRIDE, USEGRAPHICCODEPAGE partitioned-db-option: HOSTNAME x, FILE_TRANSFER_CMD x, PART_FILE_LOCATION x, OUTPUT_DBPARTNUMS x, PARTITIONING_DBPARTNUMS x, MODE x, MAX_NUM_PART_AGENTS x, OMIT_HEADER, ISOLATE_PART_ERRS x, STATUS_INTERVAL x, PORT_RANGE x, CHECK_TRUNCATION, MAP_FILE_INPUT x, MAP_FILE_OUTPUT x, TRACE x, NEWLINE, DISTFILE x datalink-specification: ([DL_LINKTYPE URL][{DL_URL_REPLACE_PREFIX prefix | DL_URL_DEFAULT_PREFIX prefix}] [DL_URL_SUFFIX suffix], ...)

LOAD 작업은 4단계로 구분할 수 있습니다. 이 4단계는 순차적으로 수행됩니다.

1. 로드 단계 (load phase) : 이 단계에서, 외부 파일의 내용이 테이블에 적재되고,
   인덱스도 수집 및 정렬됩니다. 이 단계에서 중요한 내용은 LOAD 작업에 있어서
   savepoint를 확인하는 것입니다. savepoint는 LOAD가 실패했을 경우,
   재 적재(reload) 작업을 수행할 때 필요합니다. 적절하지 않은 레코드는
   메시지파일에 기록됩니다.
2. 빌드 단계 (build phase) : 이 단계에서는 인덱스가 빌드됩니다.
   이 단계에서 failure가 발생했을 경우, LOAD 작업을 다시 수행하면
   빌드 단계부터 시작되게 됩니다.
3. 삭제 단계 (delete phase) : 이 단계에서는 고유 키나 기본 키의
   제약사항에 어긋나는 것들을 처리합니다. 위반 행들은 exception table에
   쓰여집니다. 이 단계에서 failure가 발생하면 LOAD 작업 재수행시 삭제 단계부터
   시작되게 됩니다. 메시지도 이 단계에서 생성됩니다.
4. 인덱스 복제 단계 (index copy phase) : 이 단계에서 인덱스가 시스템 임시
   테이블스페이스에서 목표 테이블 스페이스로 이동됩니다. 로드 과정에서 인덱스
   생성을 위한 시스템 임시 테이블 스페이스를 지정한 경우에만 가능합니다.
   이 단계에서도 메시지가 생성됩니다.

LOAD 작업은 데이터의 추가 및 교체를 지원합니다. LOAD 작업 중에는 LOAD 작업에
사용할 매개(intermediate) 테이블을 생성합니다. 데이터 파일 대신 CURSOR 타입도
사용 가능합니다. 그 외에도 다음과 같은 다양한 옵션들이 있습니다.

• WARNINGCOUNT : LOAD를 언제 중지할 지를 정해줍니다. n 번째 경고발생 후 로드 작업은 중지됩니다.
• CPU_PARALLELISM : CPU의 degree of parallelism을 지정합니다. 기본값은 DB2가 자체적으로 적절한 값을 판단하여 사용합니다.
• DISK_PARALLELISM : 디스크의 degree of parallelism을 지정합니다. 이 값은 생성할 쓰레드의 수를 결정합니다. 기본값은 DB2가 자체적으로 적절한 값을 판단하여 사용합니다.
• DATA BUFFER : LOAD 작업에 사용할 4K 페이지 수를 지정합니다.
• TEMPFILES PATH : LOAD 작업 중 생성할 매개테이블이 생성될 위치를 지정합니다.
• FOR EXCEPTION : 문제 행이 들어갈 테이블을 지정합니다.
• DUMPFILE : 거부된 행의 에러 내용을 기록하는데 사용될 파일 명을 지정합니다.
• NOROWWARNING : 거부된 행에 대한 경고를 기록하지 않도록 지정합니다.

LOAD는 LOAD과정 중에 생성되는 페이지의 전체 공간을 지정할 수 있어 성능튜닝을
지원합니다.

• PAGEFREESPACE : 각 데이터 페이지의 여유비율(%)을 지정합니다. 일반적으로는 DB2가 결정하도록 둡니다.
• INDEXFREESPACE : 각 인덱스 페이지의 여유비율(%)을 지정합니다. 일반적으로는 DB2가 결정하도록 둡니다.
• TOTALFREESPACE : 여유공간으로 추가되는 테이블 크기의 비율(%)

다른 옵션들에 대해서는 DB2 UDB Data Movement Utilities Guide and Reference를
참조하시기 바랍니다.

이번엔 일상 작업에서 LOAD가 어떻게 사용되는지에 대해 살펴보겠습니다.
IMPORT처럼, LOAD를 호출하는 데는 GUI를 사용하는 방법, 명령어를 사용하는 방법,
그리고 API를 통하는 방법의 3가지가 있습니다. 여기서는 GUI와 명령어를 통한
방법만을 설명하겠습니다.

• GUI를 사용하는 방법
  Example .1 - 테이블에 del 파일을 LOAD 합니다.
  Import 예제에 사용한 employee.del 파일을 사용하도록 하겠습니다.
  제어센터를 통해 수행하기 위해
  "시작" --> "프로그램" --> "IBM DB2" --> "일반 관리 도구" --> "제어센터"를
  클릭합니다.
  데이터베이스 목록에서 sample 을 선택합니다. 표시된 테이블 중 EMPLOYEE
  테이블을 오른쪽 클릭해서 나타나는 메뉴에서 "load"를 선택합니다.
  
  그림. 12 제어센터를 사용한 load
  데이터를 append 모드로 할 것인지, replace 모드로 할 것인지를 선택할 수 있으며,
  append 모드로 수행 할 경우에는 읽기를 허용할 수 있습니다.
  
  그림. 13 Append / Replace 선택
  데이터 파일 명과 메시지 파일명을 입력하고, 데이터 파일의 형식을 선택합니다.
  그리고 로드 할 데이터베이스가 로컬에 있는지 remote에 있는지도 선택합니다.
  
  그림. 14 경로와 파일명 설정
  이번 예제에서는 BONUS 와 COMM 칼럼을 제외한 나머지 칼럼만을 로드하도록 하겠습니다.
  
  그림. 15 로드에 포함될 칼럼 선택
  성능에 영향을 줄 수 있는 옵션들이 있습니다. 이 예제에서는 기본값을 사용하도록
  하겠습니다.
  
  그림. 16 성능과 통계정보
  로드 단계에서 복구에 관련한 선택을 하게 됩니다. 기본값을 사용하도록 하겠습니다.
  
  그림. 17 Fail, 복구 선택
  CPU parallelism, 덤프파일 등의 기타 옵션을 선택합니다.
  
  그림. 18 고급 옵션 선택
  마지막 화면에서는 기본값을 선택하고 "Finish"를 선택하겠습니다.
  
  그림. 19 스케줄 / 즉시 실행 선택
  실행이 완료되면 성공메시지가 나타납니다.
  
  그림. 20 성공 메시지
  Employee.msg 파일을 열어보면 읽은 행수, 건너뛴 행수, 거부된 행수, 삭제된 행수,
  commit 된 행 수 등을 확인 할 수 있습니다.
  
• 명령 창을 사용하는 방법
  GUI를 통한 방법과 같은 내용을 명령 창을 통해 수행하는 법을 살펴 보겠습니다.
  명령어는 다음과 같습니다.
  

  CONNECT TO SAMPLE; LOAD FROM "E: mp1employee.del" OF DEL METHOD P (1, 2, 3, 4, 5, 6, 7, 8, 9, 10, 11, 12) MESSAGES "E: mp1employee.msg" INSERT INTO ADMINISTRATOR.EMPLOYEE (EMPNO, FIRSTNME, MIDINIT, LASTNAME, WORKDEPT, PHONENO, HIREDATE, JOB, EDLEVEL, SEX, BIRTHDATE, SALARY) COPY NO INDEXING MODE AUTOSELECT; CONNECT RESET;

  
  
  

  ---

  XpertMon for DB2 UDB V2
  DB 사업부
  Tel : 02-2108-1458
  Fax : 02-2108-1459
  Mobile : 011-896-6545
  E-mail : hjlee@iteg.co.kr
  URL : http://iteg.co.kr