Spatial ETL

2012년 12월 4일 화요일

정보1. ESRI - Spatial ETL

ESRI에서도 Spatial ETL이 나왔습니다. ArcGIS 10.1에서 구동하는것으로 보이고요..
아직은 사용을 안해봐서 OpenSource 비교점은 모르겠습니다.

사용을 하게될 기회가 생기면.. 구체적인 사용법에 대해 기술 하겠습니다.

* 사용법 - Spatial ETL 사용하기

Right-click a toolbox , point to New, then click Spatial ETL Tool from the shortcut menu.

The Create Translation Workspace Wizard opens.
Click the Format browse button, choose a format from the FME Reader Gallery dialog box, then click OK.
Click Next.
Click the Locate Source Data browse button, navigate to the file, then click Open.
Click the Parameters button to edit the default FME reader parameters.

Parameters can include optional and required settings and vary among formats.
Click Next.
Click the Locate Destination Format browse button, choose a format from the FME Writer Gallery dialog box, then click OK.
Click Next.
Click the Parameters button to edit the default FME writer parameters.

Parameters can include optional and required settings and vary among formats.
Click Next.
Click Finish.

Workbench opens with a diagram of your data flow.

<관련 동영상>

2012년 11월 11일 일요일

3. Metadata 활용 - Oracle 테이블 활용

앞에서 오라클연결을 하였고 연결된 오라클 계정의 테이블을 확인하고, 활용하는 예를 설명한다.

1) Oracle Table 조회

a) 연결된 오라클 연결정보에서 팝업메뉴를 통해 Retrieve Schema 기능을 클릭한다.

b) 사용자가 원하는 테이블을 설정한다. (테이블 또는 뷰테이블)
- Set the Name Filter를 활용하여 사용자가 원하는 테이블 명을 Filter를 한다.
(예 : N% -> N으로 시작하는 테이블 만)

c) 활용할 테이블을 선택한다
- 테이블 선택 시 Creation status가 Success로 변할때 까지 기다린다.
- Column Number : 테이블의 Column 갯수

d) 선택된 테이블의 정보를 확인한 후 Finish 버튼을 통해 종료한다.

e) 결과를 확인한다.

2) Oracle Table 활용

<Metadata에 연결된 오라클 테이블을 Job을 통해 활용>

a) 먼저 생성된 Create_Job을 구동시킨다.
b) Table schemas > ADMIN_DO 테이블을 Job 화면으로 드래그 & 드롭으로 가져다 놓는다.

- Components 화면에서 tOracleInput component를 선택한다.

c) Job 화면 오른쪽 Palette 창에서 Logs & Errors > tLogRow component를 b)와 같은 방법으로 드래그 & 드롭으로 가져다 놓는다.

d) tOracleInput 선택하여 팝업 메뉴에서 Row > Main 기능을 클릭한다.

e) tLogRow로 화살표를 이어 준다.

f) tLogRow 선택 후, 화면 아래 Component 설정창에서 'Edit schema' 기능을 클릭하여 설정된 Schema를 확인한다.

g) 화면 아래 Run 화면으로 이동하여 'Run' 버튼을 통해 오라클에 담겨져 있는 정보를 확인한다.

- tOracleInput conponent 설정창에 Query문은 아래와 같이 설정되어 있음을 확인해야 한다.

<Query>

"SELECT 계정.ADMIN_DO.OBJECTID, 계정.ADMIN_DO.DO, 계정.ADMIN_DO.NAME,

계정.ADMIN_DO.SHAPE FROM 계정.ADMIN_DO"

2. Metadata 활용 - Oracle연결

Job을 활용하여 ETL, SETL을 수행하기 위해
DBMS, 파일(csv, txt, xml 등) 및 공간데이터(ArcSDE, GeoNURIS GSS, Shape)의 연결이 필요하다.

TOS에서는 Metadata 부분을 이용하여 DBMS 및 파일을 활용할 수 있도록 지원하고 있으며
공간데이터 활용은 GeoNURIS-SDI를 설치 할 경우 Map, Catalog등의 기능을 이용하여 공간정보를 조회, 관리 할 수 있다.

1) Metadata 활용

- Metadata 구성은 여러가지 종류가 있으나 내가 알고 있는 부분에 대해서 설명하도록 하겠다.