예전에 제가 사용하던 환경이랑 비슷한 상태에서 작업을 하시는거 같네요.. ^^

작업의 결과를 남기는 것도 중요하겠지만, 작업을 진행시 error 가 난 경우 log 를 남기는 방법을 먼저 고려를 해보면,  datastage 에서 아무런 status 를 남기지 않는 건 한 shell 파일에서 여러개의 dbisql 을 실행한 경우 일겁니다.

1개의 shell 파일에서 1개의 dbisql 을 실행아여 error 가 난 경우는 별 문제가 없지만, 1개의 shell 파일에서 여러개를 실행한 경우 그중 마지막이 정상적으로 끝난다면, 별 error 없이 진행이 되는것 같더라고요.. --;

그래서 해결은 이런 식으로 했습니다..

shell 에서 dbisql 을 돌리고, shell 을 돌린 결과를 log 파일로 생성을 시킵니다. 생성된 log 파일을 읽어서 error 가 난 경우 fail 을 error 가 없는 경우 정상값을 return 하는 shell 을 생성합니다.

이런식으로 처리를 하면 datastage 에서도 깔끔하게 처리를 하실 수 있고요.. 전체 작업이 끝나면,  전체 log 파일을 읽어서 결과치를 한꺼번에 log table 에 반영을 할 수 있습니다.

ETL Job에 관련된 로그를 ASE 등 상용 RDBMS에 남기도록 하세요^^

coolrock 님께서는 로그화일을 만드셨다는데...

어떻게 만들어서 사용하셨는지요? (제가 넘 몰라서요.ㅠ.ㅠ)

혹시라도 예전에 사용했던 스크립트가 있으시면, 제 메일로라도

좀 보내주십시요. 부탁드립니다. 제가 좀 급해서 그렇습니다. ㅡㅡ;

참 존넘님이 말씀하신 ASE 에 접근해서 로그테이블 생성케 하는 방법이

깔끔할것 같았는데...

여기서 CIS 관련 정보를 찾아서 ASIQ 에서 일단 서버를 등록해야

할것 같아서 sp_addserver 를 돌리니..

Syntax error or access violation: Transact-SQL feature not supported

에러가 나타나서... 시도도 못해봤습니다. ㅠ.ㅠ

댓글 달아주신 분께 감사의 마음을 전합니다. 추석전에 끝내야 하는데..

ASE에 로그를 남기는 것은 의외로 간단합니다.

ASE서버에 테이블을 생성하세요.

create table LOG_TBL

(

STARTDT datetime not null,

JOBNAME varchar(20) null,

GUBUN    char(1) null,

ENDDT     datetime null

)

go

JOB 시작할 때 다음과 같이 하면 되지요

isql -Usa -P -SASE -DLOGDB<<EOF

Insert into  LOG_TBL (STARTDT, JOBNAME, GUBUN)

values (getdate(), '$JOBNAME', 'S')

go

EOF

JOB이 끝날때는 다음과 같이요

isql -Usa -P -SASE -DLOGDB<<EOF

declare @startdt datetime

select @startdt = max(STARTDT)

from LOG_TBL

where JOBNAME='$JOBNAME'

and STARTDT < getdate()

update LOG_TBL

set GUBUN='E'

where JOBNAME='$JOBNAME'

and STARTDT = @startdt

go

EOF

IQ서버에 addserver할 필요가 없이

isql 수행할 때 -S옵션에 ASE 서버명을 주시면 됩니다.

직접 ASE 서버에 접속하여 로그를 남기는 것이지요.

즐거운 추석 명절 보내세요.

앞글에 이어서,

다음과 같은 프로시저를 미리 생성해 놓고 호출하십시오.

create proc ETL_JOB_LOG

(

@JOBNAME varchar(20) = null,

@GUBUN char(1) = null

) as

if @JOBNAME is null or @GUBUN is null

   return

declare @startdt datetime

if @GUBUN='S'

BEGIN

  Insert into  LOG_TBL (STARTDT, JOBNAME, GUBUN)

  values (getdate(), @JOBNAME, @GUBUN)

END

else

BEGIN

  select @startdt = max(STARTDT)

  from LOG_TBL

  where JOBNAME=@JOBNAME

and STARTDT < getdate()

update LOG_TBL

set GUBUN=@GUBUN

where JOBNAME=@JOBNAME

and STARTDT = @startdt

END

go

DS Job의 Pre shell과 Post shell에서 동일한 모듈을 호출하시면 됩니다.

먼저 호출용 shell script를 만듭시다.

# vi ~/bin/ett_job_log.sh

JOBNAME=$1

GUBUN=$2

cat <<EOF > /tmp/job_log_$JOBNAME.sh

exec proc ETL_JOB_LOG '$JOBNAME', '$GUBUN'

go

EOF

sh /tmp/job_log_$JOBNAME.sh

Pre Job :

sh ~/bin/ett_job_log.sh $JOBNAME 'S'

Post Job :

sh ~/bin/ett_job_log.sh $JOBNAME 'E'

PATH는 로컬 환경에 맞추어서 사용하세요.

존넌님이 좋은 답변을 남겨주셨네요..

IQ 자체가 OLTP 처리에는 맞지 않다 보니. 여러 방법이 있겠습니다만..

isql -Usa -P -SASE -DLOGDB<<EOF

Insert into  LOG_TBL (STARTDT, JOBNAME, GUBUN)

values (getdate(), '$JOBNAME', 'S')

go

EOF

==> 이부분을 shell 에서 관리하기 불편하니 파일을 만드셔서 작업을 하시고, isql -Usa .. -i파일명 으로 작업을 하시면 되고요..

허나 이렇게 작업을 할경우 문제점은 무엇때문에 에러가 났는지 log 가 남지 않는게 문제점이라 할수 있겠죠.

즉 shell 에서 작업을 수행시

ett_test.sh

isql -Usa -istart.sql

dbisql -U..  > ett_1.log

dbisql -U.. > ett_2.log

isql -Usa -iend.sql

뭐 이런 형태로 작업을 하시면, log 파일을 떨어뜨릴 수가 있고, 이걸 모아서 특정 message 를 grep 등으로 잡아서 사유를 찾을 수가 있겠죠..

지금 shell 은 가지고 있지않아서 방법만 말씀을 드렸는데. 도움이 되실지 모르겠네요..

너무나 감사합니다.

즐거운 명절이 될것 같습니다.

존넘님, coolrock님 복 받을 실 겁니다.

ps.

제시해준 방법도 다시금 시도 해봐야 겠습니다.

전.. 부랴부랴 SAVEPOINT [name]; RELEASE SAVEPOINT [name];

방법으로 해보니 되는듯 해서 손을 놓고 있었는데..

제시해주신 내용들은 검증되고, 현재도 돌아가는 것이니 언능

적용을 해봐야 겠습니다.

이제 마음 편안하게 집으로 출발할 수 있습니다.

존넘님, coolrock님 덕분에 아주 깔끔하게 끝냈습니다.

문서좀 만들어주고 DataStage JOB 에 연결만 하면...끝입니다. 푸하하

기분이 넘 좋습니다.

그리고.. 여기 AIX 사용하는데..

shell 만들때

JOBNAME=$1

GUBUN=$2

이게 적용이 안되는것 같아서

isql -Uxx -Pxx -Sxx -Dxx

exec exe_shell_log '$1','$2','$3'

go

이런식으로 해버렸습니다.

아무튼 넘 감사드립니다.. 다음에 또 모르는게 있으면 질문올리겠습니다.

메리추석~ ^________^