오라클 데이터 100만건 delete

Question

안녕하세요. 유지보수하고 있는 개발자입니다. 해외 악성 봇 ?으로 인해 저희 게시판 종류의 테이블에 100만건의 스팸이 들어와있습니다.. 해당 DB 서버는 여러개의 계정을 생성하여 여러 군데에서 사용하고있습니다. 현재 스팸이 100만건 들어가있는 A 에서 delete를 5만~ 10만건을 나누어서 delete 쿼리를 날려보았으나먹통이되어버리구요.. 같은 DB 서버를 바라보는 B 사이트도 접속이 먹통되버렸다가 다시 되는 현상이 발생하고있어 스팸들을 지우지 못하고있습니다. 심각한 사항은 해당 테이블에 PK도 없고 인덱스도 없다는 것입니다.해당 테이블의 100만건을 어떤 수로 별 영향없이 지울 수 있을까요? 실제 이용되는 데이터는 1만건 안팎입니다.. 그리고 방화벽을 이용해 해당 스팸 IP 대역을 막기는 했으나 이런 악성봇스팸을 효율적으로 차단할 수 있는 방법도 알려주시면 감사하겠습니다.

Thek · Answer

사용하는 1만건만 추출해서 따로 가지고 있고트렁케이트한후에 다시 1만건 밀어넣는게 현실적으로 제일 빠를껄요?;;

김개발발 · Answer

답변 감사합니다. 트렁케이트라는건 테이블 드랍시키라는 말씀이신가요? 한번시도해봐야겠습니다 ㅎㅎ

Thek · Answer

http://www.gurubee.net/article/1455드랍하고 좀 다른건데...참조하세여ㅇ.ㅇ테이블 초기화 하는거예영..삭제할땐 백업 잊지 마시구여 ㅋㅋㅋ

김개발발 · Answer

조금만 찾아보면 나오는건데 제가 마음이 너무급해서 ㅎㅎ.. 링크까지 감사합니다.최대한 부하 영향없이 삭제하려면 DROP과 트렁케이트 중에 뭐가더 나을까요?

Thek · Answer

흠..큰차이 없을거같아요ㅋㅋ개인적으로 트렁케이트 추천이요'ㅅ'원래 돌던거 지우고 다시 만들고 하는거 별로 안좋아해서여ㅋㅋㅋㅋ

김개발발 · Answer

감사합니다. ^^

퓨리오사 · Answer

글쓰기나 로그인 전에 captcha 로직을 넣는건 어떨까요.Google recaptcha 같은걸 사용하면 조금 더 편하게 구현할 수있습니다.

바카디F · Answer

대량건수를 delete 할땐 인덱스 없는게 좋습니다.인덱스 작업을 안하니까요. 하지만, 그런 대량의 자료는 보통 create table <테이블명> as select from <테이블명> where <지우지 않을 데이터 조건> 통칭 CTAS로 처리합니다.nologging insert 는 delete와는 비교도 안되게 빠르기 때문에 1. CTAS로 복제 테이블 생성 where 조건으로 지우지 않을 데이터들만 복제2. 기존 테이블 DROP3. 복제 테이블 명칭 변경 혹은 1. CTAS로 복제 테이블 생성 where 조건으로 지우지 않을 데이터들만 복제2. 기존 테이블 TRUNCATE3. 복제 테이블로 부터 데이터 insert /*+ append */ 혹은 EXP IMP로 .... 기타 등등등이런 작업시 trigger나 fk 관계등은 미리 파악해야합니다.

김개발발 · Answer

//퓨리오사공개된 게시판이므로 captcha 를 넣어봐야겠습니다. //바카디Fdelete 를 때리면 오라클 자체가 먹통이되어벼려서 다른 오라클 계정을 가지고있는 시스템도 마비가 되었었습니다. 근데 그게 인덱스 자체가 없어서 그런건줄 알았는데.. 아닌가요? //Thek트렁케이트로 삭제하니 1초도 안걸려서 삭제가됬습니다. 잘해결됬습니다. 답변주신분들 감사합니다!

바카디F · Answer

대량의 데이터를 delete 할때 먹통이 될 정도의 상태가 되는건 index가 없어서는 아닙니다. delete 를 하면 많은 동작을 수반합니다.그 동작을 수반하는 동안 발생하는 다른 세션들의 작업이 대기 상태로 빠지기 쉽습니다.-> 시스템 먹통의 지름길 - 몇건 안되는데 느리다 -> 인덱스가 없어서 full table scan 한다. 이런 경우 delete 할 대상을 빠르게 찾아야하기 때문에 인덱스가 필요. - 지울 건수가 많은데 느리다 -> full table scan 하는게 유리하기 때문에 index가 많으면 불리.데이터를 삭제 한뒤 index에서 delete 된 부분을 지워야하기 때문에 작업을 더 수행할뿐 인덱스가 도움이 되진 않음.

오라클 데이터 100만건 delete

10개의 답변

Q&A 목록