PublicAX· 한국· 2026년 10월 31일
한국딥러닝, IBK기업은행 보이스피싱 피해구제 서류 업무에 VLM 에이전트 적용 — 처리 시간 88% 단축
금융 서류 업무를 VLM 에이전트로 자동화한 공공 AX 실증 사례
한국딥러닝이 IBK기업은행 금융소비자지원부와 시각언어모델(VLM) 기반 보이스피싱 피해구제 업무 자동화를 구현했다고 10월 30일 밝혔다. 실증 결과 서류 처리 시간이 88% 단축됐고, 이 과제는 '2026 공공기관 AI혁신 챌린지' AI 서비스 실증(PoC) 부문 우수상에 선정됐다. 금융 서류처럼 정형·비정형 문서가 섞인 업무에서 OCR과 VLM을 교차검증하는 구조가 실무 참고 사례다.
뉴스 — 사실
무엇이 바뀌었나사실
- 누가·언제: 한국딥러닝(대표 김지현)이 IBK기업은행 금융소비자지원부와 시각언어모델(VLM, Vision-Language Model) 기반 보이스피싱 피해구제 업무 자동화를 구현했다고 10월 30일 밝혔다.
- 기간: 이번 과제는 올해 4월부터 8월까지 진행됐다.
- 수상: 이 과제는 '2026 공공기관 AI혁신 챌린지' AI 서비스 실증(PoC) 부문 우수상에 선정됐다.
- 무엇을: 양사는 금융 특화 AI 에이전트 '딥 에이전트 포 금융'을 적용했다.
- 어떻게: 서류 인식·분류부터 정보 추출, 범죄 유형 추론까지 자동화해 기존 수작업 처리의 한계를 극복했다고 한다.
- 구조: 기존 AI 광학문자인식(AI-OCR)과 VLM 결과를 교차검증하고, 신뢰도에 따라 자동 처리와 담당자 검수로 분기한다.
- 구축 방식: 은행 폐쇄망 운영을 위해 온프레미스 방식으로 구축했다.
- 얼마나: 서류 처리 시간은 88% 단축됐고, 인식 정확도는 인쇄체 100%, 필기체 97% 이상, 문서 분류와 범죄유형 추론 정확도는 100%를 기록했다.
- 이전과 차이: 기존 AI-OCR로 판독이 어려웠던 저화질 신분증과 필기체 피해구제신청서의 인식 정확도도 개선됐다는 설명이다.
시장 반응사실
- 원문에서 확인되는 시장 반응·경쟁사 비교 정보는 없다. 원문 관련기사에는 같은 회사의 다른 문서 AI 사례(SKT 광고 제작 자동화 실증 등)가 소개되어 있다.
출처
요즘AI 해석
요즘AI 편집진의 해석이에요. 위의 사실과 구분해서 읽어 주세요.
왜 중요한가
- 금융 서류 업무가 자동화 대상이 됨. 인식·분류·정보 추출·유형 추론까지 한 흐름으로 묶은 사례라, 단순 문자 인식을 넘어 판단 단계까지 자동화 범위가 넓어졌음을 보여준다.
- 자동화와 사람 검수를 나누는 설계. 신뢰도에 따라 자동 처리와 담당자 검수로 분기하는 구조는 오류 비용이 큰 업무에서 현실적인 운영 방식을 보여준다.
- 폐쇄망 환경에서도 VLM 적용이 가능함. 온프레미스로 구축했다는 점은 외부 클라우드 사용이 제한되는 금융·공공 조직에 의미가 있다.
실무자가 얻어갈 것
- 기존 OCR 결과와 VLM 결과를 교차검증해 신뢰도 기준으로 자동 처리·사람 검수를 나누는 설계를 검토할 만하다.
- 저화질 신분증, 필기체 서식처럼 기존 OCR이 약한 문서 유형을 따로 모아 성능을 비교하면 도입 효과를 판단하기 쉽다.
- 보안 요건이 엄격한 조직은 처음부터 온프레미스 구축 가능 여부를 요건에 포함해 검토하는 것이 좋다.
우리 회사에 적용하면
- 금융·보험처럼 신청서·증빙 서류가 많은 조직이라면, 서류 분류와 정보 추출 단계부터 자동화 후보로 검토해 볼 수 있다.
- 공공기관 민원·행정 담당자라면, 필기체 서식이나 저화질 스캔본처럼 기존 OCR이 약한 문서를 우선 대상으로 삼을 수 있다.
- 폐쇄망 환경의 제조·의료 조직이라면, 외부 반출 없이 돌릴 수 있는 온프레미스 방식이 가능한지 먼저 확인할 수 있다.
바로 해볼 테스트 1개
실제 업무 서류 50건을 모아 기존 OCR과 VLM으로 각각 항목을 추출하고, 두 결과가 불일치하는 건의 비율과 사람이 검수해야 하는 건수를 기록해 본다. 2026-11-30까지 결과를 비교한다.
2026-10-31 수집판 · 09:38 KST 기준 · 원문의 게시 시점 기준이며 이후 상황은 출처 원문을 확인하세요. 공식 발표와 언론 원문을 바탕으로 요약했고, 요즘AI 해석 칸은 요즘AI 편집진의 해석입니다.
같은 날 다른 브리핑
이 글이 도움이 됐다면 공유해주세요
문서 업무 AX · REMO의 실전 브리핑
우리 회사 문서 업무, 어디까지 자동화될까
보고서·제안서·회의록 흐름을 기준으로 지금 단계와 먼저 바꿀 곳을 3분 진단으로 확인하세요.
