IT 시장 분석 및 컨설팅 기관인 인터내셔날데이터코퍼레이션코리아(International Data Corporation Korea Ltd., 이하 한국IDC)는 최근 발표한 ‘국내 생성형 AI 업무 적용 사례 연구(Generative AI Use Cases: Adoption and Priorities in Korea)’ 보고서를 통해 아시아 태평양 지역 조직의 생성형 AI 도입 현황과 국내 10개 기업 및 공공기관의 사례를 소개했다.

보고서에 따르면, 아시아 태평양 지역의 생성형 AI 도입 현황 설문에서 한국 조직의 72%가 이미 생성형 AI를 ‘현재 사용 중’인 것으로 나타났으며, 이는 AP 지역 평균인 59.5%보다 12.5% 포인트 높은 수치다. 또한 한국 조직의 47.2%는 2024년에 10개 이상의 생성형 AI 유즈케이스를 배포할 예정이며, 2025년에는 48%의 한국 조직이 50개 이상의 유즈케이스를 배포할 계획이라고 응답했다.

아시아 태평양 지역 조직의 69.6%, 한국 조직의 78%가 생성형 AI 도입으로 인해 직원 생산성이 개선됐다고 평가해 향후 엔터프라이즈 생성형 AI 도입이 더욱 가속화될 것으로 전망됐다.

국내 주요 생성형 AI 도입 사례 분석
보고서에서는 LG전자, 포스코홀딩스, ㈜한화, 스타벅스, 한국은행, 국회도서관 및 한국전력 등 국내 기업 및 공공기관의 생성형 AI 도입 사례를 중점적으로 분석했다.

LG전자는 제품 기획과 개발 업무를 맡은 직원들이 전문적인 IT 지식 없이도 수백 테라바이트의 데이터를 분석할 수 있도록 SQL 코드를 자동 생성해주는 사내 AI 시스템을 구축했다. 포스코홀딩스는 세계 2차전지 시장 뉴스를 준실시간으로 분석하고 2차전지 전문 용어를 정확하게 처리하는 고성능 RAG 시스템과 이슈 추천 시스템을 연계 구축했다.

㈜한화는 건설 사업 관련 법조문 검색의 정확성을 높이기 위해 법리 해설서를 RAG 파이프라인에 통합했으며, 스타벅스는 바쁜 매장 파트너의 빠른 지식 검색을 돕기 위해 서버리스 NoSQL 데이터베이스를 AI 시스템에 결합해 응답 시간을 개선했다.

금융 부문에서는 정부 데이터 보안 규정을 준수하기 위해 자체 언어모델을 내부에서 직접 구축한 한국은행의 사례가 주목받았으며, 공공 부문에서는 한국어 전용 온프레미스 설치형 sLM(Small Language Model)과 전통적 빅데이터 분석 서비스를 통합한 국회도서관, 저사양 인프라에서도 거대 언어모델을 운영하기 위해 다양한 오픈소스 모델과 메모리 효율화 프레임워크를 테스트한 한국전력의 사례가 포함됐다.

생성형 AI 도입의 가속화와 데이터 관리 전략 변화 전망
한국IDC는 보고서를 통해 국내 기업들이 생성형 AI 도입을 통해 엔터프라이즈 데이터 관리 전략에 새로운 요구사항이 생겨남에 따라 향후 빅데이터 플랫폼과 AI 애플리케이션 플랫폼을 아키텍처 수준에서 통합하는 추세가 나타날 것이라고 전망했다.

전대일 한국IDC 수석연구원은 “IDC 설문 결과는 한국 사회의 기술 얼리어답터 특성을 보여주고 있으며, 사례 연구는 국내 조직의 생성형 AI 도입을 이끄는 리더와 전담팀의 품질에 대한 높은 기준을 반영하고 있다"며 “일부 조직은 일반적인 레퍼런스 모델을 신속히 구현하는 전시성 사업을 지양하고 있으며, 자사 임직원이 실제 만족할 수 있는 AI 성능을 제공하기 위해 특정 업무에 특화된 데이터 엔지니어링 문제를 해결하는 데 많은 공수를 투입하고 있다”고 설명했다.

또한 그는 “국내 기업들은 특정 AI 모델에 종속되지 않기 위해 다양한 모델을 비교 테스트하거나 심지어 자체적으로 모델을 개발하는 방안도 검토하는 등 생성형 AI 적용에 있어 빠른 도입과 포괄적인 접근을 동시에 보여주고 있다”고 평가했다.