플러스프로젝트 배경
1) 문제 상황 - 인재 데이터 확보를 위해 복잡한 웹사이트를 직접 탐색해야 하는 구조 - 수작업 기반 데이터 수집으로 인해 시간 소모 및 비효율 발생 - 데이터 수집 과정의 일관성 부족 2) 프로젝트 목표 - 웹 기반 인재 데이터를 자동으로 수집할 수 있는 시스템 구축 - 구조화된 형태로 데이터를 확보하여 활용 가능하도록 개선 - 수작업을 제거하고 데이터 수집 효율 향상 3) 접근 방식
프로젝트 성과
수작업 기반 데이터 수집 프로세스 제거
매달 180건의 연구실 데이터를 수작업이 아닌 자동으로 수집
대규모 인재 데이터 수집 시간 단축
하루 2시간씩 20일 수집으로 전체 데이터 획득
데이터 수집 결과의 일관성 및 신뢰성 향상
규격화된 데이터 수집
내부 운영에 사용 가능한 시스템 구축
lg에너지 솔루션의 자체 배포 시스템에서 주기적으로 실행되도록 세팅
핵심 기능
웹사이트 자동 탐색 및 데이터 수집
연구실 주소를 입력하면 스케줄링된 시점에 모든 인재 정보 수집
진행 단계
요구사항 정의 및 문제 분석
2026.01.
- 인재 데이터 수집 방식 및 기존 프로세스 분석
- 수작업 기반 데이터 수집의 비효율 확인
- 수작업 기반 데이터 수집의 비효율 확인
프로젝트 상세
본 프로젝트는 인재 데이터 수집 과정에서 발생하는 수작업 중심의 비효율을 해결하기 위해 진행되었습니다. 기존에는 다양한 웹사이트를 직접 탐색하며 데이터를 수집해야 했기 때문에 시간 소모가 크고 일관성이 떨어지는 문제가 있었습니다. 이를 해결하기 위해 동적 웹 환경을 탐색할 수 있는 자동화 구조를 설계하고, AI 기반 multi-agent pipeline을 통해 데이터 추출, 검증, 구조화를 자동으로
