언어모델데이터엔지니어3급,2급,1급
주식회사 한국인공지능아카데미, 사단법인 한국인공지능연구소
- 등록번호
- 2023-005902
- 주무부처
- 과학기술정보통신부
- 등록일
- 2023-12-08
- 검정방식
- —
취득자0명
응시자0명
합격률—
검정 횟수0회
자격 개요
언어모델의 관한 기술적 지식과 함께, 언어 데이터의 특성과 도메인 지식을 활용하여 효과적인 모델 학습을 지원하는 역할을 수행한다. 데이터 수집, 전처리, 저장 및 관리, 수집부터 모델 학습까지의 과정을 자동화하는 파이프라인 설계 및 구현, 그리고 언어모델 학습의 속도 및 효율성을 향상시키는 업무를 수행한다.
등급별 직무내용
[3급]- 주어진 데이터의 정규화, 토큰화, 누락 데이터 처리 같은 기본적인 전처리 작업을 수행한다. - 오픈소스 언어모델에 대한 기본적인 지식을 가지고 간단한 파이프라인 구축을 통해 데이터의 일관된 흐름을 보장한다.- 이 과정에서 발생하는 오류나 이슈를 식별하고 문제 해결을 위한 기초적인 디버깅을 수행한다.[2급]- 웹 크롤링이나 API를 통해 데이터를 수집하는 작업을 수행한다. - 데이터 변환 및 처리 로직을 구현하는 등 고급의 데이터 전치리 작업을 수행한다. - 데이터 분석 및 보고서 작성 등의 직무를 수행한다.[1급]- 데이터처리 자동화 파이프라인을 설계하고 구축하는 직무를 수행한다.- 오픈소스 언어모델에 대한 구조를 이해하고 데이터 파인튜닝 업무를 수행한다. - 도메인 데이터 검색, 수집, 파이프라인 구축 등 언어모델별 데이터 전략을 수립하는 업무를 수행한다.
기관이 등록 시 제출한 내용입니다 — 원문 그대로