본문

데이터 가공 절차 표준화

1. 요건정의

  요건 정의 단계는 수요처의 요구 사항을 정의하는 단계로 업무 분석, 기획/설계，데이터 식별 의 세부 직무

  2. 데이터 수집/설계

    원본 데이터를 수집 하고 가공 데이터 세트를 설계하며，가공환경을 구축하는 단계

  3.A-1 데이터 태깅/라벨링

    작업 전 데이터 추 출 및 데이터의 분류 작업을 통하여 태깅/레이 블링 작업을 진행하고 이후 관련 메타데이터 추 출/정의 및 개인정보에 대한

    비식별화 처리를 하 는 단계

 3.A-2 데이터 학습

   알고리즘의 반복 학습을 통하여 모델을 수립하는 단계

 3.A-3 성능 및 결과분석

   처리 관련 성능 모니터링 및 관련 튜닝을 하는 단계

 3.B-1 데이터 분류

   관련 데이터 추출 및 데이 터 분류，관련 데이터를 처리하기 위해 개발하는 단계

 3.B-2 데이터 클린징

   오류 데이터에 대한 정 제 및 개인정보에 대한 비식별화 처리를 하는 단계

 3.B-3 데이터 결과분석

   처리된 데이터에 대 한 검증 및 평가를 하는 단계

 4. 데이터 품질

   각 공정의 공통 공정으로 각 단계별 데이터 품질을 진단하고 정제하는 단계

 5. 가공 데이터 세트

   수요처에 전달되는 최종 데이터 세트로 처리하는 단계

 6. 분석/시각화

   다양한 관점으로 볼 수 있는 형태로 분석 및 시각화를 개발하는 단계