빅데이터분석기사 준비 - 1. 빅데이터 분석 기획 :: 데이터 분석 계획

1과목 빅데이터 분석 기획 - 키워드 정리

 

제2장 데이터 분석 계획

 

작업 분할 구조도 (WBS : Work Breakdown Structure)

• 프로젝트 관리와 시스템 공학 분야에서 프로젝트의 더 작은 요소로 분해시킨 Deliverable 지향 분업 구조
• 프로젝트 팀이 프로젝트 목표를 달성하고 필요한 인도물을 산출하기 위해 실행하는 작업을 인도물 중심의 계층 구조로 세분해 놓은 것
• 작성 절차 : 프로젝트 소요비용 배분 -> 프로젝트 WBS 수립 -> 프로젝트 업무분장 계획 및 배분

 

빅데이터 분석 프로세스

• 5단계(NCS) : 도메인 이슈 도출 -> 분석 목표 수립 -> 프로젝트 계획 수립 -> 보유 데이터 자산 확인 -> 빅데이터 분석 결과 시각화
• 6단계 : 문제인식 -> 관련 연구조사 -> 모형화(변수 선정) -> 자료수집(변수 측정) -> 자료 분석 -> 분석 결과 제시 

 

데이터 수집 시 고려사항

 분석 대상 비즈니스 이해, 데이터 수집 대상 및 유형, 데이터 위치, 수집 방법, 획득 비용 등

 

데이터 분석 관련 문서화 

 빅데이터 요건 정의서, 분석목표정의서, WBS, 데이터 품질보고서, 데이터 분석 보고서 등

 

빅데이터 분석목표정의서 

 데이터 원천 파악(데이터 정보, 입수 난이도), 분석 접근 방안, 데이터 분석모형 적용 가능성 판단, 성과평가 기준(정성 및 정량적 평가기준) 마련 등

 

빅데이터 주요 분석 기술

 회귀, 분류, 연관성, 머신러닝, 감정, 소셜 네트워크, 유전 알고리즘 등 

 

빅데이터 분석 도구

 Hadoop, MapReduce, R, Presto, BigQuery, Summingbird, Esper 등

 

빅데이터 처리 시스템

• 데이터 처리를 통하여 유용한 정보를 찾고 데이터가 포함하고 있는 지식을 찾아내며, 이러한 정보를 찾기 위한 데이터 가공 및 분석과정 전반을 지원하는 시스템
• 주요 고려사항 : 데이터 양, 데이터 발생 속도, 데이터 형태, 새로운 처리 기술 등
• 요구사항 : 결합 허용, 저비용, 기존 시스템 연계성 등

 

데이터 확보 계획 수립 절차

목표 정의 -> 요구사항 도출 -> 예산안 수립 -> 계획 수립

 

WBS(Work Breakdown Structure, 작업 분할 구조도) 작성 절차 

 데이터 분석 과제 정의 -> 데이터 준비 및 탐색 -> 데이터 분석 모델링 및 검증 -> 산출물 정리 

 

데이터 수집 및 점검 프로세스 

 데이터 상황 점검 -> 데이터 수집경로 및 데이터 유형 파악 -> 데이터별 활용 정보 점검

 

데이터 적절성 점검 항목

 데이터 누락, 소스 데이터와의 비교, 데이터 정확성, 보안 점검, 저작권 점검, 대량 트래픽 발생 점검 등

 

데이터 저장 시스템 설계를 위한 요구사항

 요구사항 수집, 요구사항 분석(데이터 및 인터페이스 등), 요구사항 명세(데이터 요구사항 명세서 작성), 요구사항 검증 등