Computer Science/IT
[빅데이터 분석 기사] 4. 빅데이터 결과해석
Chapter 01 분석모형 평가 및 개선 1. 분석모형평가 1. 평가 지표 2. 분석모형 판단 3. 교차검증 4. 모수 유의성 검증 5. 적합도 검증 2. 분석모형 개선 1. 과대적합방지 2. 매개변수 최적화 3. 분석모형 융합 4. 최종모형 선정 Chapter 02 분석결과 해석 및 활용 1. 분석결과 해석 1. 분석결과해석 2. 비즈니스 기여도 평가 2. 분석결과 시각화 1. 시공간 시각화 2. 광계 시각화 3. 비교시각화 4. 인포그래픽 3. 분석결과 활용 1. 분석모형 전개 2. 분석결과 확용 시나리오 개발 3. 분석모형 모니터링 4. 분석모형 리모델링
[빅데이터 분석 기사] 3. 빅데이터 모델링
Chapter 01 분석모형 설계 1. 분석 절차 수립 1. 분석모형 선정 1. 통계 기반 분석모형(현상에서 패턴 발견(현상추청), 예측검정) -> 기술통계, 상관분석, 회귀분석, 분산분석, 주성분분석, 판별분석 2. 데이터마이닝 기반 분석모형(현상에서 인과 결론 도출) -> 분류(classification)모델, 예측(prediction), 군집화(Clustering), 연관규칙(Association Rule) 3. 머신러닝 기반 분석모형(현상을 예측) -> 지도학습(Supervised), 비지도학습(unSupervised), 강화학습(Reinforcement), 준지도학습(Semi-) 4. 변수에 따른 분석기법 선정 연속형x연속형: 범주형x범주형: 범주형x연속형: 독립변수 종속변수 5. 분석모형 활용..
[빅데이터 분석 기사] 2. 빅데이터 탐색
Chapter 01 데이터 전처리1. 데이터 정제1. 데이터 정제데이터 정제 절차 데이터 오류 원인분석(결측값, 노이즈, 이상값)> 데이터 정제 대상선정(모든데이터) > 데이터 정제 방법결정(삭제, 대체, 예측값) 데이터 정제 기법 변환, 파싱, 보강 데이터 정제 기술 ETL, 맵리듀스, 스파크/스톰, CEP, 피그, 플럼 데이터 세분화 방법 계층적 방법: 응집분석법, 분할분석법 비계층적 방법: 인공신경망 모델, K평균 군집화 2. 데이터 결측값 처리결측값 종류 완전 무작위 결측, 무작위 결측, 비 무작위 결측 결측값 처리 절차 결측값 식별 > 결측값 부호화 > 결측값 처리 방법 결측값 처리 방법 1️⃣ 단순 대치법 - 완전 분석법 - 평균 대치법 - 단순확률 대치법(핫덱/콜드덱/혼합) 2️⃣ 다중대치법..
[빅데이터 분석 기사] 1. 빅데이터 분석 기획
Chapter 01 빅데이터의 이해 1. 빅데이터 개요 및 활용 1. 빅데이터의 특징 2. 빅데이터의 가치 3. 데이터 산업의 이해 4. 빅데이터 조직 및 인력 2. 빅테이터 기술 및 제도 1. 빅데이터 플랙폼 2. 빅데이터와 인공지능 3. 개인정보보호법 Chapter 02 데이터 분석 계획 1. 분석 방안 수립 1. 분석 로드맵 설정 2. 분석 문제의 정의 3. 데이터 분석 방안 2. 분석 작업 계획 1. 데이터 확보 계획 2. 분석 절차 및 작업 계획 Chapter 03 데이터 수집 및 저장 계획 1. 데이터 수집 및 전환 데이터 처리기술: 데이터 필터링/변환/정제/통합/축소 1. 데이터 수집 데이터 수집 프로세스 수집 데이터 도출 → 목록작성 → 데이터 소유기관 파악 및 협의 → 데이터 유형 분류 ..
Oracle Live SQL로 sql 연습하기
Orable 에서 제공하는 Live SQL 웹사이트를 사용하면 나의 컴퓨터에 아무런 소프트웨어 설치 없이 sql 쿼리문을 연습할 수 있다. 먼저 Live SQL 웹사이트에 들어가자 네이버에 oracle live sql 을 검색하고 해당 웹사이트에 접속한다. 오라클 계정에 로그인을 한다. (이 사이트를 이용하기 위해서는 Oracle 웹사이트에 회원가입을 해야한다. 계정이 없으면 아래 계정만들기를 눌러 회원가입을 한다.) I Agree를 체크하고 Accept를 클릭하면 사용하기위한 준비는 끝났다. 그럼 이제 SQL문을 테스트해보자 먼저 왼쪽 의 메뉴에서 "SQL Worksheet"를 클릭하고, 테스트할 SQL문을 작성하자 그리고 오른쪽 상단의 "RUN" 버튼을 클릭하면 SQL문이 정상적으로 실행되는 것을 확..
git 사용을 위한 Sourcetree 설치 (for window)
Sourcetree를 구글에 검색하면 맨 처음 나오는 사이트가 있는데요 바로 Sourcetree를 다운로드 할수 있는 사이트입니다. Sourcetree 를 만든 회사가 Atlassian 이라는 회사인데 Sourcetree를 사용하시려면 우리 계정에 가입해주세요 라는 말입니다.