목록2022 Bigdata Class/Note (5)
cool hamsters never sleep
GitHub - 2022shushu/BigData2022 Contribute to 2022shushu/BigData2022 development by creating an account on GitHub. github.com 1장. 데이터 분석 알고리즘의 이해 1. 데이터 분석 모델 개요 1) 데이터 탐색 - 탐색적 데이터 분석 (EDA) : 새로운 가설 생성 및 통찰을 얻어 방향성 설정 - 확증적 데이터 분석 (CDA) : 가설 검정의 유효성 검정. 행동에 대한 평가로 채택 여부 결정 2) 분석 모델 구축 절차 : 요건 정의 -> 모델링 (알고리즘) -> 검증 및 테스트 -> 적용 3) 분석 모델 정의 시 고려사항 - 모델 선택 오류 : 적합하지 않은 함수 모델 생성 - 변수 누락 : 종속변수와 하나 ..
3장. SQL 기본 1. SQL 기본 이해 1) RDBMS와 SQL : SQL을 통해 DATA를 가져 옴 - Row : 2차원 구조를 가진 테이블에서 가로 방향으로 이뤄진 연결된 데이터 - Column : 2차원 구조를 가진 테이블에서 세로 방향으로 이뤄진 하나하나의 특정 속성 - Field : 칼럼과 행이 겹치는 하나의 공간 - PK : 유일하게 테이블의 각 행을 식별 (NOT NULL과 UNIQUE 조건 만족) ★★★ - FK : 열과 참조된 열 사이의 외래키 관계 적용 및 설정 2) DDL (데이터 정의어) : 데이터와 데이터 간 관계 정의를 위한 언어 3) DML (데이터 조작어) : 데이터베이스 사용자 또는 응용 프로그램의 데이터 검색, 등록, 삭제, 갱신 등의 처리 4) DCL (데이터 제의어..

1장. 디지털 전환과 공공 빅데이터 개요 1. 4차 산업혁명과 가치 2. 데이터의 이해 1) 데이터, 정보, 지식, 지혜의 의미 - 데이터 : 사실적 자료 (Fact) - 정보 : 처리 가공 (Processed Data) - 지식 : 일반화, 의사결정 활용 (Generalized Information) - 지혜 : 내재화된 능력 (Internalized Knowledge) 2) 공공 빅데이터 개념 (3V) - Volume, Variety, Velocity 2장. 데이터에 대한 이해와 정형 데이터 다루기 (데이터 해석) 1. 데이터와 데이터베이스 이해 1) 데이터, 데이터베이스 이해 - 존재적 특징 구분 정성적 데이터 정량적 데이터 형태 비정형 데이터 정형, 반정형 데이터 특징 객체 하나의 함의된 정보를 ..
1장. 데이터 사이언스를 위한 Python 응용 문법 1. 파이썬 시작하기 1) 주피터 노트북 주요 단축키 ★★★ - m : 마크다운 모드 - y : 코드 모드 - ctrl + shift + - : 셀 분할 - a : 셀 위에 신규 셀 추가 - b : 셀 아래에 신규 셀 추가 2. 파이썬 기본 문법 1) 컨테이너 타입 : 여러 개의 값을 다루는 자료형 - 리스트 : 순서 O, 변경 가능, 추가/삭제 가능 - 튜플 : 순서 O, 변경 불가, 추가/삭제 불가 - 세트 : 순서 X (집합), 변경 가능, 추가/삭제 가능 - 딕셔너리 : key-value쌍, 변경 가능, 추가/삭제 가능 3. 파이썬 응용 문법 1) Numpy - square() : 제곱 - sqrt() : 제곱근 - consum() : 누적합 ..
1장. 디자인씽킹 기반 문제 해결 방법론 1. 디자인씽킹 1) 개념 : 고객의 문제에 대한 공감 -> 정의 -> 아이디어 도출 -> 프로토타입 개발의 과정을 거쳐 해결책을 도출하는 사고 과정 2) 특성 : 공감, 통합적 사고, 낙관주의, 실험주의, 협업 3) 핵심 원리 : 분석적 사고 + 직관적 사고, 수렴과 확산의 원리 2장. 디자인씽킹 기반 문제 해결 방법론 (워크샵) 1. 창의적 생각 2. 브레인스토밍 기법을 활용한 문제 정의 3. 해결방안 도출 (페르소나와 고객 여정 지도) 4. 프로토타이핑 3장. 공공 빅데이터 분석 과제 기획 (BizDriven/DataDriven) 1. (Biz Driven) 업무 중심의 문제 정의와 주제 도출 1) 단계 : 비전 방향 검토 2) 단계 : 업무분석 개선요소 /..