조선대 빅데이터분석 중간고사 정리 최종 A+ 맞은 자료

소개

분량이 많지 않아 싸게 올렸습니다

기말 자료도 있으니 많은 관심 부탁드려요

목차

1. 1장
2. 2장
3. 3장
4. 4장

본문내용

* 빅데이터란
빅데이터란 데이터가 너무 방대하여 기존의 방법이나 도구로 수집, 저장, 분석이 어려운 정형 및 비정형 데이터를 의미한다.

* 빅데이터의 3 요소
1) 크기(Volume) : 기존 시스템으로 저장, 분석이 어려울정도로 데이터의 크기가 거대한데 이것을 처리 해야함
2) 속도(velocity) : 데이터의 생성, 저장 등의 과정이 빨리 이루어져야함 (배치처리, 실시간 처리)
3) 다양성(variety) : 정형, 반정형, 비정형 등 다양한 데이터로 구성되고 처리할수 있어야함
(정형 : 문자 그대로 정형화된 데이터, 고정된 필드에 저장되어있는 데이터,
반정형 : 고정된 필드에 저장되지는 않지만 xml이나 html과 같이 메타데이터나 스키마를 포함하는 데이터,
비정형 : 고정된 필드에 저장돼 있지 않은 데이터를 의미)

* 하둡이란
대용량 데이터를 분산 처리할 수 있는 자바 기반의 오픈소스 프레임워크이다.
(분산 파일 시스템인 HDFS에 데이터를 저장하고 분산 처리 시스템인 맵리듀스를 이용해 데이터를 처리)

참고자료

· 없음