(1) 빅데이터 플랫폼 : 빅데이터 수집부터 저장, 처리, 분석 등 전 과정을 통합적으로 제공하여 그 기술들을 잘 사용할 수 있도록 준비된 환경 빅데이터 플랫폼의 등장배경 ① 비즈니스 요구사항 변화 : 빠른 의사결정보다 장기적이고 전략적인 접근 필요. 초저가의 대규모 프로세싱과 클라우드 컴퓨팅 기반의 분석 환경 등장 ② 데이터 규모와 처리 복잡도 증가 : 다양한 형태의 데이터 수집과 복잡한 로직을 이용한 대용량 처리 필요.
분산 처리가 불가피하며 이를 제어할 수 있는 고도의 기술 필요 ③ 데이터 구조의 변화와 신속성 요구 : SNS 데이터나 로그 파일, 스트림 데이터 등 비정형 데이터 비중과 실시간 처리에 대한 요구 높아짐. 약한 관계형 스키마나 반정형 데이터 같은 정형적이지 않은 데이터 증가 ④ 데이터 분석 유연성 증대 : 기존 통계적 분석방법과 같이 정해진 절차와 과정을 따르지 않아도 분석 목적에 맞게 유연한 분석이 가능해짐.
인공지능 기술 발전으로 다양한 방법론을 통해 텍스트...
#
ETL
#
센서네트워크
#
빅분기필기
#
빅분기
#
빅데이터플랫폼
#
빅데이터처리기술
#
빅데이터자격증
#
빅데이터수집
#
빅데이터분석기사
#
빅데이터
#
분산병렬컴퓨팅
#
맵리듀스
#
로그수집기
#
RSS
#
크롤링
원문 링크 : 빅데이터분석기사 필기 공부 day-27
