로딩
요청 처리 중입니다...

빅데이터분석기사 필기 공부 day-18

 빅데이터분석기사 필기 공부 day-18

데이터 수집 기술 ① 데이터 유형별 데이터 수집 기술 - 정형 데이터 · ETL(Extract Transform Load) : 수집 대상 데이터를 추출 및 가공하여 DW에 저장하는 기술 · FTP(File Transfer Protocol) : TCP/IP나 UDP 프로토콜을 통해 원격지 시스템으로부터 파일 송수신하는 기술 · API(Application Programming Interface) : 솔루션 제조사 및 3rd party 소프트웨어로 제공되는 도구. 시스템 간 연동을 통해 실시간으로 데이터를 수신할 수 있도록 기능을 제공하는 인터페이스 · DBToDB : DBMS 간 데이터를 동기화 또는 전송하는 방법 · 스쿱(Sqoop) : RDBMS와 하둡 간 데이터를 전송하는 방법 - 비정형 데이터 · 크롤링(Crawling) : 인터넷상 제공되는 다양한 웹 사이트로부터 소셜 네트워크 정보, 뉴스, 게시판 등으로부터 웹 문서 및 정보를 수집하는 기술 · RSS(Rich Site S...

# ETL # 융합데이터베이스 # 스크래피 # 스쿱 # 빅분기필기 # 빅분기 # 빅데이터자격증 # 빅데이터분석기사 # 빅데이터 # 데이터적절성 # 데이터저장방식 # 데이터베이스구조 # FTP # 플럼