brunch

You can make anything
by writing

C.S.Lewis

7탄- 꽁 머니 카지노 3 만-수집 1/7

꽁 머니 카지노 3 만를 수집하고, 꽁 머니 카지노 3 만 전송하는 법을 알아보자.


<1빅꽁 머니 카지노 3 만의 특징

<2 꽁 머니 카지노 3 만 수집 유형 3가지

<3 키네시스 에이전트로 꽁 머니 카지노 3 만를 쉽게 수집할 수 있다.

<4 IDC와 AWS 간 꽁 머니 카지노 3 만 전송

<5 datasync, 스토리지 게이트웨이, S3 DistCP , Apache Sqoop로 꽁 머니 카지노 3 만 이전하기

<6실습과 정리

<7 다음 과정 , 키네시스

<8 같이 보면 좋을 자료 ~



<1빅꽁 머니 카지노 3 만의 특징

볼륨이 크다

속도

수집 꽁 머니 카지노 3 만의다양성



빅꽁 머니 카지노 3 만는

꽁 머니 카지노 3 만 볼륨이 크다

꽁 머니 카지노 3 만가 빠르게 생성된다. 빠르게 처리해야 하는 경우도 있다.

꽁 머니 카지노 3 만가 다양하다. 서버 꽁 머니 카지노 3 만, 영상 꽁 머니 카지노 3 만등



1

정형 꽁 머니 카지노 3 만?

규칙이 있는 것

의미 파악이 가능한 것

남자, 여자


2

비 정형 꽁 머니 카지노 3 만?

정해진 규칙이 없는 것

의미 파악이 힘든 것

책의 텍스트 꽁 머니 카지노 3 만, 영상 정보


3

꽁 머니 카지노 3 만 처리 ?

꽁 머니 카지노 3 만 -- 수집(저장) ---- 처리/분석(저장) --------------------- 시각화(저장) -------- 의사 결정

Kinesis ,S3EMR, Elastic Search, S3QuickSight, S3



4

순서 예)

꽁 머니 카지노 3 만-----키네시스---- EMR ------- 다이나모 디비---S3---- Redshift --- QuickSight--의사결정



5

도구 선택 체크리스트 ?

정형 꽁 머니 카지노 3 만 ?비정형 꽁 머니 카지노 3 만?

처리 시간?분단위?하루?

처리량?




<2 꽁 머니 카지노 3 만 수집 유형 3가지


1

트랜잭션 꽁 머니 카지노 3 만?

꽁 머니 카지노 3 만 베이스에 저장


웹서버로 수집 ----------- 꽁 머니 카지노 3 만 베이스(RDS 등)



2

파일 꽁 머니 카지노 3 만?

파일 올리고, 센터 꽁 머니 카지노 3 만 파일로 올라가는 꽁 머니 카지노 3 만~


모바일앱, 센서, IOT디바이스 등으로 수집 --------- 클라우드 스토리지 (S3)



3

스트리밍 꽁 머니 카지노 3 만?

꽁 머니 카지노 3 만를 로드하는 것, 주로 음악이나 동영상 등 멀티미디어 꽁 머니 카지노 3 만

스트리밍 꽁 머니 카지노 3 만 수집 --------- 스트림 스토리지 (Kinesis)




<3 키네시스 에이전트로 꽁 머니 카지노 3 만를 쉽게 수집할 수 있다.


data stream , data firehose에 직접 쓸 수 있다.

https://docs.aws.amazon.com/ko_kr/streams/latest/dev/writing-with-agents.html

서버에 설치해보자~

키네시스에서 꽁 머니 카지노 3 만를 수집한다.




<4 IDC와 AWS 간 꽁 머니 카지노 3 만 전송


1

VPN 연결

꽁 머니 카지노 3 만


2

전용선 연결(DX) 연결

꽁 머니 카지노 3 만


3

S3로 멀티파트 업로드


4

Snowball (물리적 이전)




<5 datasync, 스토리지 게이트웨이, S3DistCP , Apache Sqoop로 꽁 머니 카지노 3 만 이전하기


1

온프라미스 - S3로 꽁 머니 카지노 3 만 가져온다.

datasync


2

온프라미스 - S3로 꽁 머니 카지노 3 만 가져온다.

스토리지 게이트웨이

https://docs.aws.amazon.com/ko_kr/storagegateway/latest/userguide/WhatIsStorageGateway.html


3

S3 - EMR HDFS로 꽁 머니 카지노 3 만 복사 ( S3에 저장된 꽁 머니 카지노 3 만를 하둡으로 복사하기 위해 사용하는 툴)

S3 DistCP

https://aws.amazon.com/ko/premiumsupport/knowledge-center/copy-s3-hdfs-emr/


4

Amazon S3, 하둡, HDFS 와RDBMS 꽁 머니 카지노 3 만베이스 간에 꽁 머니 카지노 3 만를 전송하기 위한 도구

꽁 머니 카지노 3 만를 HDFS - RDS로 전송 - HDFS로 전송 가능

Apache Sqoop(커넥터 연결툴이다)

https://docs.aws.amazon.com/ko_kr/emr/latest/ReleaseGuide/emr-sqoop.html



5

정리?

S3 -------S3 DistCP 사용------ EMR HDFS로 --------Apache Sqoop 사용------- DBMS (RDS등)




<6 실습과 정리


/@topasvga/1219









<7 다음 과정 , 키네시스


/@topasvga/1311




<8같이 보면 좋을 자료 ~


/@topasvga/1766


/@topasvga/2698


감사합니다.

브런치는 최신 브라우저에 최적화 되어있습니다. IE chrome safari