Skip to content

๐Ÿค์€ผ : ๋ณด๋‹ค ๋‚˜์€ ์šฐ๋ฆฌ๋ฅผ ์œ„ํ•ด๐Ÿค ๋ถ€๋ถ€ ์ผ์ •/์ถ”์–ต ๊ณต์œ  ์• ํ”Œ๋ฆฌ์ผ€์ด์…˜

Notifications You must be signed in to change notification settings

VVUE-EXcITing/VVUE-BE

Folders and files

NameName
Last commit message
Last commit date

Latest commit

ย 

History

43 Commits
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 

Repository files navigation

Logo

๐Ÿค์€ผ : ๋ณด๋‹ค ๋‚˜์€ ์šฐ๋ฆฌ๋ฅผ ์œ„ํ•ด๐Ÿค

๋ถ€๋ถ€ ์ผ์ •/์ถ”์–ต ๊ณต์œ  ์• ํ”Œ๋ฆฌ์ผ€์ด์…˜



๐Ÿ’™์ฃผ์š” ๊ธฐ๋Šฅ๐Ÿ’™

โœ”๏ธ ๋ถ€๋ถ€๋Š” ๊ณต์œ  ์ผ์ •(๊ธฐ๋…์ผ, ๋ถ€๋ถ€ ๋™๋ฐ˜ ์•ฝ์†)์— ๋Œ€ํ•œ ๋ฆฌ๋งˆ์ธ๋“œ ์•Œ๋ฆผ์„ ๋ฐ›๋Š”๋‹ค.
โœ”๏ธ ๊ณต์œ  ์ผ์ •์— ๋Œ€ํ•ด ์ถ”์–ต์„ ์ž‘์„ฑํ•  ์ˆ˜ ์žˆ์œผ๋ฉฐ, ๋น…๋ฐ์ดํ„ฐ ๊ธฐ์ˆ ์„ ํ™œ์šฉํ•˜์—ฌ ์žฅ์†Œ๋ฅผ ์ถ”์ฒœ๋ฐ›์„ ์ˆ˜ ์žˆ๋‹ค.
โœ”๏ธ ๋ฐฉ๋ฌธํ•œ ์žฅ์†Œ๋ณ„๋กœ ์ถ”์–ต์„ ํšŒ์ƒํ•  ์ˆ˜ ์žˆ๋‹ค.

๐Ÿ’™์•„ํ‚คํ…์ฒ˜๐Ÿ’™



๐Ÿ’™ํ•ต์‹ฌ ๊ธฐ์ˆ ๐Ÿ’™

1. RDS - Hadoop ํŒŒ์ดํ”„๋ผ์ธ

๊ธฐ์ˆ  ์„ ์ • ์ด์œ 

โœ”๏ธ Hadoop : ๋Œ€์šฉ๋Ÿ‰ ๋ฐ์ดํ„ฐ ์ ์žฌ
โœ”๏ธ Sqoop : RDS์—์„œ ์žฅ์†Œ ํ‰์  ๋ฐ์ดํ„ฐ๋ฅผ HDFS๋กœ ์ ์žฌํ•˜๊ธฐ ์œ„ํ•ด ์‚ฌ์šฉ
โœ”๏ธ Spark : ์ธ๋ฉ”๋ชจ๋ฆฌ ๋ฐฉ์‹์œผ๋กœ ์ฒ˜๋ฆฌํ•˜๋Š” Spark๋ฅผ ์‚ฌ์šฉํ•˜์—ฌ Hadoop์˜ ์—ฐ์‚ฐ ์†๋„๋ฅผ ๋ณด์™„
โœ”๏ธ Airflow : ์ฝ”๋“œ๋ฅผ ํ†ตํ•ด ํŒŒ์ดํ”„๋ผ์ธ์„ ๊ตฌํ˜„ํ•  ์ˆ˜ ์žˆ์Œ

๐Ÿ’™ํ”„๋กœ์ ํŠธ ๋ฆฌ๋ทฐ๐Ÿ’™

โœ”๏ธ ์ถ”์ฒœ ๊ธฐ๋Šฅ ๊ณ ๋„ํ™” (์œ ์ € ๊ธฐ๋ฐ˜ ํ•„ํ„ฐ๋ง์„ ์‚ฌ์šฉํ•œ ์ถ”์ฒœ ๊ธฐ๋Šฅ)
โœ”๏ธ ํ•˜๋‘ก ์—์ฝ” ์‹œ์Šคํ…œ์„ ๊ฒฝํ—˜ํ•ด๋ณผ ์ˆ˜ ์žˆ์—ˆ์Œ

๐Ÿ’™๋‹ด๋‹น ์—ญํ• ๐Ÿ’™

๋ฐ•์€์ • ๊ถŒ๊ธฐ์œค ์–‘์šฐ์ฒ 
๋ฐ•์€์ • ๊ถŒ๊ธฐ์œค ์–‘์šฐ์ฒ 
์ถ”์–ต, ์•Œ๋ฆผ,
์œ ์ €, ์ธ์ฆ/์ธ๊ฐ€, ๊ฐœ๋ฐœ ํŽธ์˜
์ธํ”„๋ผ / ๋น…๋ฐ์ดํ„ฐ ๊ธฐ์ˆ  / ๋ถ€๋ถ€์ธ์ฆ ๋น…๋ฐ์ดํ„ฐ ๊ธฐ์ˆ  / ์ผ์ •, ์žฅ์†Œ

back to top

About

๐Ÿค์€ผ : ๋ณด๋‹ค ๋‚˜์€ ์šฐ๋ฆฌ๋ฅผ ์œ„ํ•ด๐Ÿค ๋ถ€๋ถ€ ์ผ์ •/์ถ”์–ต ๊ณต์œ  ์• ํ”Œ๋ฆฌ์ผ€์ด์…˜

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published