์ค๋๋ ์ ๋์งํธ ์๋์๋ ์์ฒญ๋ ์์ ๋ฐ์ดํฐ๊ฐ ์์ฑ๋๊ณ ์์ต๋๋ค. ์ด ์์ฒญ๋ ๋ฐ์ดํฐ ์งํฉ์ ๋น ๋ฐ์ดํฐ๋ผ๊ณ ํ๋๋ฐ, ์ ํต์ ์ธ ๋ฐ์ดํฐ ์ฒ๋ฆฌ ๊ธฐ์ ๋ก๋ ๊ด๋ฆฌํ๊ธฐ ์ด๋ ต์ต๋๋ค.
๋น ๋ฐ์ดํฐ๋ฅผ ์ฒ๋ฆฌํ๋ ๊ฐ๋ ฅํ ๊ธฐ์ ์ด ํ์ํ๋ฉฐ, ์ด ๊ธฐ์ ์ ์ด๋ฌํ ๋ฐ์ดํฐ์์ ๊ฐ์น ์๋ ํต์ฐฐ๋ ฅ์ ์ถ์ถํ๊ธฐ ์ํ ํ๋ช ์ ์ผ์ผ์ผฐ์ต๋๋ค.
์ด ์๊ฐ ๊ธ์ ๋น ๋ฐ์ดํฐ ์ฒ๋ฆฌ ๊ธฐ์ ์ ํต์ฌ ๊ฐ๋ , ๋๋ฆฌ ์ฌ์ฉ๋๋ ๋๊ตฌ, ๋ค์ํ ํ์ฉ ์ฌ๋ก๋ฅผ ๊ฐ์๋ก ์ ๊ณตํฉ๋๋ค.
๋น ๋ฐ์ดํฐ์ ์ ์์ ๊ทธ ํน์ฑ์ ์ดํดํ๊ณ , ๋ค์ํ ์ฒ๋ฆฌ ๋๊ตฌ์ ํด๊ฒฐ์ฑ ์ ํ๊ตฌํ๋ฉฐ, ์ด ๊ธฐ์ ์ด ์ด๋ป๊ฒ ์ฐ์ ๊ณผ ์ฌํ์ ํ๋ช ์ ์ผ์ผํค๊ณ ์๋์ง ์ดํด๋ณด๊ฒ ์ต๋๋ค.
๋น ๋ฐ์ดํฐ ๋ถ์๋ฒ ํต์ฌ
๋น ๋ฐ์ดํฐ๋ ๋งค์ฐ ๋๋์ด๊ณ , ๋งค์ฐ ๋น ๋ฅด๊ฒ ์ฆ๊ฐํ๋ฉฐ, ๋ค์ํ ๊ตฌ์กฐ๋ฅผ ๊ฐ์ง๊ณ ์๋ ๋ฐ์ดํฐ์ ๋๋ค. ์ด๋ฌํ ๋ฐ์ดํฐ๋ฅผ ์ ์ํ๋ "3V"๋ผ๊ณ ๋ถ๋ฅด๋ ํน์ง์ "Volume(์ฉ๋)", "Velocity(์๋)", "Variety(๋ค์์ฑ)"์ ๋๋ค.
๋น ๋ฐ์ดํฐ๋ฅผ ์ฒ๋ฆฌํ๋ ๋ฐ ์ฌ์ฉ๋๋ ๊ธฐ์ ์๋ ๋ค์๊ณผ ๊ฐ์ ๊ฒ๋ค์ด ์์ต๋๋ค.
- ๋ถ์ ํ๋ซํผ: ํ๋ก, ์คํํฌ, ์นด์ฐ๋๋ผ
- ๋ฐ์ดํฐ๋ฒ ์ด์ค: NoSQL, MySQL, PostgreSQL
- ๋จธ์ ๋ฌ๋ ๋ฐ ๊น์ ํ์ต ์๊ณ ๋ฆฌ์ฆ
- ๊ฐ์ํ ๋๊ตฌ: ํ๋ธ๋ก, ํ์ BI, ๊ตฌ๊ธ ๋ฐ์ดํฐ ์คํ๋์ค
๋น ๋ฐ์ดํฐ๋ ๋ค์ํ ์ฐ์ ์์ ํ์ฉ๋๊ณ ์์ต๋๋ค.
- ์๋ฃ: ์ง๋ฃ ํจํด ๋ฐ ์ง๋ณ ์์ธก
- ๊ธ์ต: ์ฌ๊ธฐ ๊ฐ์ง ๋ฐ ํฌ์ ์กฐ์ธ
- ๊ณ ๊ฐ ๊ด๊ณ ๊ด๋ฆฌ: ํ๋ ๋ถ์ ๋ฐ ๋ง์ถคํ ๋ง์ผํ
๋น ๋ฐ์ดํฐ ๋ถ์์ ๋ค์์ ํฌํจํ ์ฌ๋ฌ ๊ฐ์ง ์ด์ ์ ์ ๊ณตํฉ๋๋ค.
- ํต์ฐฐ๋ ฅ ํฅ์: ๋ฐ์ดํฐ์์ ํจํด ๋ฐ ํธ๋ ๋ ์๋ณ
- ์์ฌ ๊ฒฐ์ ๊ฐ์ : ๋ฐ์ดํฐ ๊ธฐ๋ฐ ์์ฌ ๊ฒฐ์
- ํจ์จ์ฑ ํฅ์: ์๋ํ ๋ฐ ํ๋ก์ธ์ค ๊ฐ์
์ค์ฌ๋ก๋ก ๋ณด๋ ๋น ๋ฐ์ดํฐ ํ์ฉ
๋น ๋ฐ์ดํฐ ๋ถ์, ํ์ฉ ์ฌ๋ก
๋น ๋ฐ์ดํฐ๋ ๋ค์ํ ์ฐ์ ์์ ๊ฐ์น ์๋ ํต์ฐฐ๋ ฅ์ ์ป๋ ๋ฐ ์ฌ์ฉ๋ฉ๋๋ค. ๋ค์์ ๋น ๋ฐ์ดํฐ ํ์ฉ ์ฌ๋ก์ ๋๋ค.
์ฐ์ | ํ์ฉ ๋ถ์ผ | ์์ |
---|---|---|
์๋งค | ๊ณ ๊ฐ ํ๋ ๋ถ์ | ๋ง์ถคํ ํ๋ก๋ชจ์ ๋ฐ ์ ํ ์ถ์ฒ ์ ๊ณต |
๊ธ์ต | ์ฌ๊ธฐ ๊ฐ์ง | ์์ฌ์ค๋ฌ์ด ๊ฑฐ๋ ์๋ณ ๋ฐ ์๋ฐฉ |
์๋ฃ | ์ง๋ณ ์์ธก | ํ์ ๊ฒฐ๊ณผ ๊ฐ์ ๋ฐ ์กฐ๊ธฐ ์ง๋จ ์ง์ |
์ ์กฐ์ | ๊ณต์ ์ต์ ํ | ํจ์จ์ฑ ํฅ์ ๋ฐ ๋ญ๋น ๊ฐ์ |
์ ๋ถ | ๋ฒ์ฃ ๋ถ์ | ๋ฒ์ฃ ํจํด ์๋ณ ๋ฐ ์๋ฐฉ ์กฐ์น ์ํ |
๋ง์ผํ | ํ๊ฒํ ์บ ํ์ธ | ํ๊น ์ฒญ์ค์ ๋ง์ถ ํจ๊ณผ์ ์ธ ๋ง์ผํ ๋ฉ์์ง ์ ๋ฌ |
๊ต์ก | ํ์ ์ฑ๊ณผ ๋ถ์ | ๊ฐ์ธํ๋ ํ์ต ๊ฒฝํ ๊ฐ์ ๋ฐ ๊ต์ก ๋ชฉํ ๋ฌ์ฑ |
์ด๋ฌํ ์ฌ๋ก๋ ๋น ๋ฐ์ดํฐ๊ฐ ๋ค์ํ ์ฐ์ ์์ ๋ณํ์ ์ธ ์ ์ฌ๋ ฅ์ ๊ฐ์ง๊ณ ์์์ ๋ณด์ฌ์ค๋๋ค. ๋ฐ์ดํฐ ๊ณผํ ๊ธฐ์ ๊ณผ ๋น ๋ฐ์ดํฐ ํ์ฉ์ ๋ํ ์ดํด๋ฅผ ํตํด ๊ธฐ์ ์ ํต์ฐฐ๋ ฅ์ ์ป๊ณ ์์ฌ ๊ฒฐ์ ์ ๊ฐ์ ํ๊ณ ๊ฒฝ์๋ ฅ์ ๋์ผ ์ ์์ต๋๋ค.
๋น ๋ฐ์ดํฐ ๋๊ตฌ ์ ์ ๊ฐ์ด๋
โ๋ฐ์ดํฐ๋ ๋จ์ํ ์ซ์๊ฐ ์๋๋๋ค. ๊ทธ๊ฒ์ ์ฐ๋ฆฌ๊ฐ ์ธ์์ ์ดํดํ๊ณ ๊ฐ์ ํ๋ ๋ฐ ์ฌ์ฉํ ์ ์๋ ์๋ฃ์ ๋๋ค.โ
โ Viktor Mayer-Schรถnberger
๋น ๋ฐ์ดํฐ ๋๊ตฌ๋ ๋ฌด์์ธ๊ฐ?
๋น ๋ฐ์ดํฐ ๋๊ตฌ๋ ์์ฒญ๋ ์์ ๋ฐ์ดํฐ๋ฅผ ํจ์จ์ ์ด๊ณ ํจ๊ณผ์ ์ผ๋ก ์ฒ๋ฆฌ, ๊ด๋ฆฌ, ๋ถ์ํ๊ธฐ ์ํด ์ค๊ณ๋ ์ํํธ์จ์ด ์๋ฃจ์ ์ ๋๋ค. ์ด๋ฌํ ๋๊ตฌ๋ ๋ฐ์ดํฐ ์ ์ฅ, ๋ฐ์ดํฐ ์ฒ๋ฆฌ, ๋ฐ์ดํฐ ๋ถ์, ๋ฐ์ดํฐ ์๊ฐํ์ ๊ฐ์ ๋ค์ํ ๊ธฐ๋ฅ์ ์ ๊ณตํฉ๋๋ค.- ๋ฐ์ดํฐ ์ ์ฅ
- ๋ฐ์ดํฐ ์ฒ๋ฆฌ
- ๋ฐ์ดํฐ ๋ถ์
์ฃผ์ ๋น ๋ฐ์ดํฐ ๋๊ตฌ ์ ํ
๋น ๋ฐ์ดํฐ ๋๊ตฌ๋ ์ฌ์ฉ ๋ชฉ์ ๊ณผ ์ํคํ ์ฒ์ ๋ฐ๋ผ ๋ค์ํ ์ ํ์ผ๋ก ๋๋ ์ ์์ต๋๋ค. ์ฃผ์ ์ ํ์ ๋ค์๊ณผ ๊ฐ์ต๋๋ค. * ๋ฐฐ์น ์ฒ๋ฆฌ ๋๊ตฌ: ๋ฏธ๋ฆฌ ์ ์๋ ๊ท์น์ ๋ฐ๋ผ ๋๊ท๋ชจ ๋ฐ์ดํฐ ์ธํธ๋ฅผ ์ฒ๋ฆฌํ๋ ๋๊ตฌ์ ๋๋ค. * ์คํธ๋ฆฌ๋ฐ ์ฒ๋ฆฌ ๋๊ตฌ: ์ค์๊ฐ์ผ๋ก ์์ฑ๋๋ ๋ฐ์ดํฐ ์คํธ๋ฆผ์ ์ฒ๋ฆฌํ๋ ๋๊ตฌ์ ๋๋ค. * ์ธ ๋ฉ๋ชจ๋ฆฌ ๋ฐ์ดํฐ๋ฒ ์ด์ค: ๋ชจ๋ ๋ฐ์ดํฐ๋ฅผ RAM์ ์ ์ฅํ์ฌ ๋น ๋ฅธ ์ฒ๋ฆฌ ์ฑ๋ฅ์ ์ ๊ณตํ๋ ๋ฐ์ดํฐ๋ฒ ์ด์ค์ ๋๋ค. * ๋น ๋ฐ์ดํฐ ํด๋ผ์ฐ๋ ํ๋ซํผ: ๋ฐ์ดํฐ ์ ์ฅ, ์ฒ๋ฆฌ, ๋ถ์์ ์ํ ํด๋ผ์ฐ๋ ๊ธฐ๋ฐ ์๋น์ค๋ฅผ ์ ๊ณตํ๋ ํ๋ซํผ์ ๋๋ค. * NoSQL ๋ฐ์ดํฐ๋ฒ ์ด์ค: ๊ด๊ณํ ๋ฐ์ดํฐ ๋ชจ๋ธ์ ์ ์ฝ์ด ์๋ ๋ฐ์ดํฐ๋ฒ ์ด์ค๋ก ๋ค์ํ ์ ํ์ ๋ฐ์ดํฐ๋ฅผ ์ฒ๋ฆฌํ๋ ๋ฐ ์ฌ์ฉ๋ฉ๋๋ค.๋น ๋ฐ์ดํฐ ๋๊ตฌ ํ๊ฐ ๊ธฐ์ค
๋น ๋ฐ์ดํฐ ๋๊ตฌ๋ฅผ ํ๊ฐํ ๋ ๊ณ ๋ คํด์ผ ํ ํต์ฌ ์์ธ์ ๋ค์๊ณผ ๊ฐ์ต๋๋ค. * ์ฑ๋ฅ: ๋ฐ์ดํฐ ์ฒ๋ฆฌ ์๋์ ์ฒ๋ฆฌ๋ * ํ์ฅ์ฑ: ๋ ํฐ ๋ฐ์ดํฐ ์ธํธ์ ์๊ตฌ ์ฆ๊ฐ์ ๋์ฒํ๋ ๋ฅ๋ ฅ * ์ ์ฐ์ฑ: ๋ค์ํ ๋ฐ์ดํฐ ํ์๊ณผ ์ฒ๋ฆฌ ์๊ตฌ ์ฌํญ์ ์ฒ๋ฆฌํ๋ ๋ฅ๋ ฅ * ํตํฉ ๊ฐ๋ฅ์ฑ: ๊ธฐ์กด ์์คํ ๊ณผ ํตํฉํ๊ณ ์ 3์ ์์ฉ ํ๋ก๊ทธ๋จ๊ณผ ์ฐ๊ฒฐํ๋ ๋ฅ๋ ฅ * ๋ณด์: ๋ฐ์ดํฐ์ ๋ฌด๊ฒฐ์ฑ๊ณผ ๊ธฐ๋ฐ์ฑ์ ๋ณดํธํ๋ ๊ธฐ๋ฅ๋น ๋ฐ์ดํฐ ๋๊ตฌ ํ์ฉ ์ฌ๋ก
๋น ๋ฐ์ดํฐ ๋๊ตฌ๋ ๋ค์ํ ์ฐ์ ๊ณผ ์์ฉ ํ๋ก๊ทธ๋จ์์ ํ์ฉ๋๊ณ ์์ต๋๋ค. ์ผ๋ฐ์ ์ธ ํ์ฉ ์ฌ๋ก๋ ๋ค์๊ณผ ๊ฐ์ต๋๋ค. * ๊ณ ๊ฐ ๋ถ์: ๊ณ ๊ฐ ํ๋, ์ ํธ๋ ๋ฐ ๋ง์กฑ๋์ ๋ํ ํต์ฐฐ๋ ฅ์ ๋์ถํ๋ ๋ฐ ์ฌ์ฉ๋ฉ๋๋ค. * ์ฌ๊ธฐ ํ์ง: ๋น์ ์์ ์ธ ์ง์ถ ํจํด๊ณผ ์์ฌ์ค๋ฌ์ด ํ๋์ ์๋ณํ๋ ๋ฐ ์ฌ์ฉ๋ฉ๋๋ค. * ์ฌ๊ณ ๊ด๋ฆฌ: ์ฌ๊ณ ์์ค์ ์ต์ ํํ๊ณ ๊ณต๊ธ๋ง ํจ์จ์ฑ์ ๊ฐ์ ํ๋ ๋ฐ ์ฌ์ฉ๋ฉ๋๋ค. * ์๋ฃ์ง๋จ: ๋์ฉ๋ ์๋ฃ ๋ฐ์ดํฐ๋ฅผ ๋ถ์ํ์ฌ ์ง๋จ ์ ํ๋๋ฅผ ํฅ์์ํค๊ณ ์น๋ฃ ๊ฒฐ๊ณผ๋ฅผ ๊ฐ์ ํ๋ ๋ฐ ์ฌ์ฉ๋ฉ๋๋ค. * ์์ธก ๋ถ์: ๊ณผ๊ฑฐ ๋ฐ์ดํฐ์์ ํจํด๊ณผ ์ถ์ธ๋ฅผ ์๋ณํ์ฌ ๋ฏธ๋ ์ด๋ฒคํธ๋ฅผ ์์ธกํ๋ ๋ฐ ์ฌ์ฉ๋ฉ๋๋ค.์ฑ๊ณต์ ์ธ ๋น ๋ฐ์ดํฐ ๋๊ตฌ ๊ตฌํ์ ์ํ ํ
โ๋ฐ์ดํฐ๋ฅผ ํต์ฐฐ๋ ฅ ์๋ ์ง์์ผ๋ก ๋ณํํ๋ ๊ฒ์ด ๋น ๋ฐ์ดํฐ์ ์ง์ ํ ๊ฐ์น์ ๋๋ค.โ* ๋ช ํํ ๋น์ฆ๋์ค ๋ชฉํ ์ ์: ๋๊ตฌ ๊ตฌํ ์ด์ ๋ฅผ ํ์ธํ๊ณ ํน์ ๋น์ฆ๋์ค ๋ชฉํ๋ฅผ ์๋ณํฉ๋๋ค. * ์ธ์ฌํ ๊ณํ๊ณผ ์ค๊ณ: ์์คํ ์ํคํ ์ฒ, ๋ฐ์ดํฐ ํ์ดํ๋ผ์ธ ๋ฐ ๋ณด์ ์๊ตฌ ์ฌํญ์ ์ ์คํ๊ฒ ์ค๊ณํฉ๋๋ค. * ์ ํฉํ ๊ธฐ์ ์ ํ: ๋น์ฆ๋์ค ์๊ตฌ ์ฌํญ๊ณผ ๋ฐ์ดํฐ ํน์ฑ์ ๋ง๋ ๋น ๋ฐ์ดํฐ ๋๊ตฌ๋ฅผ ์ ํํฉ๋๋ค. * ๋ฐ์ดํฐ ํ์ง ๋ณด์ฅ: ์ ํ๋, ์ผ๊ด์ฑ, ์์ ์ฑ์ ๋ณด์ฅํ๊ธฐ ์ํด ๋ฐ์ดํฐ ํ์ง ๊ดํ์ ๊ตฌํํฉ๋๋ค. * ์ต์ ๊ธฐ์ ๋ก ์ง์์ ์ธ ์ ๋ฐ์ดํธ: ์๋ก์ด ๊ธฐ์ ๊ณผ ์ ๊ณ ๋ชจ๋ฒ ์ฌ๋ก๋ฅผ ์ฃผ์ ๊น๊ฒ ๋ชจ๋ํฐ๋งํ์ฌ ์์คํ ์ ์ง์์ ์ผ๋ก ์ ๋ฐ์ดํธํฉ๋๋ค.
โ Bernard Marr
๋น ๋ฐ์ดํฐ ์ปดํจํ ํ๋ช
๋น ๋ฐ์ดํฐ ์ ์
- ๊ฑฐ๋ํ๊ณ ๋ณต์กํ์ฌ ์ ํต์ ๋๊ตฌ๋ ๊ธฐ์ ๋ก ์ฒ๋ฆฌํ๋ ๊ฒ์ด ์ด๋ ค์ด ๋ฐ์ดํฐ ์งํฉ์ ์ด์นญ.
- ์๋(velocity), ์(volume), ๋ค์์ฑ(variety)์ "3V" ํน์ง์ผ๋ก ์์ฝ ๊ฐ๋ฅ.
- ๋ฐ์ดํฐ ๋ถํ์ค์ฑ, ๋ถ์์ ์ฑ, ๋ ธ์ด์ฆ๊ฐ ์๋ฐ๋ ์ ์์.
๋น ๋ฐ์ดํฐ ์ฒ๋ฆฌ ๋๊ตฌ
๋ฐฐ์น ์ฒ๋ฆฌ ์์คํ
HDFS, Hive์ ๊ฐ์ ๋๊ท๋ชจ ๋ฐ์ดํฐ๋ฅผ ์คํ๋ผ์ธ์ผ๋ก ์ฒ๋ฆฌํ๋ ์์คํ .
๊ณ ๋๋ก ํ์ฅ์ฑ์ด ๋ฐ์ด๋๊ณ ๋ฐ์ดํฐ ์ค๋ณต์ ๋ฐฉ์งํ ์ ์์.
์คํธ๋ฆฌ๋ฐ ์ฒ๋ฆฌ ์์คํ
Apache Kafka, Flink์ ๊ฐ์ ์ค์๊ฐ์ผ๋ก ๋ฐ์ดํฐ๋ฅผ ์ฒ๋ฆฌํ๋ ์์คํ .
์ฆ๊ฐ์ ์ธ ์๋ต์ ์๊ตฌํ๋ ์ ํ๋ฆฌ์ผ์ด์ ์ ์ ํฉ
๋น ๋ฐ์ดํฐ ํ์ฉ ์ฌ๋ก
- ๊ณ ๊ฐ ๋ถ์: ๊ณ ๊ฐ ํ๋ ํจํด ์๋ณ, ๋ง์ถคํ ๋ง์ผํ ์ ๊ณต.
- ์ฌ๊ธฐ ์๋ณ: ์ด๋ก์ ์ธ ๊ฑฐ๋ ์๋ณ, ์ ์์ ํ์ ๋ฐฉ์ง.
- ์ ๋ณด ์ถ์ถ: ๋๊ท๋ชจ ๋ฐ์ดํฐ์์ ๊ฐ์น ์๋ ํต์ฐฐ๋ ฅ ์ถ์ถ, ์์ฌ ๊ฒฐ์ ์ง์.
์ฃผ์ ์ฌํญ
- ๋ฐ์ดํฐ ๋ณด์๊ณผ ๊ฐ์ธ์ ๋ณด ๋ณดํธ ๊ณ ๋ ค ํ์.
- ์ ํํ๊ณ ๊ด๋ จ์ฑ ์๋ ๋ฐ์ดํฐ ์์ค ํ๋ณด ํ์.
- ์๋ จ๋ ์ ๋ฌธ๊ฐ์ ๊ธฐ์ ์ ์ ๋ฌธ ์ง์ ํ์.
๊ฒฐ๋ก
๋น ๋ฐ์ดํฐ ์ปดํจํ ์ businesses๋ฅผ ํ๋ช ํํ๊ณ ์์ต๋๋ค. businesses๋ ๋ฏฟ์ ์ ์๋ ์์ ๋ฐ์ดํฐ์ ์ ๊ทผํ์ฌ ๊ฐ์น ์๋ ํต์ฐฐ๋ ฅ์ ์ถ์ถ, ๊ณ ๊ฐ ๊ฒฝํ์ ํฅ์์ํค๊ณ , ํจ์จ์ฑ์ ์ต์ ํํ๊ณ ์์ต๋๋ค. ๋น ๋ฐ์ดํฐ ๋๊ตฌ์ ๊ธฐ์ ์ ํ์ฉํจ์ผ๋ก์จ organizations๋ ๋ฐ์ดํฐ์์ ์ต๋ํ์ ๊ฐ์น๋ฅผ ์ด๋์ด๋ด๊ณ ๊ฒฝ์๋ ฅ์ ํ๋ํ ์ ์์ต๋๋ค.๋น ๋ฐ์ดํฐ์์ ํต์ฐฐ๋ ฅ ์ถ์ถ
๋น ๋ฐ์ดํฐ ๋ถ์๋ฒ ํต์ฌ
๋น
๋ฐ์ดํฐ ๋ถ์๋ฒ์ ๊ฑฐ๋ํ ๋ฐ์ดํฐ ์ธํธ์์ ํต์ฐฐ๋ ฅ์ ์ถ์ถํ๋ ๋ฐ ์ฌ์ฉ๋๋ ๊ธฐ์ ์
๋๋ค.
์ฃผ์ ๊ธฐ๋ฒ์ ํ๊ท ๋ถ์, ๊ตฐ์ง ๋ถ์, ๊ฒฐ์ ํธ๋ฆฌ ๋ฑ์ด ํฌํจ๋ฉ๋๋ค.
"๋น ๋ฐ์ดํฐ ๋ถ์๋ฒ์์ ๋ฐ์ดํฐ์ ๊ท๋ชจ์ ๋ค์์ฑ์ ์ฒ๋ฆฌํ๋ ๊ฒ์ด ์ค์ฌ์ ๊ณผ์ ์ ๋๋ค."
์ค์ฌ๋ก๋ก ๋ณด๋ ๋น ๋ฐ์ดํฐ ํ์ฉ
์๋ง์กด์ ๊ณ ๊ฐ ๊ตฌ๋งค ๋ฐ์ดํฐ๋ฅผ ๋ถ์ํ์ฌ ๋ง์ถคํ ์ถ์ฒ์ ์ ๊ณตํฉ๋๋ค.
๋ทํ๋ฆญ์ค๋ ์์ฒญ์ ํ๋์ ์ถ์ ํ์ฌ ๊ฐ์ธํ๋ ์ฝํ
์ธ ๋ฅผ ์ ์ํฉ๋๋ค.
"์ค์ฌ๋ก์์ ๋น ๋ฐ์ดํฐ๋ฅผ ํตํด ๊ณ ๊ฐ ๊ฒฝํ ํฅ์๊ณผ ๋น์ฆ๋์ค ์ฑ๊ณผ ๊ฐ์ ์ด ๊ฐ๋ฅํ๋ค๋ ๊ฒ์ ์ ์ ์์ต๋๋ค."
๋น ๋ฐ์ดํฐ ๋๊ตฌ ์ ์ ๊ฐ์ด๋
๋น
๋ฐ์ดํฐ ๋๊ตฌ ์ ํ์ ๋ฐ์ดํฐ ์ ํ, ๋ถ์ ์๊ตฌ ์ฌํญ, ์์ฐ์ ๊ณ ๋ คํด์ผ ํฉ๋๋ค.
Apache Hadoop, Spark, NoSQL ๋ฐ์ดํฐ๋ฒ ์ด์ค๋ ์ผ๋ฐ์ ์ธ ๋น
๋ฐ์ดํฐ ๋๊ตฌ์
๋๋ค.
"์ฌ๋ฐ๋ฅธ ๋๊ตฌ๋ฅผ ์ ํํ๋ฉด ๋น ๋ฐ์ดํฐ ๊ด๋ฆฌ, ์ฒ๋ฆฌ, ๋ถ์์ ํจ์จ์ ์ผ๋ก ์ํํ ์ ์์ต๋๋ค."
๋น ๋ฐ์ดํฐ ์ปดํจํ ํ๋ช
๋น ๋ฐ์ดํฐ ์ปดํจํ ํ๋ช ์ ํด๋ผ์ฐ๋ ์ปดํจํ , distributed ์์คํ , ๋ฐ์ดํฐ ์ฒ๋ฆฌ ์ต์ ํ ์๊ณ ๋ฆฌ์ฆ์ ๋ฐ์ ์ ์ํด ์ด์ง๋์์ต๋๋ค.
"์ด๋ฌํ ํ๋ช ์ ๋น ๋ฐ์ดํฐ์์ ๊ฐ์น๋ฅผ ์ฐฝ์ถํ๊ณ , ๋น์ฆ๋์ค ์์ฌ ๊ฒฐ์ ์ ๊ฐ์ ํ๋ ์๋ก์ด ๊ฐ๋ฅ์ฑ์ ์ด์์ต๋๋ค."
๋น ๋ฐ์ดํฐ์์ ํต์ฐฐ๋ ฅ ์ถ์ถ
๋น
๋ฐ์ดํฐ์์ ํต์ฐฐ๋ ฅ์ ์ถ์ถํ๋ ค๋ฉด ๋ฐ์ดํฐ๋ฅผ ์ฒญ์ํ๊ณ ์ ๋ฆฌํ๊ณ , ๋ถ์ ๊ธฐ๋ฒ์ ์ ์ฉํ๊ณ , ํต์ฐฐ๋ ฅ์ ์๊ฐํํ๋ ๋จ๊ณ๋ฅผ ๊ฑฐ์นฉ๋๋ค.
์ด๋ฌํ ํต์ฐฐ๋ ฅ์ ์์ฌ ๊ฒฐ์ ํฅ์, ์์ธก ๋ถ์, ๋น์ฆ๋์ค ๊ฐ์ ์ ์ฌ์ฉ๋ ์ ์์ต๋๋ค.
"๋น ๋ฐ์ดํฐ์ ํต์ฐฐ๋ ฅ์ ์กฐ์ง์ด ์์ฅ ๊ฒฝํฅ์ ์ดํดํ๊ณ , ๋น์ฆ๋์ค ์ ๋ต์ ๊ฐ์ ํ๊ณ , ํ์ ์ ์ด์งํ๋ ๋ฐ ํ์ฉํ ์ ์์ต๋๋ค."
"๋น ๋ฐ์ดํฐ" ์ฒ๋ฆฌ ๊ธฐ์ ๊ฐ์ | ์ ์, ๋๊ตฌ, ํ์ฉ ์ฌ๋ก ์ ๋ํด ์์ฃผ ๋ฌป๋ ์ง๋ฌธ TOP 5
Q. ๋น ๋ฐ์ดํฐ๋ ๋ฌด์์ ๋๊น?
A. ๋น ๋ฐ์ดํฐ๋ ์ ์ํ ์ ์์ ์ ๋๋ก ํฌ๊ณ ๋ณต์กํ๋ฉฐ ์ ํต์ ๋ฐ์ดํฐ ์ฒ๋ฆฌ ๊ธฐ์ ๋ก๋ ๋ถ์์ด ๋ถ๊ฐ๋ฅํ ๋ฐ์ดํฐ ์งํฉ์ ๋๋ค. ๋ณผ๋ฅจ, ์๋, ๋ค์์ฑ์ด๋ผ๋ 3V ํน์ฑ์ ๊ฐ์ต๋๋ค.
Q. ๋น ๋ฐ์ดํฐ ์ฒ๋ฆฌ์ ์ฌ์ฉ๋๋ ์ฃผ์ ๋๊ตฌ๊ฐ ๋ฌด์์ ๋๊น?
A. ๋น ๋ฐ์ดํฐ ์ฒ๋ฆฌ์ ์ฌ์ฉ๋๋ ์ฃผ์ ๋๊ตฌ๋ก๋ Apache Hadoop(์คํ ๋ฆฌ์ง ๋ฐ ๋ฐ์ดํฐ ์ฒ๋ฆฌ), Apache Spark(๋ฐ์ดํฐ ๋ถ์ ๋ฐ ์ฒ๋ฆฌ), Apache Cassandra(๋ถ์ฐ ๋ฐ์ดํฐ๋ฒ ์ด์ค)๊ฐ ์์ต๋๋ค.
Q. ๋น ๋ฐ์ดํฐ์ ์ฃผ์ ํ์ฉ ์ฌ๋ก๋ ๋ฌด์์ ๋๊น?
A. ๋น ๋ฐ์ดํฐ๋ ๋ค์๊ณผ ๊ฐ์ ๋ค์ํ ์ฐ์ ๋ถ์ผ์์ ์ฌ์ฉ๋ฉ๋๋ค.
- ๊ณ ๊ฐ ํ๋ ๋ถ์
- ์ฌ๊ธฐ ๊ฐ์ง
- ์์ธก์ ๋ถ์
Q. ๋น ๋ฐ์ดํฐ์ ๊ณผ์ ๋ ๋ฌด์์ ๋๊น?
A. ๋น ๋ฐ์ดํฐ์ ๊ด๋ จ๋ ์ฃผ์ ๊ณผ์ ๋ก๋ ๋ฐ์ดํฐ ์ ์ฅ ๋ฐ ๊ด๋ฆฌ, ๋ถ์ ๋ฐ ์ฒ๋ฆฌ, ๊ฐ์ธ์ ๋ณด ๋ณดํธ๊ฐ ์์ต๋๋ค.
Q. ๋น ๋ฐ์ดํฐ ๊ธฐ์ ์ ๋ฏธ๋ ํธ๋ ๋๋ ๋ฌด์์ ๋๊น?
A. ๋น ๋ฐ์ดํฐ ๊ธฐ์ ์ ๋ฏธ๋ ํธ๋ ๋๋ก๋ ๋ค์์ด ํฌํจ๋ฉ๋๋ค.
- ์ค์๊ฐ ๋ฐ์ดํฐ ์ฒ๋ฆฌ
- ๋ฐ์ดํฐ ๊ณผํ ๋ฐ ๊ธฐ๊ณ ํ์ต ์ ํ๋ฆฌ์ผ์ด์
- ํด๋ผ์ฐ๋ ์ปดํจํ ์ ์ญํ ์ฆ๊ฐ
Related Photos