๊ณ ๋ฑ ๊ต์ก์ ์ํ ์ฐธ์กฐ ์ํคํ ์ฒ
์ด ์ํคํ ์ฒ๋ ํ์ ์ฐธ์ฌ๋ฅผ ํฅ์์ํค๊ณ , ๊ธฐ๊ด ์ฑ๊ณผ๋ฅผ ์ต์ ํํ๋ฉฐ, ๋ค์ค ๋ชจ๋ ํ์ต ์ธํ ๋ฆฌ์ ์ค๋ฅผ ํตํฉํ์ฌ ๋์ฑ ์ ์๋ ฅ ์๋ ํ์ ๊ฒฝํ์ ์ ๊ณตํ๋ ๋ฐ์ดํฐ ๊ธฐ๋ฐ ์บ ํผ์ค ์ํ๊ณ๋ฅผ ์ง์ํฉ๋๋ค.

์ง๋ฅํ ํ์ ์ํ๊ณ ๋ฐ ์บ ํผ์ค๋ฅผ ์ํ ์ฐธ์กฐ ์ํคํ ์ฒ
ํตํฉ lakehouse ์ํคํ ์ฒ๋ฅผ ํตํ ๊ณ ๋ฑ ๊ต์ก ํ๋ํ
- ๋ฐ์ดํฐ ์์ค ๋ฐ ์์ง
- ์ค์๊ฐ ์บ ํผ์ค ์ด์ ํ์ ์ ๋ณด ์์คํ (SIS) ์ด๋ฒคํธ, ํ์ต ๊ด๋ฆฌ ์์คํ (LMS) ์ํธ์์ฉ, ์บ ํผ์ค ์์ค ์ผ์, ๋์๊ด ๋์ถ ํ๋ ๋ฐ ์๋น ์๋น์ค๋ ์ค์๊ฐ ์์น ์ธ์ ํ์ ๋ฐ ์ด์ ์ ํธ๋ฅผ ๊ณต๊ธํฉ๋๋ค. ์ธ์ ์คํธ๋ ๋ฐ์ดํฐ๊ฐ ํด๋ผ์ฐ๋ ์คํ ๋ฆฌ์ง์ ๋์ฐฉํจ์ ๋ฐ๋ผ ์ฆ๋ถ ์ฒ๋ฆฌ๋ฅผ ์ฌ์ฉํ๋ฉฐ, ์คํธ๋ฆฌ๋ฐ ํ์ดํ๋ผ์ธ์ด ์ค์๊ฐ ์ ๋ฐ์ดํธ(์: ๋ฑ๋ก ๋ณ๊ฒฝ, ์ถ์ ์ด๋ฒคํธ, ํ์์ค ์์ฝ)๋ฅผ ์ฒ๋ฆฌํฉ๋๋ค.
- ์ง๋ฆฌ๊ณต๊ฐ ๋ฐ ์บ ํผ์ค GIS ๋ฐ์ดํฐ ์ธํธ, ๊ฑด๋ฌผ ์ธ๊ณฝ์ , ๊ฐ์์ค ์์น, ์ ํ ๊ฒฝ๋ก, ํ๊ฒฝ ๋ฐ์ดํฐ(๋ ์จ, ์ฌ๊ฑด ๋ณด๊ณ ์)๋ ์บ ํผ์ค ์ ์ฒด ๋ถ์์ ์ํ ์์น ์ธ์ ๊ธฐ๋ฐ์ ์ ๊ณตํฉ๋๋ค. ๊ฐ ๋ฐ์ดํฐ ํฌ์ธํธ๋ ์ ํํ ์ขํ๋ฅผ ๊ฐ์ง๊ณ ์์ด ํ์ ์ด๋, ๊ณต๊ฐ ํ์ฉ, ์์ฐ ๋ฐฐ์น์ ๋ํ ์ ์ฒด์ ์ธ ์ง๋ฆฌ ๊ณต๊ฐ ๋ถ์์ ํ ์ ์์ต๋๋ค.
- ํ์ ๋ฐ ํ์ ์์คํ : ํ์ ์ ๋ณด, ํ์ ๋ฐ์ดํฐ, HR, ์ฌ๋ฌด, ์กฐ๋ฌ, ์ฐ๊ตฌ ํ์ ๋ฐ ๊ท์ ์ค์ ๋ฆฌํฌ์งํ ๋ฆฌ๋ ๋น์ ํ ์ ์ฑ ๋ฌธ์(ํ์ ์ ์ฑ , ์ธ์ฆ ๊ธฐ์ค, ์์ ์ง์นจ)์ ํจ๊ป ์ฆ๊ฑฐ ๊ธฐ๋ฐ ์์ฌ ๊ฒฐ์ ์ ์ํ ๊ธฐ๊ด ์ปจํ ์คํธ์ ๊ฑฐ๋ฒ๋์ค ์๊ตฌ์ฌํญ์ ์ ๊ณตํฉ๋๋ค.
- ์ ์ฐํ ์์ง ํจํด: ํธ๋์ญ์ ์์คํ ์ CDC์ ์ ์ฌํ ์์ง, ์ ์ง์ ํ๋ํ๋ฅผ ์ง์ํ๊ธฐ ์ํ ๋ฐ์ดํฐ ๋ ์ดํฌ/warehouse ๊ฐ ์ฐํฉ, ์บ ํผ์ค ์์คํ , ์์ฝ ์ ๋ฐ์ดํธ, ์์ฐ ์ธ๋ฒคํ ๋ฆฌ ๋ฐ ์ธ๋ถ ๋ฐ์ดํฐ ์ ๊ณต์ ์ฒด(์: ๋ฒค์น๋งํน์ฉ ์ธ๋ถ ๋ฐ์ดํฐ ์ธํธ) ๋ฑ์์ ์ค์๊ฐ ๋ฐ์ดํฐ๋ฅผ ๊ฐ์ ธ์ค๋ API ์์ง ๋ฐ ์คํธ๋ฆฌ๋ฐ.
- ๋ฐ์ดํฐ ๊ด๋ฆฌ ๋ฐ ๊ธฐ๊ด ๊ฑฐ๋ฒ๋์ค
- ๋ฉํ๋ฐ์ดํฐ ์นดํ๋ก๊ทธ: ๋ถ๋ฅ๋๊ฑฐ๋ ๋ถ๋ฅ๋์ง ์์ ์บ ํผ์ค ๋ฐ์ดํฐ ์ธํธ ์ ๋ฐ์ ๊ฑธ์ณ ๋ฉํ๋ฐ์ดํฐ ๊ฑฐ๋ฒ๋์ค๋ฅผ ์ค์ ์ง์คํํ๊ณ ๋ฐ์ดํฐ ๊ฒ์์ ์๋ํํ๋ฉฐ, ๋ฏผ๊ฐํ ํ์ ๋ฐ์ดํฐ, ๊ธ์ต ์ ๋ณด, ์ฐ๊ตฌ ๋ฐ์ดํฐ์ ๋ํ ์ธ๋ถํ๋ ์ก์ธ์ค ์ ์ด ๊ธฐ๋ฅ์ ์ ๊ณตํฉ๋๋ค. ๊ธฐ๋ณธ ๋ด์ฅ ๋ฆฌ๋์ง ์ถ์ ์ ๊ฐ์ธ ์ ๋ณด ๋ณดํธ ๊ท์ ์ค์, ๋ฐ์ดํฐ ๋ถ๋ฅ, ๊ฑฐ๋ฒ๋์ค ๋ณด๊ณ ๋ฅผ ์ง์ํ๋ ๋์์ ์์ ํ ๊ฒ์ ์ํฌํ๋ก๋ฅผ ์ฌ์ฉํ ์ ์๊ฒ ํฉ๋๋ค.
- ๋ฉํฐ๋ชจ๋ฌ ๋ฐ์ดํฐ ํตํฉ: ์ค์๊ฐ Stream(SIS, LMS, ์์ค ์ผ์)๊ณผ ๋ฐฐ์น ํผ๋(๊ฐ์ ์ผ์ , ๋ช ๋จ ์ ๋ฐ์ดํธ, ์์ฐ ์ธ๋ฒคํ ๋ฆฌ)๋ฅผ ์ง๋ฆฌ๊ณต๊ฐ ๋ฐ์ดํฐ์ ํตํฉํ์ฌ ๊ณตํต ์์ธ ๋ฐ ๊ณต๊ฐ ๋ชจ๋ธ์ ๊ตฌ์ถํฉ๋๋ค. ACID ํธ๋์ญ์ ๋ณด์ฅ์ ์ ๋ขฐํ ์ ์๋ ์์น ์ธ์ ๋ถ์์ ์ํด ํ์ ๋ถ์, ์์ค ๋ฐ ์ฐ๊ตฌ ์ผํฐ ์ ๋ฐ์ ๊ฑธ์ณ ์ผ๊ด์ฑ์ ๋ณด์ฅํฉ๋๋ค.
- ๊ฐ์ฌ ๋ฐ ์ถ์ ๊ฐ๋ฅ์ฑ: Timestamp ๋ฐ ์ฌ์ฉ์ ์๋ณ์๋ก ๊ฐ์ฌ ์ถ์ ์ ์ ์งํ์ฌ ๊ท์ ์ค์ ๊ฐ์ฌ, ์ฌ๊ณ ์กฐ์ฌ, ์ดํด๊ด๊ณ์ ๋ฐ ๊ท์ ๊ธฐ๊ด์ ๋ํ ํฌ๋ช ์ฑ ์๋ฌด๋ฅผ ์ง์ํฉ๋๋ค.
- ์ธ์ฌ์ดํธ ์์ฑ ๋ฐ ํ์ ์์ฌ๊ฒฐ์ ์ธํ
๋ฆฌ์ ์ค
- ์ค์๊ฐ ๋์๋ณด๋: ์บ ํผ์ค BI ๋๊ตฌ(๋ฐ ํ์ ์ ์ธ๋ถ ๋์๋ณด๋)๋ฅผ ์ฌ์ฉํ์ฌ ๋ฑ๋ก ์ถ์ธ, ๊ฐ์ ํ์ฉ๋, ์บ ํผ์ค ๊ณต๊ฐ ์ ์ ์จ, ํ์ ์ฐธ์ฌ๋ ์งํ๋ฅผ ์ค์๊ฐ์ผ๋ก ์๊ฐํํฉ๋๋ค.
- ์์ฐ์ด ์ธ์ฌ์ดํธ: AI/BI ๋ฐ Genie์ ๊ฐ์ AI ์ง์ query ๋ฐ ๋ํํ ์ธํฐํ์ด์ค๋ ์บ ํผ์ค ๋ฐ์ดํฐ์์ ์ง์ ์ ์ฑ ๋ฐ ์ด์ ๊ด๋ จ ์ง๋ฌธ์ ๋ต๋ณํ ์ ์๊ฒ ํ์ฌ ์ดํด๊ด๊ณ์์ ์ ๊ทผ์ฑ์ ๊ฐ์ ํฉ๋๋ค.
- ํ์ ์ฑ๊ณต ๋ฐ ์์ฉ ๋ฅ๋ ฅ ์์ธก: ์์ธก ๋ชจ๋ธ์ ๋ฑ๋ก ๋ณ๋, ๊ฐ์ข ์์, ๊ณต๊ฐ ํ์ฉ๋๋ฅผ ์์ธกํ์ฌ ์ ์ ์ ์ธ ์ค์ผ์ค๋ง๊ณผ ๋ฆฌ์์ค ๊ณํ์ ๊ฐ๋ฅํ๊ฒ ํฉ๋๋ค.
- ์ง๋ฆฌ๊ณต๊ฐ ์๊ฐํ: ๋ค์ธต ์บ ํผ์ค ์ง๋๋ ๊ฐ์ ์์น, ์์, ์ ํ ๊ฒฝ๋ก, ์์ค ์ํ๋ฅผ ํ์ํ๊ณ ์ค์๊ฐ ์ฌ๊ฑด ๋ฐ ์ฌ์ฉ๋ฅ ์ธก์ ํญ๋ชฉ์ ์ค๋ฒ๋ ์ดํ์ฌ ์ ๋ณด์ ์ ๊ฐํ ์์ฌ๊ฒฐ์ ์ ์ง์ํฉ๋๋ค.
- ํ์
๋ฐ ๋ฐ์ดํฐ ๊ตํ
- ๋ณด์ ํ์ ๊ณต๊ฐ: ์๊ฒฉํ ์ก์ธ์ค ์ ์ด ๋ฐ ๊ฐ์ฌ Logs๊ฐ ์ ์ฉ๋ ๊ด๋ฆฌํ ํ๊ฒฝ์์ ํํธ๋(์: ์ปจ์์์, ์ฐ๊ตฌ ํ๋ ฅ)์ ๋ฏผ๊ฐํ ์บ ํผ์ค ๋ฐ์ดํฐ๋ฅผ ๊ณต์ ํ์ธ์.
- ๊ธฐ๊ด ๊ฐ ๋ฐ์ดํฐ ๊ตํ: ๋ณด์ ๋ฐ์ดํฐ ๊ณต์ ํ๋กํ ์ฝ์ ํตํด ์น์ธ๋ ์ดํด๊ด๊ณ์์๊ฒ ํ๋ ์ด์ ๋ ์บ ํผ์ค ๋ถ์์ ๋ฐฐํฌํ์ฌ ํ๋ ฅ์ ๊ณํ ๋ฐ ๋ฒค์น๋งํน์ ์ง์ํฉ๋๋ค.
- ๊ณต๊ฐ ํฌํธ ๋ฐ ํฌ๋ช ์ฑ: ํฌ๋ช ์ฑ๊ณผ ์ฑ ์์ฑ์ ์ฆ์งํ๊ธฐ ์ํด ์ผ๋ฐ ๋์ค์ด๋ ์ ์ฑ ์ ์์์๊ฒ ์ต๋ช ํ๋ ์ธก์ ํญ๋ชฉ(์: ๊ธฐ๊ด ์ฑ๊ณผ ์งํ, ํ๋ก๊ทธ๋จ ์ฑ๊ณผ)์ ๊ฒ์ํฉ๋๋ค.
- ์กฐ๊ฑด๋ถ ์ก์ธ์ค ๋ฐ ํด์ง: ๊ธฐ๊ฐ ํ์ , ์ญํ ๊ธฐ๋ฐ์ ์ธ๋ถ ์ฌ์ฉ์ ๊ถํ์ ๊ตฌํํ๊ณ ์ค์๊ฐ์ผ๋ก ํด์งํ์ฌ ๋ฐ์ดํฐ ๋ณด์ ๋ฐ ๊ท์ ์ค์๋ฅผ ์ ์งํฉ๋๋ค.
์ฅ์
- ์ค์๊ฐ ๋ถ์๊ณผ AI ๊ธฐ๋ฐ ์ธ์ฌ์ดํธ๋ ๋ํ ์ง๋๋ถ, ๊ต์์ง, ํ์ ์ง์์ด ํ์ ์ฑ๊ณผ ๋ํฅ, ๋ฑ๋ก ๋ํฅ, ์ด์์์ ํ์์ ๋์ํ ์ ์๋๋ก ์ง์ํฉ๋๋ค.
- ํตํฉ๋ ๊ณ ํ์ง ๊ธฐ๊ด ๋ฐ์ดํฐ๋ฅผ ์ฌ์ฉํ๋ฉด ๊ต์ก ๋ฆฌ์์ค, ์๊ฐํ ํธ์ฑ, ์์ค ์ฌ์ฉ์ ๋ ์ค๋งํธํ๊ฒ ๊ด๋ฆฌํ ์ ์์ต๋๋ค. ์์ธก ๋ถ์์ ํตํด ๋์งํธ ๋ฐ ๋ฌผ๋ฆฌ์ ์์ฐ ์ ๋ฐ์ ๊ฑธ์ณ ์ธ๋ ฅ ๋ฐฐ์น์ ๊ณต๊ฐ ํ ๋น์ ๊ท ํ์ ๋ง์ถ๊ณ , ๋ฑ๋ก ๊ธ์ฆ์ ์์ธกํ๋ฉฐ, ์ ์ง๋ณด์ ํ์์ฑ์ ์์ํ ์ ์์ต๋๋ค.
- ์ค์ ์ง์ค์ ๋ฐ์ดํฐ ๊ฑฐ๋ฒ๋์ค ํ๋ ์์ํฌ๋ ํ์ , ์ฐ๊ตฌ, ์ฌ๋ฌด ์ฑ๊ณผ์ ๋ํ ์์ ํ ๊ฐ์์ฑ์ ์ ๊ณตํฉ๋๋ค. ๋ํ๊ต๋ ์ผ๊ด๋ ๋ฐ์ดํฐ ํ์ค, ์๋ํ๋ ๊ฐ์ฌ ์ถ์ , ์ญํ ๊ธฐ๋ฐ์ ์์ ํ ๊ณต์ ๋ฅผ ํตํด ๊ท์ ์ค์๋ฅผ ์ ์ฆํ๊ณ ์๊ธ์ ํฌ๋ช ์ฑ์ ๋ณด์ฅํ์ฌ ๊ต์์ง, ํํธ๋ ๋ฐ ๊ท์ ๊ธฐ๊ด ๊ฐ์ ํ์ ์ ์ด์งํ ์ ์์ต๋๋ค.
