๐ ํ์ด์ฌ์ด ๋ฐ๊พผ ๋ฐ์ดํฐ ๊ณผํ์ ์ธ๊ณ
๋ฐ์ดํฐ ๊ณผํ์ ํ๋ ์ฌํ์์ ์ค์ํ ์ญํ ์ ์ฐจ์งํ๊ณ ์์ผ๋ฉฐ, ๊ทธ ์ค์ฌ์ ์์นํ ํ๋ก๊ทธ๋๋ฐ ์ธ์ด์ธ ํ์ด์ฌ์ ๊ฐ์ธ๊ณผ ๊ธฐ์ ๋ชจ๋์๊ฒ ํ์ ์ ์ผ์ผํค๊ณ ์๋ค. ๋ฐ์ดํฐ ๊ณผํ์ ํน์ ๋ฐ์ดํฐ๋ฅผ ์์งํ๊ณ ๋ถ์ํ์ฌ ํต์ฐฐ๋ ฅ์ ์ป๋ ๊ณผ์ ์ด๋ค. ์ด ๊ณผ์ ์์ ํ์ด์ฌ์ ๊ทธ ๊ฐ๊ฒฐํ ๋ฌธ๋ฒ๊ณผ ๋ค์ํ ๋ผ์ด๋ธ๋ฌ๋ฆฌ ๋๋ถ์ ๋ง์ ๋ฐ์ดํฐ ๊ณผํ์๋ค์ด ์ ํธํ๋ ์ธ์ด๋ก ์๋ฆฌ ์ก์๋ค. ๊ฐ๋จํ ๋ฌธ๋ฒ ๋๋ถ์ ์ด๋ณด์๋ ์ฝ๊ฒ ์ ๊ทผํ ์ ์์ผ๋ฉฐ, ๋ณต์กํ ์๊ณ ๋ฆฌ์ฆ์ ๊ตฌํํ๋ ๋ฐ ํ์ํ ๊ฐ๋ ฅํ ๋๊ตฌ๋ค ๋ํ ๊ฐ์ถ๊ณ ์๋ค.
ํ๋ ์ฌํ์์ ๋ฐ์ดํฐ์ ์์ ๊ธฐํ๊ธ์์ ์ผ๋ก ์ฆ๊ฐํ๊ณ ์๋ค. ์์ ๋ฏธ๋์ด, IoT ๊ธฐ๊ธฐ, ๊ธฐ์ ์ ์ด์ ๋ฐ์ดํฐ ๋ฑ์์ ์์ฑ๋๋ ์ ๋ณด๋ ์๋ง์ ๊ฐ์น๋ฅผ ์ง๋๊ณ ์๋ค. ์ด๋ฌํ ๋ฐ์ดํฐ๋ฅผ ํตํด ์์ธก ๋ชจ๋ธ์ ๊ตฌ์ถํ๊ฑฐ๋ ๋น์ฆ๋์ค ์ธ์ฌ์ดํธ๋ฅผ ๋์ถํ๋ ๋ฑ ์ค์ง์ ์ธ ๊ฐ์น๋ฅผ ์ฐฝ์ถํ ์ ์๋ค. ํ์ง๋ง ์ด๋ฌํ ์์ ์ ๋จ์ํ ์์ ๋ฐ์ดํฐ ์ ๋ฆฌ ์ด์์ ๋ ธ๋ ฅ์ ์๊ตฌํ๋ค. ๋ฐ์ดํฐ๋ฅผ ํด์ํ๊ณ , ์๊ฐํํ๊ณ , ๋ชจ๋ธ๋งํ๋ ๊ณผ์ ์์ ํ์ด์ฌ์ ๊ทธ ๋ฐ์ด๋ ๊ธฐ๋ฅ์ ํตํด ์ ๋ฌธ๊ฐ์ ๋น์ ๋ฌธ๊ฐ ๋ชจ๋์๊ฒ ์ ์ฉํ ๋๊ตฌ๊ฐ ๋๋ค.
๊ธฐ์ ์ ์ผ๋ก ํ์ด์ฌ์ ๊ด๋ฒ์ํ ๋ผ์ด๋ธ๋ฌ๋ฆฌ ์ํ๊ณ๋ฅผ ํตํด ๋ฐ์ดํฐ ๊ณผํ ๊ด๋ จ ์์ ์ ๊ฐ์ํํ๋ค. NumPy, Pandas, Matplotlib, Scikit-learn๊ณผ ๊ฐ์ ๋ผ์ด๋ธ๋ฌ๋ฆฌ๋ ๋๊ท๋ชจ ๋ฐ์ดํฐ์ ์ ํจ์จ์ ์ผ๋ก ๋ค๋ฃจ๊ณ , ๋ถ์ํ๋ฉฐ, ์๊ฐํํ๋ ๋ฐ ํ์ํ ๋ชจ๋ ๊ธฐ๋ฅ์ ์ ๊ณตํ๋ค. ์๋ฅผ ๋ค์ด, Pandas๋ ๋ฐ์ดํฐ ํ๋ ์(DataFrame)์ด๋ผ๋ ๊ตฌ์กฐ๋ฅผ ํตํด ํ ํ์์ ๋ฐ์ดํฐ๋ฅผ ์ฝ๊ฒ ์กฐ์ํ ์ ์๊ฒ ํ๊ณ , Matplotlib์ ๋ณต์กํ ๊ทธ๋ํฝ๊ณผ ์๊ฐํ๋ฅผ ํตํด ๋ฐ์ดํฐ๋ฅผ ๋ณด๋ค ์ดํดํ๊ธฐ ์ฝ๊ฒ ํํํด ์ค๋ค.
๋ํ, ๋ฌธํ์ ์ผ๋ก ๋ฐ์ดํฐ ๊ณผํ์ ๋ถ์์ ํฌ๋ช ์ฑ๊ณผ ์์ฌ๊ฒฐ์ ์ ๋ฐฉ์์ ๋ณํ๋ฅผ ๊ฐ์ ธ์๋ค. ๊ธฐ์ ์ด๋ ์ ๋ถ๋ ์ด์ ๋ฐ์ดํฐ๋ฅผ ๊ธฐ๋ฐ์ผ๋ก ํ ์ฌ์ค์ ๊ธฐ๋ฐํ ๊ฒฐ์ ์ ๋ด๋ฆฌ๋ ๊ฒ์ด ์ผ๋ฐ์ ์ด๋ค. ์ด๋ฌํ ๋ณํ๋ ์ ๋ขฐ๋๋ฅผ ๋์ด๊ณ , ๋ณด๋ค ํจ์จ์ ์ธ ์ด์์ ๊ฐ๋ฅํ๊ฒ ํ๋ฉฐ, ๊ณต๊ณต ๊ธฐ๊ตฌ๋ ๊ทธ๋ค์ ์ ์ฑ ๊ณผ ๊ณํ์ ๋ฐ์ดํฐ์ ๊ทผ๊ฑฐํ์ฌ ์๋ฆฝํ๊ฒ ๋์๋ค. ๋ฐ์ดํฐ ๊ธฐ๋ฐ ์ ๊ทผ๋ฒ์ ๋ง์ ์ฐ์ ์์ ๊ธฐ์กด์ ๊ฒฝํ๊ณผ ์ง๊ด์ ์์กดํ๋ ๊ฒฝํฅ์ ์ค์ด๊ณ , ๋ ๋์ ๊ฒฐ๊ณผ๋ฅผ ๋์ถํ๋ ๋ฐ ๊ธฐ์ฌํ๋ค.
์ด๋ฌํ ๋ณํ๋ ์ค์ํ์์๋ ๋ง์ ์ฌ๋ก๋ฅผ ํตํด ๊ด์ฐฐํ ์ ์๋ค. ์๋ฅผ ๋ค์ด, ์๋ฃ ๋ถ์ผ์์๋ ํ์์ ๋ฐ์ดํฐ๋ฅผ ๋ถ์ํ์ฌ ์ต์ ์ ์น๋ฃ ๋ฐฉ๋ฒ์ ์ ๊ณตํ๋ ์ผ๋ค์ด ์ด๋ฃจ์ด์ง๊ณ ์๋ค. ๋ฐ์ดํฐ ๊ณผํ์๋ ํ์ ์ ๋ณด๋ฅผ ๋ถ์ํ๊ณ ์์ธก ๋ชจ๋ธ์ ํตํด ๊ฐ ํ์์๊ฒ ๋ง๋ ๋ง์ถคํ ์น๋ฃ ๊ณํ์ ์๋ฆฝํ๋ค. ๋ํ, ๊ธ์ต ๊ธฐ๊ด์์๋ ๊ณ ๊ฐ์ ๊ฑฐ๋ ๋ฐ์ดํฐ๋ฅผ ๋ถ์ํ์ฌ ์ฌ๊ธฐ ๊ฑฐ๋๋ฅผ ์กฐ๊ธฐ์ ๊ฒ์ถํ๋ ์์คํ ์ ๊ตฌ์ถํ๊ณ ์๋ค. ์ด๋ฌํ ์ฌ๋ก๋ ๋ฐ์ดํฐ ๊ณผํ์ด ์ค์ ์ํ์ ๋ํ ์์ฉ ๊ฐ๋ฅ์ฑ์ ๋ณด์ฌ์ค๋ค.
๊ทธ๋ฌ๋ ๋ชจ๋ ๊ฒ์ด ์ฅ๋ฏธ๋น์ธ ๊ฒ์ ์๋๋ค. ๋ฐ์ดํฐ ๊ณผํ์ ๋ฐ์ ๊ณผ ๋๋ถ์ด ๋ฐ์ํ๋ ์ค๋ฆฌ์ ๋ฌธ์ ๋ ์กด์ฌํ๋ค. ๊ฐ์ธ์ ๋ณด ๋ณดํธ์ ๊ฐ์ ๋ฌธ์ ๋ค์ ๋ํ ์ฐ๋ ค๋ ์ง์์ ์ผ๋ก ์ ๊ธฐ๋๊ณ ์์ผ๋ฉฐ, ๋ฐ์ดํฐ์ ์ค์ฉ ๊ฐ๋ฅ์ฑ ๋ํ ๋ฌด์ํ ์ ์๋ค. ๋ฐ์ดํฐ ๊ณผํ์๋ค์ ์ด๋ฌํ ์ค๋ฆฌ์ ๊ณ ๋ ค ์ฌํญ์ ์ดํดํ๊ณ , ๋ฐ์ดํฐ์ ํ์ฉ์ ๋ํ ์ฑ ์์ ์ ธ์ผ ํ๋ค. ๋น์ฆ๋์ค๋ ์ ๋ถ๊ฐ ๋ฐ์ดํฐ๋ฅผ ํ์ฉํ๋ ๋ฐฉ์์์ ํฌ๋ช ์ฑ๊ณผ ๊ณต์ ์ฑ์ด ๊ฒฐ์ฌ๋๋ค๋ฉด, ๊ทธ๊ฒ์ ์ฌ๊ฐํ ์ฌํ์ ๊ฐ๋ฑ์ ์ด๋ํ ์ ์๋ค.
๋ํ, ํ์ด์ฌ ์ด์ธ์๋ R, Java, Julia์ ๊ฐ์ ๋ค์ํ ํ๋ก๊ทธ๋๋ฐ ์ธ์ด๋ค์ด ๋ฐ์ดํฐ ๊ณผํ ๋ถ์ผ์์ ์ฌ์ฉ๋์ง๋ง, ํ์ด์ฌ์ ์ธ๊ธฐ๋ ๊ทธ ๋ ํนํ ์ฅ์ ๋๋ฌธ์ด๋ผ๊ณ ํ ์ ์๋ค. ๋ฐ๋ณต์ ์ธ ์์ ์ ์ค์ด๊ณ ํจ์จ์ ์ธ ๋ถ์์ ์ํํ ์ ์๋๋ก ๋์์ฃผ๋ ํ์ด์ฌ์ ํน์ฑ์ ๋ง์ ๋ฐ์ดํฐ ๊ณผํ์๋ค์๊ฒ ๋งค๋ ฅ์ ์ผ๋ก ๋ค๊ฐ์จ๋ค.
๊ฒฐ๊ตญ, ๋ฐ์ดํฐ ๊ณผํ๊ณผ ํ์ด์ฌ์ ๊ด๊ณ๋ ์์ผ๋ก๋ ๋์ฑ ๊น์ด์ง ๊ฒ์ด๋ฉฐ, ์ด๋ ์ฐ๋ฆฌ ์ฌํ์ ๋ค์ํ ๋ฌธ์ ํด๊ฒฐ์ ๊ธฐ์ฌํ ๊ฒ์ด๋ค. ์์ผ๋ก ์ฐ๋ฆฌ๋ ๋ฐ์ดํฐ๋ฅผ ํตํด ์๋ก์ด ํต์ฐฐ์ ์ป๊ณ , ๊ทธ ํต์ฐฐ์ ๊ธฐ๋ฐ์ผ๋ก ๋ ๋์ ๊ฒฐ์ ์ ๋ด๋ฆด ์ ์๋ ์ธ์์ ๋ง์ดํ๊ฒ ๋ ๊ฒ์์ ์ ์ ์๋ค. ๋ณํ๋ ์ด๋ฏธ ์์๋์์ผ๋ฉฐ, ์ด ๋ณํ์ ์ค์ฌ์๋ ํ์ด์ฌ์ด๋ผ๋ ๊ฐ๋ ฅํ ๋๊ตฌ๊ฐ ์๋ฆฌ์ก๊ณ ์๋ค. ๋ฐ์ดํฐ ๊ณผํ์ด ๊ฐ์ธ์ ์ถ๋ถํฐ ๊ธฐ์ ์ ๊ฒฝ์, ์ ๋ถ์ ์ ์ฑ ๊น์ง ๋ฏธ์น๋ ์ํฅ์ ์์ผ๋ก๋ ๊ณ์ํด์ ํ๋๋ ๊ฒ์ด๋ฉฐ, ํ์ด์ฌ์ ๊ทธ ์ฌ์ ์ ๋๋ฐ์๊ฐ ๋์ด์ค ๊ฒ์ด๋ค.
๋๊ธ
๋๊ธ ์ฐ๊ธฐ