[MLOps ํ๋ซํผ ๊ตฌ์ถ - 4๋จ๊ณ: Airflow : GitSync + ์ธ๋ถ PostgreSQL + Secret ์ฐ๋]
์ด ๊ธ์์ ๋ค๋ฃจ๋ ๊ฒ Airflow๋ฅผ Helm์ผ๋ก ๋ฐฐํฌํ๋ฉด์ GitSync DAG ๋๊ธฐํ, ์ธ๋ถ PostgreSQL, AWS Secret ๋ง์ดํธ๋ฅผ ์ฐ๋ํฉ๋๋ค. ์ ์์ง์ MLOps ํ๋ซํผ ๊ตฌ์ถ 3๋จ๊ณ: MLflow Helm ๊ตฌ์ฑ โ Helm ๊ธฐ๋ฐ ๋ฐฐํฌ์ Secret ์ฃผ์ ํจํด ์ด ๋จ๊ณ์์ ํด๊ฒฐํ๋ ค๋ ๋ฌธ์ DAG ์ฝ๋๋ฅผ ์๋์ผ๋ก ์ ๋ก๋ํ๋ฉด ๋ฒ์ ๊ด๋ฆฌ์ ํ์ ์ด ๋ถ๊ฐ๋ฅํฉ๋๋ค. Git ๊ธฐ๋ฐ DAG ๊ด๋ฆฌ(GitSync)๋ฅผ ๋์ ํ๊ณ , SSH Key/AWS ์ธ์ฆ์ Secret์ผ๋ก ์ฃผ์ ํ๋ฉฐ, ์ธ๋ถ PostgreSQL์ ๋ฉํ๋ฐ์ดํฐ ์ ์ฅ์๋ก ์ฐ๋ํ๋ GitOps ํจํด์ ๊ตฌ์ฑํฉ๋๋ค. ๐ ์ํคํ ์ฒ ๊ตฌ์ฑ๋ ๐ณ ์ปค์คํ Airflow ์ด๋ฏธ์ง ๊ตฌ์ฑ GitSync DAG์์ MLflow ์ฐ๋ ๋๋ AWS SDK ์ฌ์ฉ์ ์ํ Python ํจํค์ง ์ค์น๊ฐ ํ์ํฉ๋๋ค. ...