MLOps Tools
No.1 데이터 데이터 수집 파이프라인 → Sqoop, Flume, Kafka, Flink, Spark streaming, Airflow 데이터저장 → MySQL, Hadoop, Amazon S3, MinIO 데이터관리 → TFDV, DVC, Feast, Amundsen 모델 모델개발 → Jupyter Hub, Docker, Kubeflow, Optuna, Ray, katib 모델버전관리 → Git, MLflow, Github Action, Jenkins 모델학습 스케줄링 관리 → Grafana, Kubernetess 서빙 → 데이터를 받으면 ML 모델에 predict 함수를 돌리는게 아닌 API 서버를 통해 제공하는 서비스 모델패키징 → Docker, Flask, FastAPI, BentoML, Kub..
2022. 2. 27.
