데이터 공부를 기록하는 공간

2021.11.06 1. MLOPS = ML + DEVOPS https://blogs.nvidia.com/blog/2020/09/03/what-is-mlops/ 데이터 , 모델, 서빙 상용 소프트웨어 2. 데이터 1. 데이터 수집 파이프라인 - Sqoop - Flume - Kafka - Flink - Spark Streaming - Airflow 2. 데이터 저장 - MySQL - Hadoop - Amazon S3 - MinIO 3. 데이터 관리 - TFDV - DVC - Feast - Amundsen3. 모델 1. 모델 개발 - Jupyter Hub (격리환경 모델 개발) - Docker (격리환경 모델 개발) - Kuberflow (격리환경 모델 개발) - Optuna (Hyperparameter o..