목록fasstapi (1)

DIVE AND RISE

데이터 엔지니어링에서 FastAPI가 필요한 이유

FastAPI와 같은 백엔드 API 프레임워크는 전통적인 웹 개발뿐 아니라 데이터 엔지니어링의 실무에서도 점점 중요해지고 있는 기술입니다. 어떤 부분에서, 왜 필요한지를 아래에 정리해 드릴게요. ✅ 데이터 엔지니어링에서 FastAPI가 필요한 이유1. 데이터 파이프라인의 API 인터페이스데이터 수집 / ingestion 단계에서 외부에서 데이터를 넣어야 할 때 → API가 필요함예: 외부 센서 데이터, 사용자 입력, 다른 시스템의 웹훅 등✅ FastAPI 역할:@app.post("/ingest-data/")async def ingest(data: SensorData): 저장 or Kafka 전송2. ETL/ELT 작업 자동화 - API 트리거ETL 배치 작업이나 파이프라인 실행을 API로 트리거할..
기술노트/데이터엔지니어링 2025. 5. 4. 15:36
이전 Prev 1 Next 다음