목록Scrap (17)
without haste but without rest
[SK Planet T Academy] GCP pub/sub을 활용한 데이터 파이프라인 강의
토크ON 81차. GCP기반의 데이터 엔지니어링 | T아카데미 T아카데미 온라인 강의- [토크ON세미나] GCP기반의 데이터 엔지니어링 (총6강) ▶ https://tacademy.skplanet.com/live/player/onlineLectureDetail.action?seq=187 [과정 소개] 이번 과정에서는 구글 클라우드 플랫폼(GC... www.youtube.com GCP의 pub/sub은 카프카와 거의 비슷한 역할을 한다. publisher = producer subscriber = consumer 위 강의는 pub/sub을 활용해서 실시간 데이터를 big query 에 적재하는 파이프라인을 간단하게 구현한다. 특히 도커 이미지로 빌드해서 쿠버네티스로 배포하고, 구글 클라우드 function..
Scrap
2020. 10. 15. 12:52