728x90
조대협님의 블로그 글에 정리된 data mesh에 대한 내용을 추천 받아서 읽게 되었고,
데이터 시스템에도 DB나 서버 처럼 분산 데이터 시스템 개념이 등장하고 있음을 알게 되었다.
하나의 큰 데이터 인프라와 플랫폼으로 이루어져서 각 비즈니스 팀에서 필요에 따라 데이터를 요청하고 분석했던 상황에서 문제점들이 발생하는 경우가 있다. 가령 데이터가 결국 활용되는 도메인/비즈니스에 대한 이해도가 낮아서 실제 활용도가 낮거나 활용하기 위해 많은 시간이 걸린 다는 것이었다.
따라서 각 도메인별로 별도의 데이터 플랫폼을 운영하고 이 두 도메인 간의 데이터 통합 분석이 필요하면 각 데이터 간의 join을 하거나 통합 분석 플랫폼을 구축하는 개념이 data mesh이다.
참고 블로그
분산형 데이터 분석 아키텍처-데이터 매쉬
Data mesh 조대협 (http://bcho.tistory.com) Data mesh는 빅데이터 분석 시스템의 아키텍쳐 스타일로, 마이크로 서비스 아키텍처 (이하 MSA)컨셉과 유사하게 데이터 분석 시스템을 각각의 분산된 서비스 형태
bcho.tistory.com
728x90
'TIL(Today I Learned)' 카테고리의 다른 글
| TIL_220225 (0) | 2022.02.25 |
|---|---|
| TIL_220224 (0) | 2022.02.24 |
| TIL_0215_프로세스 마이닝분석(데이터분석) (0) | 2022.02.15 |
| TIL_0211_Django-Ninja (0) | 2022.02.11 |
| TIL_0211_HTTP HOST ERROR (0) | 2022.02.11 |