Streaming Analytic의 효과적인 적용
많은 기업들이 예전의 Batch ETL (Extract Transform Load) 방식을 버리고 이를 대신 할 수 있는 ELT (Extract Load Transform) 혹은 실시간으로 데이터를 처리할 수 있는 Streaming을 선택하고 있다. 본 글에서는... Read More
Stored Procedure에 대한 단상
COBOL 엔지니어 몸값이 되려 귀해진다는 기사를 보면, 최소 아직도 그 언어가 쓰이는 곳이 있다는 것을 알 수 있다. 사실 최소한이 아니라 여전히 많이 쓰이는 걸 알 수 있으며, Glassdoor를 통해... Read More
로그 데이터의 수집과 시각화 – Part 3
앞선 두 개의 글을 통해 로그 수집과 시각화에 대해 알아보았다. 로그 수집과 시각화는 그 업무 특성으로 본다면 클라우드 서비스에 매우 적합하단 것을 어렵지 않게 생각할 수 있다. 대게 원천 로그... Read More
로그 데이터의 수집과 시각화 – Part 2
2000년대 후반까지만 해도 데이터를 시각화 하여 보는 것은 회사 전체 차원에서 중요하다고 생각하는 정해진 대시보드를 구축하는 것이나 팀 단위에서 엑셀을 활용하여 정제된 데이터를 일부 차트 등을 활용하는 정도에 한정된 경우가... Read More
로그 데이터의 수집과 시각화 – Part 1
IT에 빅데이터가 등장하던 시기쯤 함께했던 키워드 중 IoT, M2M이 있다. 주요 골자는 빅데이터 시대에는 사람이 만들어내는 데이터가 아닌 기계가 만들어내는 데이터가 대규모로 발생한다는 것이다. 그리고 약 10여년이 지난 지금 실제로... Read More
Data Mesh 관점에서 효율적인 메타데이터 관리
이전 Data Mesh에 관한 글이 데이터를 Data as-a-Service 형태로 제공하는 데이터 관리의 이상적인 그림을 표현했고, 다음 Data Mesh 사용시의 유의점을 기술하였다. 이번 글에서는 Data Mesh나 이와 유사한 형태의 Data as-a-Service로... Read More
