¦ 데이터 소비자가 엔지니어링 문제를 해결하게 하지 마라 ¦

데이터 소비자에게 데이터 엔지니어링 문제를 풀게 하려는 유혹을 뿌리치세요. 데이터 소비자의 유형은 다양하며, 개개인의 핵심 경쟁력은 코딩 기술, 통계학 지식, 시각화 능력 등 여러 영역에 걸쳐 다양합니다. 많은 경우 데이터 소비자가 기술적 능력이 좋을수록 인프라에서 풀지 못하는 문제를 대충 고쳐서 해결하려고 합니다. 그러다 보면 파이프라인 목적에 맞지 않거나 실제 인프라 설계에 맞지 않는 데이터 변환이 추가될 수 있습니다.

겉보기에는 이런 방식이 데이터 엔지니어나 데이터 소비자 모두에게 이득인 것처럼 보일지도 모릅니다. 데이터 엔지니어는 시간을 아끼고, 소비자는 방해받지 않고 끊임없이 작업을 하는 것처럼 보이지만, 보통은 부적절한 해결책이 겹겹이 쌓이기 때문에 조직의 데이터 인프라 관리가 더 어려워집니다.