18
데이터 과학자 관점에서 보는 데이터 엔지니어링
빌 프랭크스(Bill Franks)
데이터 수집과 관리는 수십 년간 중요하게 여겨졌지만, 최근에서야 데이터 엔지니어링이 광범위하게 활용되며 중요한 역할로 자리잡았습니다.1 왜 그럴까요? 여기서는 일반적인 생각과는 다소 반대되는 견해를 제시합니다.
¦ 데이터 관리나 ETL 등 ¦
역사적으로 기업 데이터를 다루는 사람들은 집중하는 주요 영역에 따라 다음과 같이 세 부류로 나눠집니다. 첫 번째는 미가공 데이터를 소스 시스템으로 수집하는 일을 관리하는 사람들입니다. 두 번째는 ETL 운영에 집중하는 사람들로, 최근까지도 ETL 직무는 관계형 데이터베이스에 압도적으로집중되어 있었습니다. 세 번째는 관계형 시스템을 관리하는 데이터베이스 관리자입니다.