LINE 데이터 플랫폼은 데이터 활용과 관련해 몇 가지 과제가 있었습니다. 먼저 데이터가 방대해서 메타데이터의 인적 관리가 어려웠습니다. 또한 ‘Always Data Driven’이라는 행동 지침 아래 엄격한 권한 관리를 전제로 수많은 사업 데이터와 관련된 다양한 사용자의 요구를 충족시킬 수 있는 UX를 제공할 필요가 있었습니다.
이 과제를 해결하기 위해 데이터 카탈로그를 직접 제작했습니다. 메타데이터 수집 및 관리는 다양한 Hadoop 에코 시스템 기술을 이용해 자동으로 실시하고 있으며, 카탈로그를 개인화하고 API로 각종 시스템과 연계해 기존의 업무 프로세스 속에서 활용하기 쉽도록 UX를 만들었습니다.
이 발표에서는 데이터 카탈로그를 개발하며 설계한 개념과 각종 기능 및 활용 사례를 소개합니다.