데이터 웨어하우스 & 레이크!
창고? 호수? 우리 회사 데이터는 어디에 있을까? 오늘은 데이터 관리 이야기를 해보려고 합니다. AI 시대가 오면서 AI의 토양이 되는 데이터와 데이터 관리에 대한 중요성이 더욱 커지고 있죠. 아직 데이터 관리를 제대로 하고 있지 않으시다면 혹은 데이터 관리에 대해 궁금증이 있으시다면 오늘… 더 보기 »데이터 웨어하우스 & 레이크!
창고? 호수? 우리 회사 데이터는 어디에 있을까? 오늘은 데이터 관리 이야기를 해보려고 합니다. AI 시대가 오면서 AI의 토양이 되는 데이터와 데이터 관리에 대한 중요성이 더욱 커지고 있죠. 아직 데이터 관리를 제대로 하고 있지 않으시다면 혹은 데이터 관리에 대해 궁금증이 있으시다면 오늘… 더 보기 »데이터 웨어하우스 & 레이크!
AWS에서 데이터 레이크를 구축하기 위해서는 3가지 서비스가 필요합니다. 데이터를 저장하는 S3 테이블에 대한 메타 데이터를 저장하는 Glue Data Catalog 데이터를 쿼리할 수 있는 Athena 이렇게 3가지 서비스를 이용하여 데이터 레이크를 구축하고 나면, 그 다음에 고민해야 하는 문제는 바로 사용자별 권한 관리입니다. 사용자에 따라서 접근… 더 보기 »데이터의 권한 관리를 단순화하는 AWS Lake Formation 사용하기