반응형 parquet1 AWS glue 자습서 aws glue 를 사용해보려고 자습서를 찾는데(aws glue docs에도 있긴하다) aws glue 서비스내에 자습서가 있음... 크롤러 추가 출발 공항의 인기도를 월별로 계산하기 위해 주요 항공사의 도착 데이터를 분석하라는 요청을 받았다고 가정합니다. 2016년도 항공편 데이터가 CSV 형식으로 Amazon S3에 저장되어 있습니다. 데이터를 변환하기 전에 AWS Glue 데이터 카탈로그에 해당 메타데이터를 카탈로깅합니다. Amazon S3에 저장된 이들 항공편 로그에서 메타데이터를 추론하는 크롤러를 추가하고 데이터 카탈로그에 테이블을 생성해 보겠습니다 크롤러 속성 지정 먼저 크롤러 이름을 Flights Data Crawler로 지정합니다. 크롤러는 분류자를 호출하여 데이터의 스키마를 추론합니다. .. 2022. 6. 16. 이전 1 다음 반응형