Tutorial by Topics: oop



sqoop 스크립트를 사용하여 다양한 데이터 저장소 / 데이터베이스에서 데이터를 가져 오는 방법을 보여줍니다.

다른 방법을 사용하여 Hadoop에서 데이터를 보호 할 수 있습니다. 각 방법마다 고유 한 장점이 있습니다. 더 나은 결과를 위해 하나 이상의 방법을 결합 할 수도 있습니다. 이 항목에서는 각 방법의 장점 및 제한 사항에 대해 설명합니다.

여기서 기억해야 할 것은 Hadoop MR 작업을 디버깅하는 것이 Eclipse에서 원격으로 디버깅 된 모든 애플리케이션과 유사 할 것이라는 점입니다.

디버거 또는 디버깅 도구는 다른 프로그램 ( "대상"프로그램)을 테스트하고 디버깅하는 데 사용되는 컴퓨터 프로그램입니다. 오류가 발생할 여지가 거의없고 하 나의 작은 오류로 인해 큰 손실이 발생할 수있는 Hadoop 환경의 경우 특히 유용합니다.

HDQ 클러스터와 관련된 하이브 메타 저장소가 있다면 Sqoop은 하이브에 데이터 레이아웃을 정의하는 CREATE TABLE 문을 생성 및 실행하여 하이브에 데이터를 가져올 수 있습니다. Hive로 데이터를 가져 오는 것은 Sqoop 명령 행에 --hive-import 옵션을 추가하는 것만 큼 간단합니다.


Page 1 of 1