Tag Archives: dbinputformat

[Hadoop] DBInputFormat – LIMIT & OFFSET Keyword

시스템의 학습 로그를 DB 에서 긁어와 하둡에 저장하기 위해서는 Job 을 DB 관련 형식으로 초기화하기 위한 설정 클래스인 DBConfiguration DB의  쿼리 실행을 제공하는 DBInputFormat 으로  job 의 in/out 에 대한 Format 설정 가져올 데이터 형식을 제공하는 DBWritable 인터페이스, Writable 클래스를 implementation, override 하는 클래스 선언 를 이용하여 DBConfiguration.configureDB>Job 생성>DBInputFormat.setInput(job,Class<? extends DBWritable> inputClass, Query, Record Count… Read More »

1,753 total views, no views today