Data Engineering/Hadoop (3) 썸네일형 리스트형 [Hive] ALTER TABLE PARTITION SET LOCATION 이 안되는 현상 Hive는 메타스토어상 테이블의 location을 바꾼다고 해서 테이블에 속한 partition의 location까지 바뀌진 않는다. 그래서 location을 수동으로 바꿔주거나 cascade 옵션을 줘서 변경해야한다. partition의 location을 바꾸려면 아래와 같은 명령어를 사용해야한다. ALTER TABLE [db_name].[table_name] PARTITION ([partition]=[value]) SET LOCATION [new_location] 그런데 이런 에러가 뜨면서 실패했다. FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. Unable to alter partition. al.. hadoop distcp에서 queue 지정하기 hadoop distcp -Dmapred.job.queue.name= HDFS Architecture Guide HDFS(Hadoop Distributed File System): distributed file system to run on commodity hardware. 1. Assumptions & Goals - In case of some server failures, data can still be accessed. - Should be able to work with various Hadoop Ecosystem Applications, some having streaming features - High Throughput of data - Can read/write large datasets, in TB 2. Blocks - A file replicated by replication factors an.. 이전 1 다음