hive建立外部表映射bson文件 4tb bson文件 mongodb-hadoop


0

我用这种格式映射2.5g的文件时候,select 语句 是能跑出结果的,但是将4tb的数据做映射的时候缺无法跑通
create external table table(
)
ROW FORMAT SERDE "com.mongodb.hadoop.hive.BSONSerDe"
WITH SERDEPROPERTIES('mongo.columns.mapping'='')
STORED AS INPUTFORMAT "com.mongodb.hadoop.mapred.BSONFileInputFormat"
OUTPUTFORMAT "com.mongodb.hadoop.hive.output.HiveBSONFileOutputFormat"
location '/temp/test_mongodb';

1 答案


0

这个大概率是资源不够, 比如内存啥的


我来回答

写文章

提问题

面试题