2 u011397715 u011397715 于 2014.09.18 17:38 提问

如何指定hive的列分隔符?

默认hive的字段分隔符(field delimiter)可以通过row terminated或者重写InputFormat来改写,但是对于列分隔符这样做就不行,我是这么做的:
@Override
public boolean next(LongWritable key, Text value) throws IOException {
while (reader.next(key, text)) {

            String strReplace = text.toString().toLowerCase()
                    .replaceAll("\u0002", "\n");
            Text txtReplace = new Text();
            txtReplace.set(strReplace);
            value.set(txtReplace.getBytes(), 0, txtReplace.getLength());
            return true;
        }
        return false;
    }

重写inputformat放到hive的lib里不行,如果是这样改变字段分隔符是可以的,有没有办法指定列分隔符? 因为我文件里的数据都是通过'\u0002'来分割每行数据的,先谢谢各位大神了!

1个回答

sky_walker85
sky_walker85   Rxr 2014.11.18 16:48

我有一个不懂的地方问一下,字段分隔符和列分隔符有什么区别吗?

Csdn user default icon
上传中...
上传图片
插入图片