使用SequenceFile存储BytesWritable类型时要注意

      将office文件转为byte[] -> bytesWritable存入SquenceFile中,取出数据时发现文件打不开报错,打印出保存前byte[]和取出后的byte[]长度一看,发现长度不同,后者增加不少。

原因:
      BytesWritable,使用这个类型非常容易犯错误。当你把一堆byte[]数据保存到BytesWritable后,通过BytesWritable.getBytes()再读到的数据并不一定是原数据,可能变长了很多,这是因为BytesWritable采用了自动内存增长算法,你保存的数据长度为size时,它可能将数据保存到了长度为capacity(capacity>size)的buffer中,这时候,你通过BytesWritable.getBytes()得到的数据最后一些字符是多余的,如果里面保存的是protocolbuffer序列化后的字符串,则无法反序列化,这时候可以使用BytesWritable.setCapacity (value.getSize())将后面多余空间剔除掉。或者记住原byte[]的长度,取出后进行截取。
请使用浏览器的分享功能分享到微信等