的Tensorflow TFRecord:无法解析序列化的示例
作者:互联网
我试图遵循this guide以便将我的输入数据序列化为TFRecord格式,但是在尝试读取它时,我一直遇到此错误:
InvalidArgumentError: Key: my_key. Can’t parse serialized Example.
我不确定我要去哪里.这是我无法逾越的问题的最小复制.
序列化一些样本数据:
with tf.python_io.TFRecordWriter('train.tfrecords') as writer:
for idx in range(10):
example = tf.train.Example(
features=tf.train.Features(
feature={
'label': tf.train.Feature(int64_list=tf.train.Int64List(value=[1,2,3])),
'test': tf.train.Feature(float_list=tf.train.FloatList(value=[0.1,0.2,0.3]))
}
)
)
writer.write(example.SerializeToString())
writer.close()
解析功能反序列化:
def parse(tfrecord):
features = {
'label': tf.FixedLenFeature([], tf.int64, default_value=0),
'test': tf.FixedLenFeature([], tf.float32, default_value=0.0),
}
return tf.parse_single_example(tfrecord, features)
dataset = tf.data.TFRecordDataset('train.tfrecords').map(parse)
getnext = dataset.make_one_shot_iterator().get_next()
尝试运行此命令时:
with tf.Session() as sess:
v = sess.run(getnext)
print (v)
我触发了以上错误消息.
是否有可能克服此错误并反序列化我的数据?
解决方法:
tf.FixedLenFeature()用于读取固定大小的数据数组.并且数据的形状应事先定义.将解析功能更新为
def parse(tfrecord):
return tf.parse_single_example(tfrecord, features={
'label': tf.FixedLenFeature([3], tf.int64, default_value=[0,0,0]),
'test': tf.FixedLenFeature([3], tf.float32, default_value=[0.0, 0.0, 0.0]),
})
应该做的工作.
标签:tensorflow,tfrecord,python 来源: https://codeday.me/bug/20191024/1924093.html