把不同大小的输入数据输入神经网络的好方法？（张力流）

Question

我的数据是这样的。它们是漂浮物，它们在一个巨大的纽比阵列中[700000,3]。没有空字段。在

Label   | Values1   | Values2
1.      | 0.01      | 0.01
1.      | ...       | ...
1.      |
2.      |
2.      |
3.      |
...

其思想是输入一组值1和值2，并让它使用分类来标识标签。在

但我不想逐行输入数据，而是将属于标签1的所有值1/2作为一个集合输入（例如，输入前3行应该返回[1,0，…]，然后输入下2行作为集合[0,1，…]）

有没有一种非复杂的方式以这种方式输入数据？（即进料批次，其中列标签等于1）

我目前正在对数据进行排序，并考虑使用指向起始点的指针，并使用循环来检查下一行是否等于当前行，以便找到指向集合末尾的指针，并获得该批处理的行数。但这或多或少防止了输入顺序的随机性。在

Answer 1

最好使用TFRecords格式。在

This approach makes it easier to mix and match data sets and network architectures

下面是一个链接，详细介绍这个类似json的结构example.proto