Tensorflow unsorted_segment_sum 维度

Question

我正在使用 tf.unsorted_segment_sum TensorFlow 的方法，当我作为数据给出的张量只有一行时，它工作正常。例如:

tf.unsorted_segment_sum(tf.constant([0.2, 0.1, 0.5, 0.7, 0.8]),
                        tf.constant([0, 0, 1, 2, 2]), 3)

给出正确的结果:

array([ 0.3,  0.5 , 1.5 ], dtype=float32)

问题是，如果我使用多行张量，我怎样才能得到每一行的结果？例如，如果我尝试使用两行张量:

tf.unsorted_segment_sum(tf.constant([[0.2, 0.1, 0.5, 0.7, 0.8],
                                     [0.2, 0.2, 0.5, 0.7, 0.8]]),
                        tf.constant([[0, 0, 1, 2, 2],
                                     [0, 0, 1, 2, 2]]), 3)

我期望的结果是:

array([ [ 0.3,  0.5 , 1.5 ], [ 0.4, 0.5, 1.5 ] ], dtype=float32)

但我得到的是:

array([ 0.7,  1. ,  3. ], dtype=float32)

我想知道是否有人知道如何在不使用 for 循环的情况下获取每一行的结果？

提前致谢

Answer 1

编辑:

虽然下面的解决方案可能涵盖了一些额外的奇怪用途，但只需通过转置数据就可以更轻松地解决这个问题。事实证明，即使 tf.unsorted_segment_sum没有轴参数，它只能沿一个轴工作，只要它是第一个。所以你可以这样做:

import tensorflow as tf

with tf.Session() as sess:
    data = tf.constant([[0.2, 0.1, 0.5, 0.7, 0.8],
                        [0.2, 0.2, 0.5, 0.7, 0.8]])
    idx = tf.constant([0, 0, 1, 2, 2])
    result = tf.transpose(tf.unsorted_segment_sum(tf.transpose(data), idx, 3))
    print(sess.run(result))

输出:

[[ 0.30000001  0.5         1.5       ]
 [ 0.40000001  0.5         1.5       ]]

原帖:
tf.unsorted_segment_sum不支持在单个轴上工作。最简单的解决方案是将操作应用于每一行，然后将它们连接回来:

data = tf.constant([[0.2, 0.1, 0.5, 0.7, 0.8],
                    [0.2, 0.2, 0.5, 0.7, 0.8]])
segment_ids = tf.constant([[0, 0, 1, 2, 2],
                           [0, 0, 1, 2, 2]])
num_segments = 3
rows = []
for data_i, ids_i in zip(data, segment_ids):
    rows.append(tf.unsorted_segment_sum(data_i, ids_i))
result = tf.stack(rows, axis=0)

但是，这有缺点:1)它仅适用于静态形状的张量(即，您需要具有固定数量的行)和 2)它可能效率不高。第一个可以使用 tf.while_loop 绕过，但是，这会很复杂，而且还需要您将行一一连接，这是非常低效的。此外，您已经说过要避免循环。

更好的选择是对每一行使用不同的 id。例如，您可以添加到 segment_id 中的每个值类似 num_segments * row_index ，所以你保证每一行都有自己的一组id:

num_rows = tf.shape(segment_ids)[0]
rows_idx = tf.range(num_rows)
segment_ids_per_row = segment_ids + num_segments * tf.expand_dims(rows_idx, axis=1)

然后你可以应用操作和 reshape 来获得你想要的张量:

seg_sums = tf.unsorted_segment_sum(data, segment_ids_per_row,
                                   num_segments * num_rows)
result = tf.reshape(seg_sums, [-1, num_segments])

输出:

array([[ 0.3, 0.5, 1.5 ],
       [ 0.4, 0.5, 1.5 ]], dtype=float32)