Rep the Set: Neural Networks for Learning Set Representations

Rep the Set: Neural Networks for Learning Set Representations

Konstantinos Skianis, etc.

Intro

现有的方法都侧重于得到一个distance/similarity measure or kernel，然后用在kNN或者SVM上。

GNN的permutation invariant还只有sum和mean，没有充分利用NN的experssive power。

Neural Networks for Learning Representations of Sets

输入和输出都是X，进行一个ordering invariant的转换。

Permutation invariant layer: 中间有m个hidden sets $$Y_1, Y_2, ... Y_m$$，每一个Y都是d-dimensional。

使用二分图的概念，将X和Y中的对应的特征进行匹配。

但是整个论文的假设是说图是一个set，这个有点不太确定。