arxiv

0. 引言 神经网络中的注意机制就是参考人类的视觉注意机制原理。即人眼在聚焦视野区域中某个小区域时，会投入更多的注意力到这个区域，即以“高分辨率”聚焦于图像的某个区域，同时以“低分辨率”感知周围图像，然后随着时间的推移调整焦点。 参考文献： [ arxiv ] - . attention search [ CV ] - Mnih V, Heess N, Graves A. Recurrent models of visual attention [J]. arXiv preprint arXiv:1406.6247, 2014. [ Bahdanau ] - Bahdanau D, Cho K, Bengio Y. Neural machine translation by jointly learning to align and translate [J]. arXiv preprint arXiv:1409.0473, 2014. [ CV ] - Ba J, Mnih V, Kavukcuoglu K. Multiple object recognition with visual attention [J]. arXiv preprint arXiv:1412.7755, 2014. [ CV ] - Xu K, Ba J, Kiros R, et al. Show,