Autoencoders

[109]

узнал про автоенкодеры. автоенкодер - это такая сетка, в которой первый и последний слои одинаковы, и натаскивают её на то, чтобы выход как можно меньше отличался от входа. маразм, скажете вы, зачем это нужно? оказывается, если количество степеней свободы внутри сетки (в скрытых слоях) меньше, чем размер данных, то у сетки нет другого выхода, кроме как научиться внутри себя представлять данные более компактно. по-умному, unsupervised feature learning. это круто, потому что машинное время дёшево, а человеческое (для создания labeled datasets) дорого. способов использования результата много, например - denoising, или error correction. вот, к примеру, брали фотки людей, и удаляли им нос или ухо, а сетка восстанавливала. то есть сетка как бы "знает", что у человека должен быть нос, понимает, что ей подсовывают что-то без носа, и дорисовывает нос как может. unsupervised!

Comments

[thedeemon.livejournal.com]

Только часто с чужим носом: http://i-programmer.info/news/192-photography-a-imaging/10100-no-comment-super-resolution.html

[109.livejournal.com]

со сферическим носом в вакууме!