← Volver al feed

ResNet (2015): conexiones residuales para ir más profundo

He et al. presentaron redes residuales que permitieron entrenar cientos de capas y ganaron ILSVRC 2015.

ResNet (2015): conexiones residuales para ir más profundo

Kaiming He y colegas (Microsoft Research) introdujeron Residual Networks: atajos que facilitan el flujo de gradiente y permiten redes muy profundas sin colapsar el entrenamiento.

ResNet-50/101 se volvieron backbone por defecto en visión. La idea de skip connections se filtró a innumerables arquitecturas, incluidas variantes en NLP.

El paper ilustró un patrón del deep learning: un truco de optimización/arquitectura puede desbloquear una escala nueva de modelos.