Neurodigest: Aspectos destacados del aprendizaje automático de marzo de 2021

En marzo, hubo muchas noticias sobre el uso del autoaprendizaje para tareas de visión por computadora. El principal problema que los modelos de autoaprendizaje intentan resolver es realizar tareas sin depender de conjuntos de datos cuidadosamente seleccionados y etiquetados. FAIR y Microsoft presentaron varios estudios sobre este tema a la vez.





VIDENTE

Accesibilidad: entrada de blog / artículo





Facebook SEER (SElf-supERvised), 1.3 . Instagram 84.2% Imagenet.





SwAV - , RegNet VISSL- PyTorch. 60 self-supervised , . 





Learning from videos

:





Facebook , , . Instagram Reels, , . , 20%. 





Time-Space Transformer

El mapa de calor muestra cómo se distribuye la atención del modelo: en la fila inferior, las áreas que se consideran menos importantes están sombreadas.  De esta manera, TimeSformer aprende a prestar atención a áreas importantes en el video para hacer juicios de tiempo-espacio complejos.
, — , . , TimeSformer , - .

: /





TimeSformer . self-attention NLP. 3D , . - . self-attention , . , , , , .  





Swin Transformer

: /





Microsoft , . , , . , , . , PyTorch





LightningDOT

Resultado de la consulta "biplanos azules y amarillos volando uno al lado del otro", la imagen en el marco rojo es una imagen válida
«- ,  », —

: /





. - .





Microsoft , . . SOTA- Flickr30K COCO.





Involution

: /  





self-attention . Involution — , .





TagMe

:





, . . GPS- , . , . , . 





PF-AFN

Canal de formación de PF-AFN
PF-AFN

: /





, GAN- . . , , . , , .





Latent Composition

: / / /





GAN , . MIT , . GAN , . . 





Infinite Images

:





MIT , «» . , . , , . , Infinite nature, , . 





GANsformer

: /  





StyleGAN , . , . , , .  





FaceBlit

: /





GAN . , . , , - , .





CLIP

Interpretación de la neurona responsable de un concepto tan abstracto como "Navidad"
,   «»

: /





, CLIP Open AI , iPod .

Open AI « » .





, CLIP , , , — , . , Open AI — , , .





, , , «» , , .   , CLIP . . , , . , , , .







P.S.



, - , .





, :





  • código fuente y colaboración del proyecto Infinite Nature de la selección de enero ;





  • una demostración interactiva de Monster Mash de la edición de septiembre ;





  • GPT-Neo , una implementación no oficial de los 2.7 mil millones de parámetros GPT-3 de Eleuther.ai.





La comunidad de código abierto continúa deleitando, y en marzo incluso apareció un servicio a través del cual puede presentar una queja sobre resultados de investigación no reproducibles.   



Eso es todo, gracias por su atención y ¡nos vemos el próximo mes!








All Articles