Использование ТМС для выявления связей между глубинными нейросетями и зрительной корой

СНС произвели революцию в машинном обучении, достигнув рекордной точности в распознавании объектов. Помимо того, что они очень точны, недавние исследования показали, что СНС имеют сходства со зрительной корой. Но вопрос о том, используются ли те же механизмы обработки информации зрительной корой остается открытым. Помимо простого сопоставления показателей точности человека и модели нас интересовало, совершают ли СНС такие же ошибки как наши испытуемые в задаче на идентификацию. Мы обучили СНС различать одинаковые и разные парные изображения лиц и домов и сравнили результаты с экспериментальными данными. Мы установили, что СНС могут достичь той же точности, что и наши испытуемые, а также, что они способны воспроизвести эффект инверсии лица. Затем мы применили ТМС к нашим испытуемым во время того же задания к областям затылочной коры, вовлеченным в восприятие лиц и восприятие сцен. Наконец, мы предприняли попытку имитировать эффекты ТМС на СНС путем отключения весов в средних сверхточных слоях. Мы подтвердили что можно отключить веса у СНС, чувствительные только к лицам или сценам, имитируя искусственные повреждения от ТМС.