Anatoly Levenchuk (ailev) wrote,
Anatoly Levenchuk
ailev

Дрессировщики нейронных сетей

Я уже много раз говорил, что не верю, что нейросетки будут заниматься обычной логикой -- это энергетически неэффективно и медленно. Это нужно делать на традиционных архитектурах (а хоть и фон Неймановских). Как я понял, Karpathy тоже не верит в логику-на-нейронах. Он опубликовал несколько дней назад фантастический рассказ (http://karpathy.github.io/2015/11/14/ai/), где подробно прописал натаскивание (там оно называется shaping -- учтите, что в психологии и биологии shaping это "формирование навыка" или "формирование условных рефлексов") полуавтономного робот-агента-на-нейронных-сетях. Для меня главная там фраза --

"The Mystery module performs symbolic variable binding, a function that current architectures require exponential neural capacity to simulate."


В каждом фантастическом рассказе есть доля фантастического рассказа. А уж когда это учебный рассказ, то и подавно.

Комментарии к рассказу тоже доставляют -- там прямо сравнивают shaping с дрессировкой собак с кликером. Я бы рекомендовал дрессировщикам нейронных сетей читать Карен Прайор "Не рычите на собаку" -- http://lib.ru/DPEOPLE/nerychite.txt (у неё и другие книжки есть, в том числе и прямо про дрессировку с кликером -- http://www.koob.ru/pryor/).

А если кто-то хочет ещё подобной "современнотехнологической" фантастики, то Майкрософт вдохновила нескольких писателей, пригласив их в свои лаборатории -- и сегодня опубликовала сборничек коротких рассказов: http://www.theverge.com/2015/11/17/9752138/microsoft-sci-fi-anthology-future-visions

А у Intel научно-фантастический проект тут: http://tomorrow-projects.com/
Subscribe
  • Post a new comment

    Error

    Anonymous comments are disabled in this journal

    switch
    default userpic

    Your reply will be screened

    Help
  • 2 comments