о машинном обучении
Jun. 12th, 2017 07:44 pm![[personal profile]](https://www.dreamwidth.org/img/silk/identity/user.png){kind=small}
avva(для программистов в основном)
Райан Даль, известный в качестве создателя технологии Node.js, недавноушел в монастырь ушел на год заниматься глубинным обучением в Гугл, и по итогам этого стажерства написал довольно интересное резюме:
http://tinyclouds.org/residency/
Цитата: "I remain bullish that machine learning will transform essentially all industries and eventually improve the lives of every human. There are many industrial processes that can benefit from the smart guesses that ML provides. I believe my motivating demo will be achieved some day soon—you will watch Charlie Chaplin in 4K resolution and it will be indistinguishable from a modern movie.
That said, I've found it very difficult to build, train, and debug models. Certainly much of that difficulty is just my own inexperience, but that itself points to how much experience is needed to effectively train these beasts. My work has been focused on the easiest branch of ML: supervised learning. Even with perfect labels, developing models can be quite difficult. [...] If I use the word "working" in a subjective, gut-reaction way of describing software: Image classification seems to work robustly. Generative models barely work and are not well understood. GANs have great images, but are almost impossible to build—my experience has been that any small change to the architecture and it will just stop working. I've heard reinforcement learning is even more difficult. I can't speak to recurrent networks. [...]
The signal-to-noise ratio in papers is low. There's too much volume to keep up with. People are often not upfront about the failures of their models because conferences prefer accuracy over transparency. [...] It's an exciting time for ML. There is ample work to be done at all levels: from the theory end to the framework end, much can be improved. It's almost as exciting as the creation of the internet. Grab a shovel!"
Райан Даль, известный в качестве создателя технологии Node.js, недавно
http://tinyclouds.org/residency/
Цитата: "I remain bullish that machine learning will transform essentially all industries and eventually improve the lives of every human. There are many industrial processes that can benefit from the smart guesses that ML provides. I believe my motivating demo will be achieved some day soon—you will watch Charlie Chaplin in 4K resolution and it will be indistinguishable from a modern movie.
That said, I've found it very difficult to build, train, and debug models. Certainly much of that difficulty is just my own inexperience, but that itself points to how much experience is needed to effectively train these beasts. My work has been focused on the easiest branch of ML: supervised learning. Even with perfect labels, developing models can be quite difficult. [...] If I use the word "working" in a subjective, gut-reaction way of describing software: Image classification seems to work robustly. Generative models barely work and are not well understood. GANs have great images, but are almost impossible to build—my experience has been that any small change to the architecture and it will just stop working. I've heard reinforcement learning is even more difficult. I can't speak to recurrent networks. [...]
The signal-to-noise ratio in papers is low. There's too much volume to keep up with. People are often not upfront about the failures of their models because conferences prefer accuracy over transparency. [...] It's an exciting time for ML. There is ample work to be done at all levels: from the theory end to the framework end, much can be improved. It's almost as exciting as the creation of the internet. Grab a shovel!"
![[identity profile]](https://www.dreamwidth.org/img/silk/identity/openid.png){kind=small}
no subject
Date: 2017-06-12 04:54 pm (UTC)однако мне эта давка немножечко напоминает то что было уже с артифишиал интеллидженс, или в медицине с функциональным МРИ. все побежали и я побежал - стратегия иногда выигрышная, конечно.
ДМЛ впечатляет в распознавании визуальном и звуковом. пэттернс. но это там где3 можно тренировать. и на сигнале сравнительно с небольшим шумом. ирландский сеттер от бультеръера даже в приличном добавленном отличается. а не все медицинские например пэттернс тренируемы, они очень шумные, и пусть например ДМЛ начнут с простых - с рентгена легких, например. если получится, то я свой скептицизм съем с солью и перцем. а так - эти вопли про "новую революцию" только удручают. и бежать не хочется. хотя я побежал.
no subject
Date: 2017-06-12 05:22 pm (UTC)no subject
Date: 2017-06-12 05:25 pm (UTC)no subject
Date: 2017-06-12 05:23 pm (UTC)А вы не можете подсказать где можно толково почитать почему до сих пор не создали AI-терапевта? А то на самый поверхностный взгляд кажется что компьютер с доступом к справочным материалам и medical guidelines должен ставить диагнозы не хуже сельского врача, у которого к тому же сегодня похмелье.
no subject
Date: 2017-06-12 05:32 pm (UTC)все что я пока читала было настолько неубедительно что хотелось чем-то бросить в экран.
автоматическое чтение ЭКГ старее чем?? 30 лет, и введено в машинку клиническую, но все равно читает кардиолог после, а машинное чтение как бы вообще никуда не идет, хотя на мой некардиологический взгляд оно аккуратное. но дело в том что я не имею права суди не посмотрев какие-то исследования - какова аккурси машинки по сравнению с кардиологами, какой конкорданс и так далее. вроде простой вопрос, наверняка кто-то ответил уже. мне честно говоря лень смотреть. для лекции понадобится, посмотрю тогда.
зря вы так про сельского с похмельем.
диагнозы неплохо ставят даже неумные алгоритмы, не ДМЛ, причем дифференциал выдают "на ввод симптомов и тестов".
но он же очевидный. т.е. ну совсем просто. а неочевидные диагнозы машинка не ставит. ПОКА. а ставит сельский, с похмелем.
может это тоже до времени. но понимаете о чем я? для простого диагноза машинка не нужна, а сложный она не может. пока.
когда-нибудь будет как в стар треке робот диагност. тут я тоже буллиш. но пока - далеко до этого, очень. почему а ХЗ. т.е. я имею идеи кое-какие, но не уверенна что хочу подробно.
(no subject)
From:(no subject)
From:(no subject)
From: (Anonymous) - Date: 2017-06-12 07:50 pm (UTC) - Expandno subject
Date: 2017-06-12 05:53 pm (UTC)https://www.youtube.com/watch?v=Fbzk1bqAPjU
(no subject)
From:no subject
Date: 2017-06-12 05:20 pm (UTC)Слухи о скорой победе искусственного интеллекта над человеческим сильно преувеличены.
no subject
Date: 2017-06-12 05:37 pm (UTC)I'm a bot, bleep, bloop.
no subject
Date: 2017-06-12 06:07 pm (UTC)Но в любом случае, появление AI, равного по интеллекту человеческому -- не за горами.
Думаю, что около 2030 года будет.
Какое количество этических конфликтов это породит....
no subject
Date: 2017-06-12 06:32 pm (UTC)Лет 25 назад был почти такой же энтузиазм насчет neural networks. Они и сейчас никуда не делись, но так и осталось одним из направлений в ML.
Мы уже убедились, что компьютер можно научить решать общую достаточно узкую задачу лучше человека (играть в шахматы или го, например, - я помню время когда в это многие не верили), и круг таких проблем будет расширяться. И это очень круто, это во многом изменит нашу жизнь, в том числе к худшему. Тем не менее, это будет растущий набор инструментов, а не один искусственный интеллект, который будет конкурировать с нами.
Так же как и роботы сменившие ручной труд на многих производствах не полностью заменили и не заменят человека. Люди поставили роботов на конвейер потому что они там лучше справляются. Но гвозди в стену мы забиваем сами не в последнюю очередь потому, что мы знаем куда их надо забить и зачем.
(no subject)
From:(no subject)
From:(no subject)
From:Функция выполняется? Да?????
From:Re: Функция выполняется? Да?????
From:Re: Функция выполняется? Да?????
From:Re: Функция выполняется? Да?????
From:Re: Функция выполняется? Да?????
From:Часы за двадцатку
From:(no subject)
From:(no subject)
From:(no subject)
From:(no subject)
From:(no subject)
From:no subject
Date: 2017-06-12 06:57 pm (UTC)(no subject)
From:(no subject)
From:(no subject)
From:(no subject)
From:(no subject)
From:(no subject)
From:no subject
Date: 2017-06-12 06:15 pm (UTC)no subject
Date: 2017-06-13 02:39 am (UTC)https://twitter.com/esyudkowsky/status/775666130694184961
no subject
Date: 2017-06-12 07:26 pm (UTC)LOL
https://twitter.com/Meaningness/status/846477427505164288
no subject
Date: 2017-06-12 09:16 pm (UTC)(no subject)
From:no subject
Date: 2017-06-12 08:10 pm (UTC)no subject
Date: 2017-06-12 09:15 pm (UTC)(no subject)
From: (Anonymous) - Date: 2017-06-12 10:28 pm (UTC) - Expand(no subject)
From:no subject
Date: 2017-06-13 04:19 am (UTC)Помогите самообразоваться.
Date: 2017-06-13 07:03 am (UTC)Re: Помогите самообразоваться.
Date: 2017-06-13 12:45 pm (UTC)https://www.amazon.com/gp/product/B00TXPGEHG/ref=oh_aui_search_detailpage?ie=UTF8&psc=1
С пороговой функцией.
From: (Anonymous) - Date: 2017-06-13 02:21 pm (UTC) - ExpandRe: Помогите самообразоваться.
Date: 2017-06-13 03:24 pm (UTC)Но потом заметил "простейшие". Сорри.
(правда всё равно не понял зачем вручную делать простейшое, когда вокруг столько всего вкусного и сложного)
Чтобы понимать.
From: (Anonymous) - Date: 2017-06-14 01:28 pm (UTC) - ExpandRe: Чтобы понимать.
From:Спасибо.
From: (Anonymous) - Date: 2017-06-15 07:26 am (UTC) - Expandno subject
Date: 2017-06-13 02:15 pm (UTC)no subject
Date: 2017-06-13 02:31 pm (UTC)(no subject)
From:(no subject)
From:(no subject)
From:no subject
Date: 2017-06-13 03:34 pm (UTC)Что за проблема увидеть Чаплина в "высоком разрешении"? Скорее проблема увидеть с высокой частотой кадров :)
no subject
Date: 2017-07-01 07:10 pm (UTC)https://ru.stackoverflow.com/a/683632/