avva: (moose)
avva ([personal profile] avva) wrote2013-04-09 02:33 am

немного о machine learning

1. [livejournal.com profile] plakhov протестует против слишком наивного и устаревшего подхода к анализу климатических данных в эпоху machine learning.
Я не настолько хорошо разбираюсь в этом, чтобы иметь свое мнение о его критике, но может, кому-что еще будет интересно.

2. Как раз сегодня попалась статья: A Few Useful Things to Know about Machine Learning. Довольно хорошая, по-мовму.

[identity profile] nakamura.livejournal.com 2013-04-09 12:38 am (UTC)(link)
Спасибо за п.2.

[identity profile] asox.livejournal.com 2013-04-09 07:40 am (UTC)(link)
Кажется он протестует даже не столько против этого - а против отсутствия понимания, "почему оно получается так".
Т.е. когда спор ведётся вокруг некоей "шумной линии" - причом ни у кого даже не возникает вопроса "а причём tyt доверительный интервал и вообще что же это такое".
Т.е. есть у нас высоковолатильный процесс - но какие есть основания обращаемся с ним как с шумовым процессом на фоне "тренда", а не как-то иначе.

[identity profile] kormitigrov.livejournal.com 2013-04-09 08:41 am (UTC)(link)
Вопросы возникают, просто те, кто привык пользоваться линейной регрессией с доверительными интервалами, те применяют ее так или иначе и спорят друг с другом (интервал не тот! сигм не хватает! существенная разница! несущественная разница! глазами видно! в цифрах видно!). А те, кто понимает, что не понимает, можно ли применять тут этот механизм - те, скорее, молчат :)

[identity profile] asox.livejournal.com 2013-04-09 12:00 pm (UTC)(link)
Ну да, в общем-то.
И самое существенное в данном случае - именно "те, кто привык пользоваться".
Т.е. никакой науки, по сути, под этим не кроется - типа как если бы взять компьютерную программы, рассчитывающую положения астрономических объектов с высокой точностью - и заниматься с её помощью астрологией.

[identity profile] p2004r.livejournal.com 2013-04-09 02:26 pm (UTC)(link)
1) а что вы собственно можете предложить вместо доверительных интервалов?

2) и что такого сокровенного в проведении через точки линии с помощью МНК? когда эта операция _внезапно_ становится некорректна?

[identity profile] p2004r.livejournal.com 2013-04-09 08:22 am (UTC)(link)
что касается возможности каким то хитрым методом получить, по наблюдениям за системой её модель, и сделать соответсвенно прогноз, существуют фундаментальные ограничения http://en.wikipedia.org/wiki/Observability

тут все меряют CO2, а оказывается что димеры всякие в атмосфере имеют на порядок большее влияние на парниковый эффект :)