двойной слепой в домашних условиях

[avva]

Вчера, перед походом в гости к Э., я заехал купить шашлыки, лепешки и хумус в любимой шашлычной. Напротив нее расположена известная арабская фалафельная, и я давно хотел попробовать их хумус. В итоге к Э. мы приехали с шашлыками, лепешками, двумя банками хумуса, и мной, твердо настроенным провести сравнительную дегустацию обеих банок.

Если просто поставить обе банки на стол, то люди будут знать, где хумус из знакомой шашлычной, а где - из арабской фалафельной с известным именем. Это может повлиять на их мнение о вкусе. Поэтому логично переместить хумус из банок в две тарелки разного цвета. Если бы я это сделал в кухне, и только я знал, какой хумус в какой тарелке, то это был бы "слепой эксперимент": они не знают, какой из двух хумусов они пробуют, а я, экспериментатор, знаю (в медицине аналог был бы - пациенты не знают, принимают экспериментальное лекарство или плацебо, а врачи знают).

Но у слепого эксперимента есть свои недостатки. Из-за того, что я сам знаю, какой хумус где, мне тяжело объективно оценивать разницу во вкусе. Кроме того, есть шанс, что я как-то бессознательно выдам другим участникам, какой хумус где - своим поведением, тем, куда я поставлю какую тарелку итд. Если мы уже пытаемся сделать строгий эксперимент, лучше постараться сделать двойной слепой - когда не только подопытный, но и экспериментатор тоже не знает, что где.

С хумусом мы это сделали следующим образом. Сами банки были идентичные, отличались только крышки с наклейками. Сначала я отошел в кухню, бросил монету, и по результатам броска отметил фломастером либо банку из шашлычной, либо банку из фалафельной. Потом я снял крышки, убрал их, поставил банки рядом (я заранее решил, что банка с фломастерной отметкой будет стоять справа) и ушел из кухни. Хозяйка дома пришла туда, бросила монету, и по результатам броска положила хумус из банки с фломастером либо в красную тарелку, либо в желтую. Хумус из другой банки - в другую тарелку, и все это на стол. Теперь все, включая хозяйку и меня, могут пробовать хумус из двух тарелок и составить мнение о том, в какой тарелке он вкуснее. Только соединив вместе то, что запомнили о своих выборах я и хозяйка, мы можем проследить, из какой банки первоначально был какой хумус.

По итогам вечера единогласно было решено, что хумус из арабской фалафельной "Абу-Хассан" вкуснее, чем из шашлычной "Шипудей Эзра".

Comments

[celen-me.livejournal.com]

А оценивая качество хумаса, вы устно озвучивали друг-другу впечатление или писали на его бумажках, что бы не повлиять свом мнением на чужое?

[avva.livejournal.com]

Я пытался организовать это так, чтобы сначала все решили, какой они предпочитают, я переспросил несколько раз, что каждый твердо знает, что ему больше нравится, а потом я бы опросил по кругу. Это на мой взгляд было бы достаточно (ясно, что с бумажками еще строже методологически, но я не опасался реально того, что участники изменят уже твердо составленное мнение в данном случае - только того, что чужое мнение повлияет на формирование их собственного).

Но, честно говоря, все были такие голодные, и так ждали хумуса во время этих наших манипуляций (лепешки и шашлыки уже стояли на столе), что царил определенный хаос, и несколько человек успели высказаться о превосходстве определенной тарелки до того, как все составили мнение.

[aosypov.livejournal.com]

Вот так оно и бывает - двойной слепой падает перед соц. консенсусом...

[avva.livejournal.com]

Ничего, это был первый блин комом - к следующему разу мы отточим методологию.

[occuserpens.livejournal.com]

ИМО, в данном случае достаточно анонимизировать продук

[genka8.livejournal.com]

Возможно хитрые Абу-Хассанцы добавили в хумус немножко MSG.

[larisaka.livejournal.com]

А вы точно-точно на 100% уверены что не перепутали, какую банку отметили фломастером?

[avva.livejournal.com]

Точно-точно. Но не на 100% :)

[(Anonymous)]

Это такой тонкий математический юмор (объясните плз) или просто дурачитесь?

[avva.livejournal.com]

В рационалистском сообществе любят подчеркивать, что неверно в чем-либо вообще иметь уверенность на 100%. Даже у очень невероятных альтернатив есть пусть очень-очень маленькая, но вероятность. Скажем, у того, что на самом деле я действительно банку фломастером отметил другую, и тут совершенно случайно прилетел космический луч, частица которого попала мне в мозг ровно в правильный нейрон и переделала там мою память так, что я запомнил по-другому, может быть меньше одной миллиардной или одной квадриллионной процента, но все же не 0%. Или что реальность это компьютерная симулация, и ее программисты переделали мою память, итд. Поэтому неверно никогда оценивать что-то буквально в 100%. Это скорее внутренний юмор такой, чем серьезный подход.

[(Anonymous)]

Понятно :)

[tandem-bike.livejournal.com]

умно. мы тоже так сделаем. мы пробовали вслепую (но не двойную, то я то Д. были "слепы") - яблоки, молоко, бананы (органические вс. нет), воду (кран вс. фильтрованная), овсянку (дешевая вс. дорогая), минеральную воду (на узнавание бренда), яйца (самые рассамые локальные вс обычные), мясо (грасс-фед вс. простое).

выводы -

яблоки - органические хуже, для конкретного типа, зеленых грэнни смит
молоко - негомогенизированное очевидно и вкуснее
бананы - нет разницы
вода - то хлорка чуется то нет, непоследовательно
овсянка - дешевая клейкая
минералка - пеллегрино сильно отличается от герольштейна

теперь попробуем дабл.

[mig-jag.livejournal.com]

Когда-то на детях тестировал воду. Single blind tes. Тестировались два вида воды из бутылок Poland Spring и Lake Arrohead и просто вода из под крана. До тестирование предпочтение отдавалось воде из бутылок Poland Spring, так как ее пили в детстве. По результатам слепого теста, первое место заняла вода из крана, второе место Lake Arrohead, последнее место заняла любимая вода Poland Spring.

[tandem-bike.livejournal.com]

xaxaxaxax!!!! nice!

[(Anonymous)]

А может, им просто надоела ваша "любимая" вода, захотелось чего-то новенького?

[(Anonymous)]

Ну, в принципе, если производители пытаются "оптимизировать" вкус, то у неорганических больше "ручек" (knobs), так что нормально.

Другое дело, что чаще производители оптимизируют транспортабельность/"сохранябельность" и внешний вид, а фермеры, озабоченные близостью к природе, обычно менее подвержены этим соображениям - в результате, иногда именно у органических производителей бывало вкуснее.

Но, во-первых, organic сегодня - огромный бизнес, им занимаются не из высших соображений, а ради доходности. С мелкими фермерами эти соображения еще могут работать, с Whole Foods etc. - нет. А во-вторых, если вы действительно сравнивали один и тот же сорт - то главную "ручку" вы уже зафиксировали (подозреваю, что в пределах одного официального "сорта" есть еще куча под-сортов, но предположим вы и впрямь сравнивали один и тот же подсорт...)

(Извините, если я тут черезчур разумничался...)

[tandem-bike.livejournal.com]

oh, we did not try to be THAT scientific. ;-) even bananas can have a different taste if they come from different sources.

organic.. yes, partly a fraud, nowadays.

[(Anonymous)]

oh no, I wasn't talking about a fraud- they may be technically following the organic standards perfectly, and may even not do anything that effectively leads to the same outcome that the standards were meant to avoid (e.g. если вбухать офигенную кучу навоза, то можно получить вполне "органические" продукты, напичканые нитратами [правда, с большей вероятностью можно просто пожечь корни] - но я не об этом...).

Я просто о том, что кроме вещей, прописаных в стандартах, есть еще много чего. Скажем, селекционизму (даже научному) много веков, но только в последние лет 50...90 он стал настолько сильно ориентирован на продавца/поставщика и настолько слабо- на покупателя. Первые organic farmers с выборов натуральных технологий выбирали и вкусные сорта, их заботила purpose before profit. Today's organic market is full of companies optimizing profit given the constraints of organic standards. Fraud is a much less frequent attempt to bypass those constraints..

[tandem-bike.livejournal.com]

i would need you to elaborate. i don't get it. i mean - i get the "optimizing profit" part, but they are selling lifestyle, theoretically, and health... if their stuff is tasteless, they will lose profits, too...

[gegmopo4.livejournal.com]

Но стоило вам или хозяйке ошибиться…

[bookworm-the.livejournal.com]

если "и" - то всё норм %)

[janatem.livejournal.com]

Я похожую процедуру устраивал для дегустации джина. Но эксперимент получился так себе, потому что версии продукта слишком сильно различались (хотел понять, что может значить разница в цене на полпорядка в одном и том же магазине). Тоже для организации эксперимента пришлось задействовать двух человек, и я не придумал, как обойтись меньшим количеством.

[(Anonymous)]

Вот научный подход во всей своей красоте и строгости. Учитесь, студенты!

Теперь нужно проанализировать хумус из еще нескольких заведений, попарно. Если обнаружится, что хумус из "Шипудей Эзра" вкуснее, чем какой-нибудь, к примеру, хумус "Ашкара", а тот, в свою очередь, вкуснее хумуса из "Абу Хассан", можно будет написать научную статью. On non-transitivity of preference among Israeli hummus connoisseurs.

[mr-k-bx.livejournal.com]

хахаха

[dmpogo.livejournal.com]

теперь в следующий раз придется шашлыки брать из одного места, а хумус из другого .... и нужно было это неудобство ?

[avva.livejournal.com]

Все равно ждешь в первом, пока шашлыки будут готовы, можно за это время перейти дорогу и взять хумус во втором.

[gershshpraihler.livejournal.com]

Кроме шуток, первый попробованный хумус влияет на вкусовык рецепторы и стало быть на восприятие второго. Ну как яблоко кажется кислым после шоколада.

[avva.livejournal.com]

Не подумал об этом. Я не пытался учитывать, кто из гостей какой хумус первым пробовал...

[aosypov.livejournal.com]

вот и второй осложняющий момент, данный непосредственно в ощущениях.

даблблайнд - это мало, надо еще рандомизировать (все, что можно). а для этого, между прочим, еще и должна быть достаточная мощность выборки. особенно, если вариантов больше двух (== множественное сравнение, поправки соотв.).

жесткий он, гранит... ;)

[tandem-bike.livejournal.com]

yes!!! a bias! need to cleanse the palate, ahem. :-)

[alexcohn.livejournal.com]

Вообще-то, хватило бы одной монетки, для того, чтобы хозяйка раскладывала по тарелкам с анонимизированных тобою баночек.

[anjey.livejournal.com]

Можно было взять одинаковые тарелки. На донышке одной поставить метку обозначающую торговую точку.

[occuserpens.livejournal.com]

Таки да, а потом перетасовать

[geish-a.livejournal.com]

да, мы так сорта кофе с мужем тестировали.

[xxxxx.livejournal.com]

Смотри, конструкция "либо - либо" выражает неопределённость. Поэтому в "я ... бросил монету и по результатам броска отметил фломастером либо банку из шашлычной, либо банку из фалафельной" можно говорить только в том случае, когда рассказчик сам не знает, какая банка была отмечена. Например если ты рассказываешь о заланированном эксперименте "я завтра отмечу либо банку из шашлычной, либо банку из фалафельной в зависимости от монеты", то всё окей. Но так как есть ---- нельзя. Во втором случае, когда речь о хозяйке в общем-то тоже нельзя, потому что это "либо-либо" рассказывает нам, что хозяйка-то отметила, но ты (рассказчик) до сих пор не знаешь какую именно такрелку она отметила (что видимо таки неверно, судя по остальному рассказу).

[(Anonymous)]

А может, Анатолий уже проделал методику дзэна, и его безупречно незапятнаный разум готов к повторению эксперимента? Такая вот кнопка Reset в мозгу? Тады все ОК!

[occuserpens.livejournal.com]

Я бы взял 2 одинаковых блюдца и нарисовал 2 пары лейблочек с цифрами 1 и 2. Лейблочки прикреплются к дну блюдец и соответствующим банкам. Блюдца наполняются хумусом и тасуются. В самом конце про блюдце с самым вкусным хумусом выясняют, какой банке оно соответствует.

Что характерно, красивое название double blind можно и не знать :)

[rostyslav maiboroda (from livejournal.com)]

Если блюдца одинаковые, дегустаторы будут путать, с какого из них им больше понравилось.

[occuserpens.livejournal.com]

Поскольку блюдец всего 2, можно положить рядом с одним нож, а рядом с другим - вилку. Или, в дополнение к private лейблочкам, ввести public - рядом с каждым блюдцем положить цифры 1, 2.

Поскольку у меня дома сеть компов с кабелями и все с лейблочками, разметка напрашивается сама собой :)

По итогам вечера...

[(Anonymous)]

Вывод, который можно сделать по итогам вечера: естественнее есть фаршированную рыбу.

[(Anonymous)]

Все неправильно! Хозяйка положила в одну из тарелочек ЛЕВЫЙ хумус! И она это знала. И свое знание подсознательно всем передала.

Вот проверьте - всем, наверняка, понравился хумус из правой тарелочки. ;-)))))

[http://users.livejournal.com/sorcerer_/]

Непонятно зачем нужен был тест, если и ежу известно, что абухасановский хумус офигенен, и я думаю скорее всего самый лучший, что можно найти южнее Хайфы, в любом случае.