0:00 У Яндекса есть куча плюсов и минусов.
0:02 Учитываем реакцию человека, и вы сможете понять, как ему ваш продукт.
0:07 Я говорю о том, что иногда возможно, на больших каких-то продуктах, где вот каждая доля там просто уже важна, там может быть где-то и датчик подсоединить.
0:15 Ну, типа, не так легко.
0:17 И в итоге ты имитируешь такой заказ.
0:20 И вот мы уже спим с этим мужиком, и отвечаю за Алису.
0:26 Вот тебе говорят, умный свет, но это же разный свет.
0:28 Ну, слушай, у кого-то не получилось, у них не получилось.
0:31 Но это же не означает, что теперь все, давайте забьем на такой способний.
0:35 В целом, из-за таких идей у нас ай-трекеры появились, которые тоже очень полезны.
0:41 Короче, из превосходного дизайна интерфейса гараж бенда мы перезаписываем выпуск про продукт, который работает наш гость Андрей Алексеев.
0:51 Он продуктовый дизайнер в Яндексе и делает Алису и умный дом.
0:57 Немножко наигранно, но мы уже устали повторять эту же информацию.
1:02 Мы повторяем: это 63-й раз.
1:04 Так это и происходит.
1:06 Ну, скажи нам: что, как в Яндекс попал?
1:11 Да, в Яндексе попал, знаете как?
1:14 Начал писать всем знакомым.
1:16 Хед-хантер, как мы выяснили, полное.
1:21 И один из моих знакомых, Вова, ведет канал популярный - Секрет Дизайн.
1:26 И он туда зафигачил мою резюме хуй, и мне написали все.
1:29 С единорогом, да, такое?
1:32 Он, кстати, прикольную привилку делает.
1:35 Можете его позвать, дейли Сплиттер.
1:38 Это тудолист какой-то.
1:40 Нет, это там тайм-трекер с атмикой еще.
1:43 А, потому что твой конкурент, поэтому ты знаешь.
1:46 А вы тут не захаетесь.
1:47 Слушай, мы, я не думаю, что мы сильные конкуренты, он немножко другую штуку делает.
1:52 Но у него классное приложение.
1:54 И я его себе скачал, и я, конечно, типа заценил он интерфейс.
2:01 этот конкурс именно по интерфейсу этого приложения.
2:05 Но хорошо так сделано.
2:06 А давай вообще весь выпуск про него разговаривает.
2:08 Такой классный момент.
2:09 Теперь давайте по обратно вернемся, а можно чуть про меня тут да.
2:13 Ну короче, он закинул мое резюме.
2:14 Хуй мне написали кучу компаний: там авито, все банки, какие-то стартапы короче.
2:21 У меня было предложение, там, штук 15-20.
2:25 И одни были Яндекс Банк и Алиса.
2:31 Я помню, как я был в Таиланде, в Тайне.
2:34 Яндекс банк, это Яндекс.Пай, да, это он
2:38 отлично, и я помню, тогда был в Таиланде и лежал в комнате, так и думал, где я хочу вообще быть.
2:46 Ну вот, мне задолбало рисовать всякие там Е-ком-проекты, что-то еще такое уже все нарисовано, эти кошельки - типа что я хочу делать.
2:55 И я подумал, что умный дом и стык диджитала и хардверных таких девайсов это что-то для меня новое, и я вижу в этом будущее.
3:06 Я вот ходил несколько дней, думал, что еще такое может быть, и я вот вообще ничего не нашел более интересного.
3:12 То есть, в основном, цифровой продукт, а тут хотя бы какое-то физическое воплощение есть.
3:17 И это с нейросетями, это ГПТ там появляется, это голосовые ассистенты.
3:24 Это прям такое объединое.
3:26 Объединение вакансия, реально.
3:28 У вас вот какие вы как вы видите вакансию?
3:33 Если, допустим, текущее место работы, самое классное - где еще можно?
3:38 Я рассматривал реально, ротацию внутри у нас тоже делают эти умные дома, вот, и мне тем же самым это все и привлекло.
3:47 Не знаю, почему мне всегда интересно было бы делать каких-нибудь роботов.
3:51 Знаешь, вот роботов, причем каких-нибудь таких человекоподобных.
3:55 Вот это прям вообще кажется, что это такой универсальный инструмент.
3:59 То есть ты можешь им что угодно и грузить там, и я не знаю, и
4:06 регулировать там движения автомобилей и все что угодно.
4:10 Я кое-что нафантазировал.
4:12 Была вакансия, на которую я думал, откликнуться, но, к сожалению, было не встанет.
4:17 Короче, вкус вилл делал для вот этих вот своих касс самообслуживания.
4:21 Вот мне было очень интересно.
4:23 Вот у меня дикий интерес был к интерфейсом, в котором нету нормального, короче, нет опыта твоих коллег, которые ты мог бы перенять.
4:32 То есть, это что-то новое или слабо изученное, и вот должно покрывать такие.
4:36 Ну, это вот то, вот вроде интерфейс, который все делают в веб-мобилке, но в какой-то другой форме хотя бы.
4:44 Или интерфейс в тачке какой-то.
4:46 Но тачки я не люблю, но мне нравится, что там есть какая-то функциональность.
4:49 Я бы хотел какой-то предмет, который в жизни повседневно встречается, но не на экране нашего смартфона или компа.
4:56 Да, как будто бы это все под Придумать опыт какой-то новый, или для часиков хотя бы сделать.
5:05 Да, для часов вообще интересно очень.
5:07 То есть там ограничения очень жесткиесткий.
5:09 Вот хочется во что-то вот такое влезть, где ограничения тебе неизвестны, где ты можешь так наломать веток, что тебя уволят.
5:17 Тут все понятно, блин.
5:20 И как ожидание действительности?
5:22 Вот ты пришел в Яндекс, соответственно, работать с Алисой.
5:31 первые недели, не знаю, вот что ты делал вообще там?
5:34 Как тебя какие там были задачки?
5:37 Ну, в целом там какие-то всегда простые дают, чтобы ты погрузился.
5:46 Или часто какой-нибудь анбординг дают, сделал, типа там, изучи продукты и погрузи в него первый юзер.
5:53 Но в целом Яндекс он супер большой и
5:58 грузит тебя прям своей, вот этой величиной, какой-то там
6:03 этот офис, который на Льва Толстого, там уже куча всяких сервисов.
6:07 Еще там такая система передвижения, как Хогвартс, какой-то там лабиринты такие, ты заходишь.
6:13 Я до сих пор 7 месяцев уже.
6:15 Я бывает, захожу, какие-то уголки, никогда там не был.
6:18 Слушай, так у вас там форма, как я помню, это такой квадрат
6:23 То есть какой-то квадрат обводку оставит.
6:25 И мне очень понравилось, что у вас идет малоэтажность, в отличие от нашего офиса, у нас много этажей, то, что у вас все по лестницам, и вот поэтому еще ощущается Хоггурс.
6:36 И самое, что я завидую, вот мало у кого есть, это крыша.
6:40 Какая комфортная крыша, рай для курильщиков.
6:43 Но даже если ты не курильщик, просто вот мы летом выходили, играли с Андреем в шахматы.
6:50 Там по-моему еще на этой крыше можно что-то свой днюх исправлять, если ты сопротивление.
6:53 Да, там есть зона, где можно бронировать и можешь там чего угодно провести - хоть посидеть с друзьями и так далее.
7:04 Ну, ожидание было, что это супер, что-то такоее большо, технологичное.
7:08 Отчасти оно оправдалось, но, как и любая компания, у Яндекс есть куча плюсов и минусов.
7:16 Это всегда какая-то такая инертность, как и у больших компаний.
7:20 То есть, процессы, они.
7:22 Так как я был в стартапе, мне все время хотелось как-то быстрее, а Яндекс, он за счет большого количества людей.
7:31 Ну, как по мне, ну подожди, давай.
7:32 Возможно, он среди других корпов довольно и быстрый.
7:41 много с ребятами с разных продуктов.
7:46 моей компании МТС они очень разные.
7:49 То есть я уверен, что у вас та же самая история.
7:51 У вас есть продукты, где процессы дольше происходят, за свои специфики, из-за возраста, из-за сотрудников, которые там работают больше и меньше с разным опытом.
8:00 А есть как будто бы внутренние стартапы.
8:02 То есть, то, что имел ты, оно возможно, мне кажется, и у вас присутствует просто не над тем, чем ты занимаешься.
8:10 Потому что у тебя такая часть, она не прям чтобы сильно новая, то есть важная, интересная, в нее компания вкладывается сильно, круто, но это не стартап.
8:21 Ну, то есть, есть такие вещи, которые
8:26 Просто, типа: давайте, главное быстрее, чтобы занять эту нишу рынок.
8:32 Вот у нас: я предполагаю, что это стартап, но мне кажется, есть такое приложение Годжим.
8:39 Короче, это шеринговое приложение, чтобы сходить в фитнес-клуб.
8:44 Поминутно платишь за посещение клуба.
8:47 И там еще много клубов в этой сети, да?
8:50 Да, по всей Москве, если там откроешь, там очень много, и там вот ценники - типа раскиданы, 3 типа рубля минуту или даже 15 - то есть от сегмента.
8:58 И вот эта штука она появилась вот так в секунду, и видно, что она
9:03 там на скорую руку была докручена.
9:06 Мне просто кажется, именно возможно, я ошибаюсь.
9:10 Но мне кажется, что ее тоже в какой-то момент, наверное, купили у кого-то и докрутили - то есть, тоже либо это был стартап, либо в такой манере развился.
9:19 А я: это к тому, что у тебя в компании, по-любому, есть ребята более резвовые, более стартапные проекты.
9:26 Или более такие, которые тоже стрички, такие системы, сложные, нагруженные, менее повороты.
9:31 Алисе сколько уже лет, кстати?
9:33 По-моему, совершенно лет 7 или что такое было, я точно не помню.
9:37 Ну, что-то около того.
9:42 Устроить план через один скидку.
9:45 Это просто проблема больших компаний.
9:47 Когда какой-то объем людей настигает, то управлять ими становится сложнее, и процессы замедляются.
9:54 Ну, бюрократия растет, а не вот будет цифры.
9:56 Когда ты переходишь из кого-то более резвого продукта, тебе кажется все медленным.
10:00 Вот у меня такое было.
10:01 Ну, из команды в три человека, конечно, когда ты переходишь в команду, сколько там валисей, да, там просто.
10:06 Знаешь, какой контраст.
10:07 Я понимаю, о чем ты говоришь, потому что я до работы в МТС фигачил в студии, где у меня на каждый день дедлайны в виде количества макетов было.
10:16 И когда ты после этого заходишь, и те ставят задачу, и те дабеют подышать перед тем, как начнешь делать.
10:24 Я то есть я сегодня не сделал, меня не кастрируют.
10:28 Блин, я люблю работать в продукте.
10:31 Да, но вот плюс в том, что он большой, и там много всего происходит.
10:36 То есть в Алисе сама есть Алиса, там есть целая линейка станций.
10:42 Помимо станций, есть еще вот недавно был релиз - станция с экраном.
10:46 Ну, не лучше же, что попробуем.
10:49 Да, там есть много проблем.
10:52 Но ты можешь попробовать это тоже поделать: есть телевизоры.
10:57 Телевизор у вас, ты имеешь в виду есть?
10:59 Да, есть Яндекс.Телевизор, в котором живет Алиса.
11:03 У нас тоже телевизор.
11:04 Есть линейка умных устройств - там - датчики, разные движения, влажности.
11:13 Слушай, ты как-то изучал отдельно вопрос о строительстве интерфейсов, вот звуковых?
11:18 Или вот как ты вообще в это погрузился?
11:20 Там же совсем другие правила, наверное.
11:23 Ну, там чем-то похоже на интерфейс, к которому мы привыкли, в приложениях, на сайтах.
11:30 Просто там нужно понимать, что ты ничего не видишь.
11:34 И от этого есть свои специфики там.
11:37 Ну, там есть интересные всякие приемы, типа как вот называется построл.
11:42 Это когда ты что-нибудь спрашиваешь у Алисы, а она тебе там говорит: типа время сегодня 21.00, и потом что-нибудь докидывает сверху, и вот всякими такими механиками там можно погружать в юзеров новые фичи, какие-то анбординги создавать.
12:00 В целом, там все то же самое, просто нужно думать именно про голос - про то, как ты слышишь Алису.
12:06 Есть такой эффект, что если тебе Алиса что-то говорит и ты перебарщиваешь с длиной, то человек начинает такое тупить и уже не улавливает, что она говорит.
12:17 Это у каждого по-разному.
12:19 Приборщиваешь длиной.
12:21 Типа, ну перво говоришь 7 секунд, она что-то говорит, и уже начинается внимание рассеиваться.
12:27 Плыть начинаешь, потому что она говорит с одной интонацией, да?
12:30 Ну, не интонация, а как это называется?
12:32 В целом монотонно получается.
12:38 Но в целом просто ты нагружаешь человека, и он начинает терять внимание.
12:42 Не, я знаю, что у вас прикольно сделано, что акцент есть на ударение, там окончания подчеркиваются правильно, и в целом окей, но это а-ля как вот когда слушаешь аудиокнигу, она может озвучена быть таким голосом, что ты идешь, идешь, идешь, вот он такой моргнул, и не помнишь последние несколько минут, потому что тебя просто монотон откидывали, а ты не в том состоянии, чтобы переварить.
13:00 Потому что ты какой-то.
13:01 Потому что сложность, вот я считаю, что голосовые сценарии не могут конкурировать там с полноценными
13:11 интерфейсами, потому что они более обогащенные.
13:14 Ты видишь еще чего-то - заказ такси, например, есть в Алисе - есть через приложение.
13:20 И ты никогда не сделаешь через голос такой же наполненный заказ такси.
13:26 Почему нельзя просто сказать?
13:28 В приложении там много всяких дополнительных вещей - типа там бонусы - там плюсы, какие-нибудь приблизительное время ожидания.
13:36 Если все это вывалить на юзера.
13:38 Вот так вот словами, то он просто потеряется и не сможет ничего заказать, в итоге нужно найти такую корфичу и построить голосовой интерфейс так, чтобы большинству людей этого было достаточно.
13:53 То есть, надо определить: вот эти оптимальные дозы, да, то есть, чтобы адрес и время, вот так.
13:58 Да, распределить это по этапам и нагрузить юзера так, чтобы ему это было достаточно.
14:04 И при этом это было не так сложно, чтобы он забил и сказал: я пойду в приложение - нафиг это вам алиса.
14:11 То есть, это не для каждого.
14:13 То есть, если ты хочешь какую-то сложную сделать штуку, например, заказать такси, чтобы перевести лыжи, плюс еще с ребенком есть, то скорее всего, ты через Алису это очень тяжело будет сделать.
14:27 А вот такие быстрые заказы: типа Алиса, закажи мне такси до дома, и все.
14:32 Они очень классно работают, и тебе не нужно доставать телефон, тебе не нужно проверять, там, когда такси подъезжает, когда приехал, и тебе это все строит.
14:40 Ну, странно, ты дома стоишь.
14:41 У Алисы докажи такси до дома.
14:44 Ну или не до дома, до работы.
14:46 Ну да, может, до работы стоит.
14:48 Я помню, через звуковой интерфейс я как-то заказывал такси.
14:51 У меня долгое время был кнопочный телефон, и даже когда я Яндекс.Такси появился, у меня был кнопочный телефон.
14:57 Но я такой типа думал: я, короче, не пойду по этому пути, будут у меня такой.
15:02 И я заказывал такси по телефону.
15:04 Яндекс.Такси я заказывал по телефону.
15:08 Да какой год у тебя кнопочный телефон?
15:10 Мне интересно, даже стало.
15:12 Яндекс.Такси, но кнопочный телефон.
15:13 Лет 5 назад у меня был кнопочный телефон.
15:16 То есть я решил, что я отвергаю все вот это
15:20 внимание - пожирательные технологии.
15:23 Я буду, короче, на кнопочном телефоне сидеть.
15:25 У меня причем было смешно.
15:26 У меня был айпад и кнопочный телефон.
15:32 И фофрукниндия такой рубится.
15:34 Это фигня, кушать время.
15:36 Но я его, типа, не все время с собой брал, поэтому надо работал.
15:40 И вот я, заказывал как-то такси через вот просто, по сути, звуковой интерфейс.
15:44 Там, конечно, был просто оператор.
15:47 Там ты говоришь, откуда, ты говоришь, куда, там все, все, все.
15:50 Но мне не хватило вот в этом интерфейсе - вот в этом сценарии, мне не хватило того, чтобы мне сказали, сколько я буду ехать.
15:56 То есть у меня вызвало такси, оно приехало, все.
16:00 И я сажусь, и там узнаю это время поездки - по навигатору, оно было какое-то огромное.
16:06 Я понял, что я бы не заказал, если бы я знал, что настолько будет ехать, я бы поехал бы лучше на метро, например.
16:12 Кстати, вот у меня точно такое же всегда поведение: если у меня есть время, то есть мне не срочно.
16:18 Я посмотрю, и разница в пару минут.
16:20 Я выбираю общественный транспорт, если мне надо ничего там перевести тяжелое.
16:24 И это вот реально лично для меня решающий фактор выбора такси.
16:28 Если на такси мне ехать до работы сюда в два раза быстрее, такое бывает.
16:32 Из-за этого и ценник низкий.
16:34 Я лечусь, но это даже не в цене, дело, а в том, что я сокращаю время еще.
16:39 А если ехать на такси, знаешь, мне пишет на 5 минут меньше, то я иду пешком с осознанием счет того, ну я еще и прогуляю заодно.
16:47 Ну вот в этом сложность найти - допустим, вот тебе важно время подачи и понять, что таких людей много, и сказать им это - а потом - где сказать: там, есть сцене - оффера, когда ты говоришь, довези меня до работы, она говорит: от твоего дома до работы, ехать-то столько-то.
17:04 И вот здесь говорить, например, время подачи.
17:07 Или когда ты уже согласился, он скажет: Ищу тачку, а потом, когда нашла, говорит: желтый кирио будет через 8 минут.
17:14 Типа, вот там сказать, или тут.
17:16 Это тоже нужно распределять, потому что можно легко нагрузить юзера, и он затупит.
17:22 Ну да, да, потому что в приложении: ты же видишь, и через сколько у тебя?
17:26 Давай посчитаем: короче, смотри:
17:29 поездка на работу: 3 слова, займет 8 минут.
17:35 Время ожидания 4 минуты, 10 слов получается.
17:41 Уже может человек поплыть?
17:43 Нет, например, ты говоришь, довези меня до работы.
17:46 Она скажет от дома до работы ехать 27 минут на экономе за 350 рублей.
17:55 А еще у тебя может быть наличными, например, нужно говорить наличными или нет?
17:59 Эконом, который приедет к тебе в течение 8 минут, да, там.
18:02 еще читать И потом скажется: заказываю.
18:05 А потом еще можно допомнить туда, что подача будет через 8 минут, и ты там тебе сказали 8 каких-то фактов, или сколько там, 6 будет, и ты можешь затупить в этот момент.
18:16 А потом что-нибудь уточнить у нее захочешь, там она.
18:19 Часто бывает, что Алиса не до конца понимает адрес, который ты сказал: можно сказать: довези меня до Ашана до пятерочки.
18:26 Короче, надо, чтобы Алиса просто отвечала.
18:28 Ну, тебе главное доехать.
18:32 Да, в самом деле есть такая мысль, что в целом людям какому-то проценту людей вообще ничего не надо.
18:39 Типа, им нужно время и деньги, например.
18:41 Ты их говоришь, например, визиты работают настройки делать 20 минут 300 рублей.
18:46 Ехать 20 минут за 350 рублей.
18:48 Слушай, так это же как в жизни.
18:49 Ты когда ловишь, ты такой центр 300 едем?
18:52 Вот это вот точно так же должно работать, мне кажется.
18:55 Вот, как будто бы ты быстро перекинул.
18:57 Я так думал, что можно.
19:00 Короче, часто представляю, как ты в жизни.
19:01 Вот когда вы с другом едете, он что-то заказал, такой, что там, когда будет, а сколько стоит?
19:07 Да, основном это спрашивают.
19:09 В чем вообще проектируются звуковые интерфейсы?
19:16 Просто блоки вставляешь, стрелочками соединяешь, и разводишь логику.
19:22 Важно вот реально не засадь и отсечь
19:30 Потому что все хотят туда нафигачить много.
19:34 Первый вот был тоже релиз Яндекс.Лавки.
19:38 Можно через алис теперь заказать еды.
19:42 Это сложная история.
19:43 Да, и если шаблон, то легко.
19:47 Хочется нафигачить: типа, закажи колбасы, колбасы, вареные, или копченые, или 300 грамм, или 200, а сервелат этот, или какой-то там еще.
19:58 И если это все уточнять, то ты на второй позиции скажешь: нахрен, я пошел в приложение, мне очень тяжело.
20:06 Ну, мне кажется, надо вот эту экосистемную тему связывать, чтобы
20:11 Яндекс-бренд сделать, как Сакара.
20:12 И, короче, очень тяжело найти вот такую грань, где больше не надо добавлять.
20:19 Пусть это будет не для всех, это будет для какой-то, может, узкой аудитории или 50 процентов пользователей, или если 30% только смогут делать, они любой коллег смогут сделать.
20:30 Прослушай, а вот мне кажется, что ну надо как-то может на двух стулях усидеть - то есть, а-ля предлагать основной сценарий упрощенный для всех, а для людей, которые хотят все себе оптимизировать, чтобы все и работало, и так, и так, которые готовы чуть времени потратить, у них там будет переключатель, который будет уточнять.
20:49 Либо наоборот, типа, может такой: так, у остальных он все спрашивает, но я сейчас настрою у себя в маркете, там высвиться, настроиться, соединить, и ты шаблоны какие-то зафигачишь.
21:00 Например, вот у тебя есть какая-то продуктовая корзина, вот Игорь такой заказывает, у него там вкусвиле, дофига добавлено, и он просто проходит быстренько и заказывает.
21:12 Просто чтобы запомнить, что если я говорю капуста, это вот эта капуста.
21:15 И все, дальше работает.
21:17 Но точка входа сложнее получается.
21:19 Там бординг - это все.
21:21 Ну да, то есть, в настройке в целом довольно мало людей заходит, и важно, чтобы тебя зарядило это с первого раза.
21:29 Чтобы ты такой заказал, почувствовал, о, это прикольно, закажу еще.
21:34 Если ты вот первая сессия будет неудачной, скорее всего, туда не вернешься.
21:37 Слушай, а можешь вот поделиться, может, только просто слету помнишь, насколько вот этим часто пользуется?
21:43 Мне интересно именно повторно.
21:44 То есть, вот кто-то попробовал и такой, ну, я сейчас почему-то спрашиваю: мне интересно, кто-то на постоянку уже втянулся в такой заказ, или же люди такие попробовали, знаешь, круто, но потом вернулись уже к своему привычному через телефон.
21:59 Про конкуренцию, вот эта.
22:01 Я не знаю, сколько их, но такие точно есть.
22:04 И я помню, когда еще не релизнули Яндекс.Лавку, я просто юзер аур проводил, там общался с юзером по другой задаче.
22:12 Тоже через голосовые сценарий там был какой-то запрос.
22:15 И он говорит: как круто, если бы она была, если бы можно было бы заказать еды.
22:20 Он говорит, я бы говорил ей, вот это мне колбасы, что-то еще там он хотел.
22:25 И так приятно было с новать, что мы это делали.
22:28 Типа, ну прям люди хотели.
22:31 Потом были такие, которые там делали уже по 10 заказов и больше.
22:35 Я просто понял, что я бы был пользователем, если бы оно было связано с Кусвиллом, потому что я сейчас мог сесть за компом.
22:42 И или даже не в работу, а я люблю там поиграть после работы.
22:46 Я вот сижу иногда, играю, и честно, там мозг у меня какую-то часть свободен.
22:51 И если ни с кем не разговариваю, я бы сидел бы, прям играя бы и начал перечислять.
22:55 А давай-ка, что там есть?
22:56 Я бы даже хотел, чтобы он мне все озвучивал.
22:58 Сейчас там по скидке, зеленые ценники, там какие-то акции, а такое, давай вот это, давай, вот это.
23:03 То есть я бы посидел даже минут 10, но чтобы не отвлекаться, чтобы я играл и при этом быстренько все это отмел.
23:10 Ну или часто люди просто заказывают одно и то же.
23:13 Чтобы ты привык какой-нибудь там кофе с какой-нибудь.
23:16 И ты говоришь: вот, вези мне это.
23:19 Она говорит: сказала тебе там американо с булочкой с корицей, заказываю.
23:26 Слуша, а как вообще происходит тестирование?
23:29 То есть, ну, вот вы там сначала вы выдвинули гипотезу.
23:32 Мы отрезаем вот эту неважную часть, вот эту важную мы оставляем.
23:36 Вот вы фигжейми это все нарисовали, да, какие-то тексты там, значит, расписали примерно.
23:41 Как потом происходит испытание этого дела?
23:46 Ну, в целом есть много людей, которые уже создали сценарий, у них экспертиза большая, и они могут какие-то уже вещи сразу отрезать.
23:54 Если это недостаточно, тогда можно делать прототипы звуковые, и там каких-то инструментов прям под это нет.
24:04 Как выглядит звуковой прототип?
24:07 Ну, там довольно прикольно происходит.
24:10 Например, я могу сказать, что мне нужен какой-нибудь человек, который, не знаю, просто делал заказы из лавки, да?
24:17 Или заказывал такси?
24:20 И мне там УИ-с следователи, они нанимают этого человека, зовут в лабу, или я с ним созваниваюсь.
24:28 Я созванивался, например.
24:32 я его погружаю в контекст.
24:34 Говорю: давай представим, что ты заказываешь такси.
24:36 И потом я беру просто Яндекс.
24:39 станцию и через камеру - вот так вот, ноутбук, наклоняю, говорю: вот видишь - она реальная.
24:44 И потом через зум шарю экран.
24:51 Их следователи раздобыли респондента, заплатили ему денег.
24:55 Вот, бери реальный опыт.
24:56 Но я созвонился, потому что ехать и хотел холод на улице.
24:59 Ну, вот тебе камера реальная, смотри.
25:03 Короче, реализовать.
25:06 Делаю разные варианты сценария того, что он может говорить.
25:11 И записываю через генерацию голос Алисы.
25:15 И потом просто ему даю визуал станции - либо скриншот просто ему показываю, либо реальную станцию.
25:20 Она там может даже говорить что-то.
25:23 И он такой говорит: Алиса, закажи такси.
25:25 Я в этот момент просто беру мышкой и нажимаю ответ, который ну он как будто бы и отвечает.
25:31 Он говорит: а куда поедем?
25:33 И потом он говорит: ну, давай вот туда.
25:35 Он говорит: нажимаю дальше и воспроизвожу звук.
25:38 А он слышит, как будто это говорит: Тебе или ко мне?
25:43 Да, и в итоге ты имитируешь такой заказ.
25:47 И вот мы уже спим с этим мужиком.
25:49 Да, и я отвечаю за Алису, тебе понравилось.
25:52 Ну, короче, извините.
25:54 Смотришь, как человек реагирует.
25:57 Какой-то момент, если есть косяк, то он такой что-то говорит или тупит, не знает, или что-то вообще говорит такое.
26:05 А ты понимаешь, что у тебя на это
26:08 И ты понимаешь, что в этот момент ты что-то провтыкал.
26:12 И он говорит что-то другое.
26:18 какие-то еще ситуации.
26:20 Блин, очень похоже на реальность.
26:22 Извините, что такие пошлости от меня идут сейчас на секс по телефону.
26:26 Потому что любое неверное - твой ответ и у человека сразу на второй пропадет.
26:33 Да что ты угораешь, у меня нормально, мне кажется.
26:37 Ты короче, ты имитируешь
26:43 Приходите в Яндекс, вы сможете
26:48 Ты имитируешь работу с Алисой, только.
26:52 Как ты придумаешь, так и делай.
26:54 Короче, кто-то просто звуковые файлы по очереди включает, кто-то еще что-то придумывает.
26:59 Можно, прям на ходу еще придумать, наверное.
27:01 Да, проблема в том, что Алиса живет не только в колонках, она там в поисковом приложении Яндекс живет, в телевизорах и так далее.
27:11 Как будем с ней бороться?
27:12 Как достанем ее туда?
27:15 Она еще в каких-нибудь других объектах поселится.
27:20 Представляешь, Алиса под такой нелиса.
27:23 Про умный дом еще, интересно.
27:26 Алиса она как бы является частью умного дома.
27:28 То есть, это как она, точнее,
27:32 как панель управления умным домом.
27:35 Да, она голосовой ассистент для многого, в том числе и для умного дома.
27:39 Мне очень нравится история, когда ты можешь своему плеысосу через алисую сказать пылесос.
27:45 А мне не нравится история, что ты можешь сказать: только пылесос или не пылесос.
27:51 Ты не можешь ему сказать пылесос, вот эту комнату, потому что приложение, которое умное для устройства твоего, конкретного пылесоса возьмем какого-нибудь, оно не дает доступ Алисе полностью ко всем функциям, и так со всеми умными девайсами.
28:05 Поэтому как будто бы умные дома они такие немножко костыльные.
28:10 То есть, как бы там ни старались ребята развивать, им просто не дают все эти возможности, чтобы сделать по-настоящему полноценный умный дом.
28:20 И точно, кстати, такая же фигня с этими доступами прослеживается не только
28:27 среди умных девайсов.
28:29 Недавно читал - как раз это, или слушав в какой-то подкасте, у нас там арт-директор Киона, который делает онлайн-кинотеатр, он там приходил и рассказывал.
28:37 И у него спрашивали: почему Кион, ну он не такой, как и Нефликс, например.
28:42 И вот он рассказывал то, что: ну, понимаете, у Нефликс это совершенно другой уровень, и им предоставляют как раз тоже больше доступов.
28:49 Поэтому они могут и анимацию - вот эту сделать красивую.
28:52 И вот у них все так работают.
28:54 Просто потому, что им больше разрешают производители телевизоров, они им больше предоставляют возможности реализовать крутой продукт под них, так что они в каком-то плане монополисты, и чуть-чуть и по этой причине.
29:07 Ну да, я согласен, что
29:10 есть много производителей умного дома, и они все хотят создать свою такую экосистему и подсадить юзеров на свои продукты, свои датчики и так далее.
29:20 И так индустрия молодая, то есть такая вот разность.
29:23 Кто-то ограничил, кто-то более открыт, там и дает подключаться к другим системам.
29:29 И в целом, сейчас есть такая битва там подключение.
29:35 азиатская система подключения умных устройств Зигби - называется такой протокол.
29:40 Когда ты можешь просто голосом условно сказать: Алиса, найди устройство, зажать кнопочку, и она говорит: опа, нашла.
29:47 Даже не нужно открывать приложение.
29:49 А есть еще Апл, и, по-моему, еще несколько компаний создали другой протокол, называется Метер, и они тоже борются за то, чтобы через их протокол подключались.
30:00 И он открытый для других компаний, и это вот такие большие шаги в сторону того, чтобы производители делали по этим протоколам девайсы умные, чтобы можно было подключать к разным устройствам.
30:12 А, то есть, будущее должно быть.
30:15 Если они смогут на себя писать.
30:20 Сначала все сделали себе свой, а потом такие, а давайте, все-таки, у всех будет усбит.
30:25 Так сколько лет прошло?
30:27 Ну, вот оно также будет двигаться.
30:28 Нет, слушай, это хорошая новость, я об этом не знал, потому что у меня в голове это чисто было.
30:34 Ждем, пока у кого-то там, вот у Яндекса, у вас же тоже есть свои устройства, или еще у какого-то умного дома появятся наконец-то все устройства.
30:43 То есть, они перекатят под себя.
30:44 Потому что по факту ваше устройство
30:48 любые устройства не покрывают все.
30:50 Например, есть как там: не помню название, но есть производитель чисто умного света, крутого.
30:56 То есть там не просто лампочки.
30:57 Вот тебе говорят умный свет, но это же разный свет.
30:59 Вот нас освещает одна лампа, бывает обычная маленькая лампочка.
31:03 И вот чтобы хорошие полноценные лампы дома, это только один производитель, например, китайский, делает шторы, какой-нибудь делает другое.
31:10 Ну, шторы, наверное, нет, но это я так понимаю - это проблема, да.
31:14 Из-за этого появился такой комьюнити.
31:17 Короче, любители умного дома они построили свой продукт, как называется, хоссистенс, по-моему, и там программисты, которые любят умный дом, они там какие-то протоколы туда завозят.
31:31 В итоге они создали тулзу, которая объединяет в себе вообще все устройства, они туда закидывают какие-то поддержки.
31:37 Это просто опсоц проект.
31:40 И там можно очень сложные штуки делать, которые порой даже нельзя в Яндекс.Дометку.
31:46 Но это чисто для разработка.
31:48 Просто гики собрались, сделали.
31:50 И вот самые такие задороты умного дома они хотят супер свободы, и они идут туда, потому что есть ограничения сейчас во всех платформах.
31:59 Вот это даже то, что появился, мы это мы такие типа круто.
32:02 По факту, это просто не было выбора, кроме как сделать открытую, чтобы конкуренцию составить и попробовать вытолкнуть из этого Зигби с арены.
32:12 Так бы они тоже закрытую бы сделали, если бы не было Зигби.
32:18 И каждый хочет этого.
32:20 Ты когда подключаешься к этому протоколу, наверное, там какую-то денежку даешь за то, что ты его используешь.
32:27 Слушай, а у меня еще такой вопрос: а как вы метрики вообще смотрите, измеряете?
32:32 То есть, если в приложениях это есть метрика для приложения, в сайтах есть метрика, соответственно, для сайтов.
32:38 Как вы вот статистику собираете по Алисе - что это за вообще инструмент?
32:44 Да, в целом там все очень похоже.
32:46 Там также есть конверсии.
32:47 Например, юзер начал заказывать такси, сказал Закажи, и в конце он завершил заказ, и от этого этапа до последнего есть конкретный поинт.
32:57 Типа, он Алиса ему ответила, что предложила тариф на каркой-то, предложила поехать, и на каждом этапе люди отваливаются.
33:05 Ну, сколько дошло до цели, как бы нет.
33:07 Да, и мы можем наблюдать, сколько людей отвалится, где проблемы, и фиксить.
33:12 Бывает такое, что просто пару слов поменял, и проблема решилась.
33:19 Слушай, а измеряйте что-нибудь типа настроение?
33:23 Я вот помню, был на Тинькоффской конфе: они там рассказывали про службу поддержки, и что они там искусственный интеллект научили понимать по тому, как общается человек, насколько он раздражен.
33:35 И в зависимости от этого, они дают разные операторам, дают разные советы.
33:40 Ну, то есть, это как ассистент оператора, оператора живого.
33:43 Разные советы, типа, что ему сказать, как его там успокоить или еще что-то.
33:46 Вы вот по тону голоса как-то что-нибудь такое там измеряете, или может что-нибудь есть такое в планах?
33:53 Насколько я знаю, такого, по-моему, нет.
33:56 Но только, ну, смысл понимает, если ты там, не знаю, говоришь о грусти, а радостный, то она может тебе пошутить в ответ - тоже радостно.
34:06 Не хочу быть - вот этот вот либеральный момент протаскивать по то, что ну они что делать, если у вас просто население грустное?
34:14 Ну то есть, не всегда виноват твой интерфейс.
34:17 Я когда-то что-то увидел какую-то платформу, которая мы считываем реакцию человека, и вы сможете понять, как ему ваш продукт.
34:24 Да, блин, мне вот дальше что мне идет?
34:28 Ну вот прям вот человек зрится - вот он, прям такой о, интерфейс, не понял я.
34:34 И что мне с этой информацией делать.
34:36 Ну как что, ты можешь понять, что что-то не было.
34:38 Так я пойму, потому что он там встрял.
34:40 Ну, то есть, длячем мне вот это.
34:41 Вот я всегда, если честно, моя страна, что я обесценивал вот эту эмоциональность там, где она не нужна.
34:48 например, на эмоциональности тестируют банковский интерфейс.
34:52 Так Господи, может, у человека, когда это вопрос денег, он такой чепетильный.
34:58 Поэтому независимости от того, какой у вас интерфейс, он может испытывать разные эмоции, чисто из-за своего баланса.
35:06 еще одна метрика, которая может тебе помочь принять более правильное решение интерфейсная.
35:12 Давай тогда на языке это очень часто какой-нибудь эмоционально связан, когда продукт очень близок к реальному миру.
35:19 Я вот недавно замечал: Например, у нас в умном доме, когда были карточки и девайсов, там добавили реалистичные рендеры.
35:27 Это был супер всплеск эмоциональности.
35:29 Когда ты открываешь, там лампочка реальная.
35:32 И она загорается, когда нажимаешь включить.
35:35 Или у меня знакомый там в альфа-банке.
35:36 Это такой скеоморфизм здорового человека.
35:38 В Альфа-банке работают они, там продают всякие железные щита, там серебро, золото.
35:44 Они я видел, он выкладывал такой кусок золота - прям как это обломанный, такой некрасивый положили, и это тоже у них супер эмоционально.
35:52 Вот смотри, суперэмоционально.
35:58 Ну, у нас это, по-моему, прям писали так.
36:00 Вот, об этом скажут.
36:02 Нахрена мне вот это вот
36:05 как вы себя ощущали в этот момент?
36:07 Как будто бы это может быть как точка входа по обратной связи.
36:11 Вы знаете, вот спрашивают: даю тебе эту шкалу, пятизначную, если указываешь низкую, то вот тебе место для комментария.
36:17 Скажи, что не так, мы зацепимся.
36:19 Если все хорошо, иди дальше.
36:20 Я думаю, что это про более тонкую измерение.
36:23 Смотри, вот, допустим, ты идешь по какому-то сценарию.
36:26 Там в этом сценарии есть какое-то место, которое взбесило человека, но он даже, может быть, сам для себя это и не отметил, но у него где-то на уровне гормонов, дофамина, еще чего-то, оно как-то вот здесь его напрягло.
36:40 Возможно, в голосе это тоже как-то проявится.
36:43 В идеале, мне кажется, самый идеальный тестирование интерфейс - это когда у тебя миллион датчиков подсветится.
36:48 А ты там понимаешь, типа вообще все возможные твои взлеты и падения и настроения.
36:53 И это тогда смотри, человек сам про себя не скажет, но ты пойдешь и скажешь: смотрите, вот в этой точке что-то вот явно не понимает.
37:01 Это, конечно, круто.
37:02 К датчикам поцеплять людей - я всегда за, но это очень такие, если мы мыслим
37:10 в режиме креатива в Майнкрафте, что мы можем сделать все, что угодно, то, конечно.
37:14 Но мне кажется, в плане вложения ресурсов легче достать эту информацию иначе, и так просто - не просто так не проводится.
37:21 Меняет золотое, правило что, конечно, нужно
37:26 использовать тот метод исследования, который самый дешевый, самый простой.
37:30 Я говорю о том, что иногда возможно на больших продуктах, где каждая доля там просто уже важна.
37:36 Там может быть где-то и датчик подсоединить.
37:38 Ну, типа, не так видно.
37:40 Из-за таких идей у нас ай-трекеры появились, которые тоже очень полезны.
37:45 Вот это мы придумали штуку за много миллионов рублей, и теперь мы видим, куда каждый лайк стоит.
37:52 да, да, и раз в полгода возвращается в лучшем случае.
37:55 Ну, слушай, у кого-то не получилось, у них не получилось.
37:58 Ну, это же не означает, что теперь все, давайте забьем на такой способ.
38:05 сейчас какие-то вещи, которые хочется улучшать, они да, если люди об этом говорят.
38:10 Но есть я тоже считаю, что есть какие-то вещь, когда люди им что-то вот непонятно, но они не могут это обличить - какие-то слова.
38:18 И тогда нужно научиться считывать каким-то косвенным признаком.
38:21 Часто это бывает по метрикам видно, как или по длительности там отклика - знаешь, типа от одного действия к другому там отклик как-то долго или сокращается.
38:32 Если бы можно было бы замерять какую-нибудь там когнитивную нагрузку от экранов, то можно было бы прикольно прикинь.
38:37 Такие прогресс-барры - типа вот здесь человек был нагружен, условно на 80 процентов, а здесь на 30%.
38:42 И ты такой хобба поджал это все.
38:45 Когнитивную нагрузку измерять, основываясь на том, насколько интерфейс сложный, или ты тоже мыслишь сейчас датчиками, как Игорь.
38:55 Потому что если датчиками, то как будто бы опять же, разные люди у них по разному другими вещами нагружен мозг.
39:02 По просто объему сложному, да.
39:04 Я еще хочу просто добавить, почему я так
39:09 как будто бы другую сторону поддерживаю, что блин, ребят, несете фигню.
39:13 Потому что я считаю, что если мы можем отследить по метрикам, например, что есть где-то проблема, и мы идем туда копать.
39:22 По-любому, мы это вот как сказал: мы это увидим как-то иначе - то надо лучше проводить интервью.
39:29 Вот если вы не будете в формате как коридорки делать, а будете реально копать, вот надо так находить.
39:35 Не нужно пытаться достать количественным способом то, что делается качественным, налепив датчики и прочую фигню и пропустив много людей.
39:44 Вот эту человечность
39:46 от нее все равно будет больше, и ты больше эмоциональности и слов.
39:49 Это важная штука, важное замечание.
39:51 Тут все надо делать по уму.
39:54 Эмоции в цифры для меня это как что-то странное.
39:59 Короче, я говорю, что как повод копнуть вот сюда.
40:01 А уже как ты копнешь - да, и через интервью, через там самые разные способы.
40:06 Ну, в короче, в итоге нужно научиться замерять, типа на что эти эмоции влияют, типа сделать супер эмоционально какой-то экран.
40:17 То есть бывает, это очень тяжело заметить и какую-то сложную метрику построить.
40:22 По чтотому глобально эта эмоциональность должна выливаться во что-то еще, еще, и в конце концов.
40:28 В конверсию, да, ключевого действия - или там в деньги.
40:31 Ну, вот как в приложениях: каких-нибудь самый красивый экран среди ВПН приложений, это с подпиской,
40:37 то есть там больше всего они постараются, либо товарка.
40:41 Часто в продуктах умеют замерять какие-то маленькие кусочки - типа, ну, условно, есть там заказ такси от начала до конца, и там все понятно.
40:51 Особенно когда в моменту еще дает деньги, понятен успех.
40:55 Бывают какие-то экраны, где нет такого.
40:58 То есть ты не так просто отследить успех.
41:02 Он, может быть, создает это действие для того, чтобы где-то не было.
41:05 Обычно это просмотр информации еще какой-то.
41:08 Вот ты знаешь, что он зашел на эту страницу, но ты не понимаешь, нашел он, посмотрел, выполнил - то есть нет этой кнопки, чтобы понять, тут только по курсору можно.
41:18 Ну, вот я к тому, что какие-то сложные метрики многие продукты просто даже не умеют строить.
41:26 Это высокий скилл, в том когда они могут понимать, что вот это влияет на эту часть, это там на следующую какую-нибудь часть продукта, а все вместе оно там может отжирать какие-нибудь куски внимания и все равно направлять юзера туда, куда надо.
41:40 Ну, это наверное, потому что пока работает другое.
41:43 Мне кажется, если другое не работает, пойдет развитие дальше уже в сложности.
41:49 Потому что, пока сейчас тебе достаточно простроить просто воронку, и все уже такие, вот какой-то крутой!
41:57 У вас все так здорово!
41:58 Наконец-то вы сделали просто просрочение.
42:02 Если это уже вау, то тогда зачем дальше упароваться?
42:06 Может, это не нужно.
42:07 Может, наоборот, круче, пусть это чувак делает как можно больше вот таких хотя бы воронок, приводит говно в глину, а не сделает один кирпич.
42:19 Да Оставляю задуматься.
42:22 Про нейросети хотел спросить: вот ты говоришь, как раз ты пошел в Алису.
42:27 Понимая, что, видимо, скоро и нейросети будут подключены, Алиса сможет общаться, видимо, как-то более осознанно, более похоже на человека.
42:36 Как-то это уже используется сейчас, и что делаете с этими галлюцинациями нейросетей, когда они там выдают какую-то дичь, непонятную.
42:46 Это как-то там отсеивается, не отсеивается, или может быть пока вообще Валисе не используется.
42:51 Ну, ГПТ сейчас была открытая бета,
42:56 Там можно было есть лендинг, где можно записаться и начать использовать.
43:04 В Алисе она тоже появилась.
43:06 Это тоже можно пользоваться, только пока бета.
43:09 Ну она открытая, там может каждый взлететь по записи.
43:13 Ты спрашивал, что еще как.
43:16 Ну, вот когда галлюцинирует какой-то на водах.
43:18 Да, галлюцинирует нейросеть.
43:20 Типа что Алиса в это время делает?
43:25 ее же тоже тестируют, гптишку.
43:28 И перед релизами, даже БЕТ, там много тестов проходит.
43:32 И когда смотрят, там ключевые какие-то запросы, они совсем булшитные, тогда их либо там блокируют, либо оставляют до следующего улучшения, чтобы прокачать и выпустить.
43:46 Более уже проработанный вариант.
43:50 Все это на датасетах разных обучается, и
43:55 не всегда, короче, с первого раза там получается обучить хорошо.
44:01 Вообще много занимает время от
44:05 внедрения какой-нибудь функции в Алису, построенной на нейросети?
44:09 Сколько это этапов испытаний проходит?
44:14 Это, по сути, сейчас только начало Алисы ГПТ.
44:19 Она еще не релизнута.
44:21 И там предстоит много.
44:23 А, то есть сейчас пока как раз испытывается, видимо, в закрытом виде.
44:26 Ну, слушай, а расскажи вот про что: как собеседовался ты в местах, где тебе нужно делать звуковой интерфейс?
44:34 Когда этот звуковый интерфейс делал?
44:37 Что тебя спрашивали, вообще, по каким признакам они?
44:41 такой Но я голосовых отправлял.
44:45 с роботами общаюсь постоянно.
44:48 Каждый день голосовые интерфейсы делаю.
44:50 В дискорде общаюсь, еще там говорю голосом.
44:52 Какой-нибудь там, не знаю,, тестовый не тестовый.
44:54 Ну короче, как проходило собес отбор и все такое.
44:59 Ну, мое резюме увидел в канале.
45:02 По-моему, красный Вова, мой знакомый в секрет дизайн, постил, запостил, там увидел картир и написал мне сразу.
45:10 То есть, я миновал этап с В
45:14 и сразу начал с руководителем говорить.
45:16 О чем вы говорили с ним?
45:17 И просто смысл созвонились, и был обычный такой разговор, и как-то мы очень сильно замачивались.
45:25 Он был просто какой-то очень легкий.
45:28 Не нужно было придумывать какие-то вопросы.
45:31 сам тек сам по себе.
45:39 Было удивительно, что это так легко происходило, что в какой-то момент мы как будто просто поговорили.
45:46 И у нас очень похожие мысли были.
45:48 Мой опыт создания своего продукта он, как мне показалось, близко.
45:54 Гоше к моему руководителю: что
46:03 Многие принципы, которые сформировались у него, и у меня
46:08 И это как-то чувствовалось.
46:11 И получился такой матч, что меня дальше начали проводить на следующий этап.
46:17 Вот давай, давай, смотри, следующие этапы.
46:20 Ну, в Яндексе там всегда несколько этапов.
46:23 Вот первый у меня был просто с руководителем группы дизайна, потом
46:28 с руководителем дизайна там по всей Алисе.
46:34 Ну да, есть там умный дом,
46:37 сначала продукт, потом уже все направление, и потом с одним сеньор продукт-менеджером, и каждый из них меня спрашивает.
46:48 Вот мне интересно, что у тебя спрашивал продукт-менеджер.
46:51 Ну, как раз самый такой интересный был этап.
46:56 Он начал меня спрашивать про типа, говорит, давай представим такую ситуацию, что у тебя
47:06 есть какие-то устройства, и тебе нужно сделать так, чтобы люди начали чаще пользоваться ими.
47:13 И потом говорит, что будешь делать там.
47:18 Ну, просто ставит задачу, говорит, что будешь делать.
47:21 Я говорю: ну пойду там посмотрю, какими устройствами чаще пользуются, или что-нибудь такого.
47:26 Говорит, а что будешь смотреть,
47:30 в итоге я начал там дальше рыть, начал говорить: пойду смотреть ретеншн.
47:35 какой будешь смотреть ретеншн там 30-го дня, 7-го и так далее.
47:40 И в итоге он меня так спрашивал, спрашивал: и дошел до какого-то момента, где я уже немного начал плыть и волноваться, и я уже не понимаю, типа, че отвечать.
47:52 И какой-то момент он говорит - остановил - такой говори,т,: все дальше не надо отвечать.
47:57 Я у него говорю: а как бы ты ответил на это?
47:59 Я подумал, что я затупил и типа что-то уже не могу.
48:04 А он говорит, что здесь как бы нет правильного ответа, я просто смотрел, как ты наблюдаешь за процессом, как ты вообще мыслишь, и потом говоришь, что примерно так же, как и ты, я бы тоже делал.
48:17 интересно, когда тебе дают такую
48:22 Интересно было послушать.
48:24 У меня предложение такое.
48:26 Мы сейчас закончим этот подкаст, потому что поздно мы все устали.
48:30 Если людям зайдет, послушать, нас мы как-нибудь снимем еще с Андреем обязательно.
48:36 Я думаю, есть о чем поговорить еще, много о чем, о процессе, работы, о какой-нибудь дизайн-системе.
48:45 Да и вот это уже 5 выпусков.
48:47 Дизайн-системы никто никогда не создавал.
48:52 Ну что, продолжение в источнике.
48:55 Спасибо тебе, что пришел.
48:57 Спасибо, что позвали.
Комментарии
Войдите, чтобы оставить комментарий.