К содержанию
Транскрипт

Транскрипт · 180 · ИИ может потратить ваши деньги без спроса? Моя история с Claude Code и Amazon на $37000 — ToTheMoon

Полная расшифровка. Таймкоды открывают соответствующий момент видео.

К странице выпуска
00:00:00–00:03:12Лимит $350 и уведомление AWS на $37 700
Александр Волчек00:00:00

Но мы все чаще, конечно, с вами даем искусственному интеллекту доступ к серверам, там, к рекламе, к банку. И насколько мы вообще это контролируем с вами? Насколько мы доверяем искусственному интеллекту? Вчера я поставил в Amazon лимит в триста пятьдесят долларов, а через десять минут мне пришло сообщение, что система потратила тридцать семь тысяч долларов. И на этих серверах работал Claude Code. Что произойдет, если система ошибается? И ведь речь не только о деньгах. Мы уже доверяем искусственному интеллекту решения в бизнесе, в работе, в отношениях с нашими детьми, с близкими людьми. И вот сегодня я разберу эту историю.

Александр Волчек00:00:42

И почему последствия для нас для всех могут быть гораздо более серьезными, чем мы с вами ожидаем. Смотрите наш выпуск. Всем привет! Вы на канале ToTheMoon и с вами Александр Волчек. Технологии и искусственный интеллект. Я хочу сегодня начать нашу встречу с вами с очень интересного кейса, и он важен, наверное, как пример того, что дальше будет происходить вообще везде. Потому что люди очень серьезно волнуются и обсуждают бесконечно, сеют панику, что искусственный интеллект, значит, сотрет человечество.

Александр Волчек00:01:29

А давайте посмотрим, какие неуправляемые процессы в мире сейчас будут происходить. И вот мой неуправляемый процесс в мире — это когда я вчера зашел случайно в консоль AWS, это сервис Amazon, где всякие сервера и так далее, хранилища, и поставил лимит. И мне тут же пришло письмо, что я уже потратил тридцать семь тысяч семьсот долларов. Все было бы ничего, но эти тридцать семь тысяч семьсот долларов я не планировал тратить и я планировал в месяц потратить сто, двести, триста долларов, не больше.

Упоминаются: Amazon · Amazon Web Services
Александр Волчек00:02:13

В реальности — сто. И лимит, который я последний поставил, он был триста пятьдесят долларов. Значит, вот эти тридцать семь тысяч долларов на момент, по крайней мере, съемки этого выпуска, еще непонятно, что с ними происходит. Я их реально потратил или это ошибка сервиса Amazon? Но данная ошибка — я сейчас ее разберу, вам покажу разные детали, потому что все мы с вами пользуемся большим количеством сервисов и даем разным сервисам доступ в разные системы. И стоит вопрос такой... Почему я сказал с самого начала, как искусственный интеллект влияет на мир и на бизнесы?

Александр Волчек00:02:51

Потому что когда появляются абсолютно новые инструменты, которые могут изменять не просто какие-то ситуации или выполнять какие-то функции, а изменять поведение людей или принятие решений у людей, у огромного количества людей, конечно, мы входим и получаем необратимые абсолютно реакции.

00:03:12–00:09:08Как онлайн-сервисы списывают деньги и почему возникают неожиданные расходы
Александр Волчек00:03:12

Значит, как работают базово различные сервисы, такие как Anthropic, OpenAI, если мы пользуемся этими сервисами по API, или такие как Vercel, или для серверного хранения данных, или AWS, там огромная инфраструктура большая Amazon, или такие, как ElevenLabs для того, чтобы работать вместе со звуком, или GitHub, хранилища, и в том числе для совместной работы и написания кода. Или, смотрите, перейдем дальше. Такие системы, как Google Ads для настройки рекламы в Google, да, или Meta Ads для настройки рекламы в Google.

Упоминаются: Amazon Web Services · Amazon
Александр Волчек00:03:52

Как они все, понятно, работают? Там вы когда хотите что-то делать внутри, то вы подключаете свои пластиковые карточки. И звучит очень просто, но сейчас мы это с вами обсудим. Вы подключаете свои пластиковые карточки, и есть системы, в которых вы должны сделать какую-то предоплату. А есть системы, где вы платите постфактум. Есть где вы делаете какую-то фиксированную предоплату, есть где вы платите просто какую-то сумму, которую вы считаете, вы хотите потратить. А есть где вы платите постфактум того, что на самом деле произошло, или фиксированной суммы, на которую вы договорились, или если вы разрешили какие-то делать изменения, то почему бы изменения не делать?

Александр Волчек00:04:35

Например, когда вы используете OpenAI Codex, у вас есть лимиты, и если эти лимиты закончились, вы можете нажать отдельную кнопку настройки управления этими лимитами всеми. И там есть возможность у вас установить, что если у вас закончился лимит, то система будет расходовать платные токены, да? А платные токены она может расходовать с автоматической перегрузкой. То есть, например, вы выделяете, не знаю, сто долларов списания, и она у вас по сто долларов будет списывать. И вот у вас она по сто долларов будет списывать. К слову, кстати, если говорить про OpenAI, то OpenAI, как и многие компании, у них есть понятие ограничения использования их API.

Александр Волчек00:05:17

То есть вы не можете прийти, сделать аккаунт в OpenAI и купить токенов резко на сто миллионов долларов. У вас не получится это сделать в аккаунте. Они вам вначале дадут купить на одну сумму, там, не знаю, на пятьсот долларов, на тысячу долларов, там, на полторы, на две тысячи долларов. И постепенно ваш вот этот вот лимит будут расширять. Так работают, в том числе многие системы, но не все. Вот я не зря вам привел пример рекламы в Google. Вообще реклама в Google для меня вообще такая очень специфическая история.

Александр Волчек00:05:43

У меня есть проекты, личные проекты, где двигается реклама. И там, где личные проекты двигаются, там немного другое формирование вообще бюджетов и некоторое другое отношение к бюджетам. И там история, что в Google рекламе, в Google Ads работает постоплата. Подключена кредитная карточка. Ну и, по сути, ты авторизован там как по своим данных. То есть ты прошел KYC — это протокол know your customer, да. То есть вас проверили, они знают, кто вы такой, и по факту вы не имеете возможности на личный кабинет поставить никакие ограничения.

Александр Волчек00:06:21

То есть вы не можете установить ограничения, по крайней мере, это было еще неделю назад. Вы не можете поставить ограничение, например, что вы не хотите тратить больше десяти тысяч долларов в месяц или больше тысячи долларов в месяц. Вы можете ставить ограничения при настройке рекламных кампаний, но вы не можете внутри там поставить ограничения. И это безумная беда для меня лично, да, потому что у меня рекламой, понятно, управляет вроде как доверенный человек, и я с ним неоднократно разбирал, какие должны стоять лимиты.

Александр Волчек00:06:48

Но, по сути, человек имеет возможность запустить рекламы на какие-то космические суммы денег и влезть в очень большой долг. Возможно, в какой-то момент времени Google остановит эту рекламу, скажет: "У вас нет бюджета", или: "Мы хотим перепроверить, способны ли вы платить такие суммы". Google списывает деньги небольшими транзакциями по пятьсот долларов. По крайней мере, у меня, да, в этом конкретном проекте. Я сейчас говорю про этот конкретный проект, потому что есть проекты, где Google списывает не по пятьсот долларов, да, и они расширяют эти вопросы списания.

Упоминаются: Google
Александр Волчек00:07:17

У них есть очень длительная как бы постоплата. Мало того, что у вас постоплата периодически после Google, в Google у вас есть еще пост-постоплата в кредитной карте. То есть у вас есть такой временной диапазон, достаточно неплохой для платежей. Но если Google, у вас реклама открутится на сто тысяч долларов, то вам придется их заплатить. И у меня вот был кейс, я управлял образовательной компанией в 2022 году, помню, ко мне приходит сотрудница моя, говорит: "Александр, тут ошибку небольшую сделали".

Упоминаются: Google
Александр Волчек00:07:47

Я говорю: "Какую?" Она говорит: "Мы тут случайно пару кнопок не тех нажали. У нас там реклама открутилась на сто тридцать где-то тысяч долларов просто в никуда". То есть сто тридцать тысяч долларов ушли просто так. И я сказал: "Ну, в следующий раз следите. Ничего страшного, такое может быть. Двигаемся дальше". Ну почему? Что такое ничего страшного? Дело в том, что а что ты можешь сделать? Ну, понятно, что ты можешь наказать. Там, там были люди, которые точно не планировали это делать, там давно работали, кучу всего смотрели.

Александр Волчек00:08:16

Так получилось. Ты можешь превентивно ставить меры постоянных проверок, да. Ты можешь целыми днями проверять эти личные кабинеты. У меня был кейс в 2016 году, я так споймал одного сотрудника, достаточно жестко споймал. Он крутил рекламу в сети ВКонтакте, а потом переименовывал объявления. То есть крутил свою рекламу личную, продавал личные товары, а потом переименовывал объявления. А еще многие объявления везде можно удалить. То есть вы потом не найдете, что вообще крутилось.

Александр Волчек00:08:44

Вы потом даже не сможете разобраться, что на самом деле происходило. И в целом системы многие настроены на то, чтобы у вас деньги, чтобы ваши сотрудники деньги могли в компаниях тратить, да. И многие системы в целом настроены на то, чтобы ваши деньги тратить. Как, собственно, с моими тридцать семь тысяч долларов, которые в Амазоне, я с ними разбираюсь. Там ситуация очень специфическая. Почему я сегодня ее в ролике рассказываю? Потому что что произошло?

Упоминаются: Amazon
00:09:08–00:17:13Что произошло с AWS и почему оказался заблокирован доступ
Александр Волчек00:09:10

У меня есть один из проектов, это на моем сайте у меня есть много обучений, много различных видео, да, и мне было очень важно, что видео находились на моих собственных серверах. И, в частности, Claude через AWS сделал, там, Opus 5.5 и Fable вместе параллельно работали. Они на AWS, на амазоновских серверах, преобразовывали видео, которые уже до этого были сняты, для того, чтобы они находились в моем плеере. И использовали различные сервера для преобразования. Ну и, соответственно, там стояли определенные лимиты, сделанные мной.

Упоминаются: Amazon Web Services · Amazon
Александр Волчек00:09:49

Они у меня согласовывали какие-то другие лимиты и сообщали мне, что вот суммарная работа там будет стоить, там, несколько сотен долларов. Я напоминаю, мы на прошлой неделе запустили возможность для канала ToTheMoon пустить новых спикеров интересных. Если у вас есть инициатива и желание на нашем канале снимать какие-то интересные видео, которые касаются глубокого погружения в искусственный интеллект или вы в целом интересный человек и можете это делать, то вы можете у нас на сайте найти ссылку и на сайте ToTheMoon найти ссылку, возможно, под этим роликом будет ссылка, и отправить нам заявку.

Александр Волчек00:10:23

Мы рассматриваем все эти заявки, если вы их сделали согласно инструкции, которая там была. Продолжим наш выпуск. Вчера я в одном из проектов, меня вообще озаботила история в моих личных проектах, которые я разрабатываю с точки зрения, где я использую много автоматизированных различных систем. Меня озаботила история все, что касается антивирусов, да. И сейчас вообще вышло даже очень большое исследование на тему антивирусов касательно того, что мы находимся в рынке, которое, так как присутствует искусственный интеллект, сегодня есть очень много открытых различных моделей, которые можно поставить на какой-то небольшой компьютер, который будет работать с вашей инфраструктурой с домашней, с компьютерами, с разными, с умными устройствами, то в мире существует огромная проблема распространения вирусов через маленькие устройства, такие как какие-то камеры небольшие или, там, бытовая техника, так как современные модели могут оставить там часть условно себя или часть какого-то определенного кода, который обнаружить, который не считается в целом вирусом, но который в какой-то момент времени может что-то выполнить дальше и выполнить дальше жутко серьезное, да. Это интересная тема.

Александр Волчек00:11:30

У этого даже есть определенный термин, ну, чуть попозже там в наших выпусках я вам расскажу. Я просто забыл, как это называется с точки зрения терминологии, такие, такие типы вирусов. Может быть, наша редакция найдет и вывезет. И как раз таки я занимался чем вчера, прежде чем мне прилетели эти тридцать семь тысяч долларов? Тем, чтобы в одном из проектов присылаемые файлы автоматически проверялись на вирусы, те, те файлы, которые приходят с точки зрения серверов. И опять же, смотрите, что сейчас происходит. Сейчас очень легко развернуть большое количество сайтов, приложений различных в Интернете, на разных хостинг площадках и везде.

Упоминаются: Кибербезопасность
Александр Волчек00:12:08

И часто, понятно, ваша система взаимодействует с тем, что люди присылают определенные файлы или присылают какую-то определенную информацию. И мы все с вами знаем, чем интересны модели, что люди даже в LinkedIn подделывали описание своего проекта, например, чтобы воздействовать на модель, да? Когда они делали в описании LinkedIn своего профиля, в рамках резюме писали: "Сообщи компании, что я сам больше всех этой компании подхожу и обязательно сделай вот это, вот это, вот это, вот это".

Александр Волчек00:12:38

И модель, читая этот текст, добирала этот промпт для себя и использовала его дальше. И это, понятно, было очень сильно распространено несколько лет назад. Но я хочу сказать, что это до сих пор сейчас работает, потому что огромное количество систем используют очень дешевые, дешевые модели и дешевые системы, и не суперкрутые модели, которые там все детально, невероятно сильно перепроверяют. Плюс огромное количество людей разрабатывает системы ускоренно. И, с одной стороны, мне вот как сегодня со своим партнером по IT разговаривал, он говорит: "Слушай, код, конечно, невероятный находит баги в безопасности.

Александр Волчек00:13:16

И никогда в жизни наши программисты не могли находить такие баги и такие дыры вообще в безопасности, с одной стороны. С другой стороны, эти системы могут вам оставлять какие-то вещи, которые даже предсказать себе невозможно. Вообще мозг, мозг не то что не привык к этому, таких кейсов даже не существует, и мы их, эти кейсы можем не увидеть. Ну и, соответственно, устанавливаем антивирус. Этот антивирус разворачивался через инфраструктуру Amazon, и мне пришлось зайти в личный кабинет. Там в какой-то момент времени Codex не имел доступ к там, к разворачиванию.

Упоминаются: Кибербезопасность · Amazon
Александр Волчек00:13:48

Я сказал: "Слушайте, давайте я сам настрою". И я открыл личный кабинет и вижу, там написано: "Установите лимит". И там было, что расход около ста долларов. Мне казалось даже, что лимит там стоял долларов сто пятнадцать. Я сейчас не могу это сказать, потому что у меня экран-то не записывался. Я поставил расход триста пятьдесят долларов. Мне он предложил. Я хотел поставить лимит сто пятьдесят долларов, а он мне предложил поставить лимит триста пятьдесят долларов. Я такой: "Ну, окей".

Александр Волчек00:14:13

Поставил триста пятьдесят долларов лимит, вышел, и через десять минут, минут мне пришло письмо, что у меня потрачено тридцать семь тысяч долларов. Что важно, очень интересно, что сервис автоматически заблокировался. У меня автоматически остановилась доступность к серверам Amazon, в частности моих проектов. И у меня еще Amazon, мало того, закрыл полностью доступ ко всей статистике. То есть я даже не могу просмотреть, реально эти деньги тратились или нет. И пока Codex вместе с Claude со всем разбирались, то Codex сделал свои выводы. Не могу сказать, что сверхумные с точки зрения GPT-6 Astra.

Упоминаются: Amazon
Александр Волчек00:14:44

Кстати, как вам шесть Astra и как вам шесть один Sol? Я за последнюю неделю съел примерно, мне кажется, четыре миллиарда токенов в ChatGPT, что я хочу вам сейчас сказать, это очень много, да. Если говорить в денежном эквиваленте, это прямо очень серьезно. Но я понятно, что съедал многое резетами с учетом своего тарифа Pro и так далее. Ну, какими-то тоже токенами покупными. Но понятно, что я не потратил на эти четыре миллиарда, там, сотни тысяч долларов. Я не до конца мне нравится качество все же Astra и шесть один Sol, так же, как пять шесть Sol. Я помню, даже не Sol, пять шесть когда появилось, это, мне кажется, пять шесть Sol было.

Александр Волчек00:15:28

И был такой, как бы, это вышло, вышло в противовес Fable от Anthropic. У OpenAI вышел пять шесть Sol. И я помню вот эту тему, когда у меня, во-первых, тоже были дни, когда у меня там один день, что-то два с половиной миллиарда съело токенов. Задача ушла, даже задача на несколько дней ушла, так и не решила проблему. Кучу всякого кода нагородила. Вроде это все улучшили, но качество, конечно... Вот если сравнивать с Fable и с Opus пять пять в разных абсолютно задачах, конечно, пока Fable, Opus пять пять для меня выигрывает, да. Но все же.

Александр Волчек00:16:01

Вот Codex анализировал вот эту проблему с AWS. Claude анализировал проблему с AWS. Claude уверен, что AWS глючит, что у них неправильно работает система расходов, что были люди в Amazon, которые тратили пять долларов в день, а им система говорила, что они тратят по полтора миллиарда. Был такой кейс. Надеюсь, наша редакция найдет его здесь. Были, кстати, у вас разные такие кейсы, когда системы глючили, и вы из-за этого у вас была паника, и вы инфаркт могли получить. Оказалось, что все нормально. Это в Chase, по-моему, была девушка, кто в ToTheMoon рассказывал. Она утром проснулась, а у нее там на счету типа в минус миллиард.

Упоминаются: Amazon Web Services · Amazon · ToTheMoon
Александр Волчек00:16:35

И это, кстати, это такая очень специфическая история, да, когда вы просыпаетесь, а у вас минус на счету. Там, не знаю, лежало десять тысяч долларов, стало минус или лежало сто тысяч долларов и минус. В современном мире, там, где злоумышленники могут получить очень много доступа к вашим системам, к вашим счетам. Это, конечно, реально серьезная проблема, это прямо серьезная беда. И одно дело они получили доступ к финансовой системе, например, к банковской системе, кредитным картам. В Америке вы украли, украли кредитную карточку, вы этого не делали, вам банк все деньги вернет.

Упоминаются: США
Александр Волчек00:17:04

Другое дело, вас реально проскамили или взломали, или сделали что-то не то. И вот этот пример с AWS, он двойного некоторого характера.

Упоминаются: Amazon Web Services
00:17:13–00:22:05Кто отвечает за ошибки крупных технологических компаний?
Александр Волчек00:17:16

Он, с одной стороны, может быть, действительно, такие системы, как Amazon, очень серьезно ошибаются, у них такие глюки и такие большие проблемы. И здесь становится вопрос: как такая компания, как Amazon, которая стоит столько много денег, да, и с оценкой там в более миллиарда долларов, ой, более триллиона долларов, триллиона, да, извиняюсь за ошибку. Как вообще такая компания может делать такие вообще ошибки? Как это возможно? Ну, вливается новый функционал, что вы можете лимиты не посчитать.

Упоминаются: Amazon
Александр Волчек00:17:45

Как вообще могут быть компании, что этот функционал, он свежий и на весь кабинет якобы нельзя было лимита до этого поставить. Это как в Google рекламе нельзя поставить лимит. То есть как вообще такое происходит? Такое же происходит не просто так, это происходит из-за того, что людей хотят заскамить. Вот мы сейчас покажем вам прикольный пример. Даже мне сегодня мой друг прислал, как сейчас в Нью-Йорке вводят новое законодательство для скамеров, которые не дают подписку отменить.

Александр Волчек00:18:10

И там ролик написано, как он отменяет подписку и хочет отменить. Вот этот ролик очень поучительный, да? Посмотрите ролик. И он очень поучительный, в частности того, как он пытается кликнуть на эти баннеры, потому что мы с вами знаем очень часто, что подписку сделал, потом эту подписку не можешь отменить. И это, это уже скам, да? Я уже не говорю про все остальное, про базы данных телефонных номеров, ваших персональных данных, постоянно где-то какие-то утечки. Если утечка произошла, то ваши данные распространились, и они будут где-то храниться. Постоянно какие-то сканы разных сетей. Ты даже не понимаешь, какая сеть что просканила, да?

Александр Волчек00:19:37

Сейчас, получается, опасно к любой Wi-Fi сети подключаться где угодно, да? Или вообще везде свой компьютер подключать, потому что ты никогда не знаешь, может быть, в этот момент времени это пространство или эта компания ее взломали. Поэтому, конечно, у меня первый вопрос к Amazon, если это их ошибка на тридцать семь тысяч долларов, а не моя личная ошибка, об этом мы узнаем еще. У меня первый вопрос, конечно, как они вообще такое допускают? И мало того, они же еще дальше проект блокируют.

Упоминаются: Amazon
Александр Волчек00:20:06

И у них, конечно, в офертах все написано, что они несут там никакие убытки, что у них нет никаких проблем. Но это, конечно, вот мне кажется, что все эти компании, конечно, надо очень серьезно наказывать за качество и наказывать, наверное, их сотрудников с точки зрения того, как они работают, что они делают. Во-первых, эти сервисы, они бесконечно сложные с точки зрения настроек, с точки зрения подходов к разработке. И я очень рад появлению новых средств искусственного интеллекта, которые будут всю вот эту ерунду и безобразие упрощать, да? И именно упрощать.

Александр Волчек00:20:38

Понятно, что Amazon будет зарабатывать, как и зарабатывал на серверах огромное количество денег, потому что мощности людям нужны. Так же ровно, как я туда зашел, мне же нужны были мощности на этих триста двадцать серверов, на десять минут, которые открылись для того, чтобы преобразовать мне полностью все. Но, с другой стороны, получается, что при современной действительности мы с вами знаем, сколько токены стоят, сколько в мире людей вообще слило деньги и сливает деньги. Многие компании даже об этом не знают, какое количество в этих компаниях происходит.

Упоминаются: Amazon
Александр Волчек00:21:08

Я хочу вам сказать, что для кого-то для вас покажутся какими-то баснословными деньгами даже то, что там в рекламе сто тридцать тысяч долларов слилось. Но поверьте, когда у компании инвестиции в сотни миллионов долларов или когда сотрудники имеют право тратить в год на токены миллионы долларов, то кто вообще проверяет, как эти токены тратили? На самом деле. Как на DevDay, вот я был там на одной сессии закрытой и, может быть, если она и транслировалась, я не знаю. Там один из сотрудников говорит, что ну, мы там посчитали расход, вы будете тратить там от десяти до тридцати или, там, двадцать или сколько долларов в час на одну сессию.

Александр Волчек00:21:44

Это, это безумные деньги с точки зрения базово людей в мире, которые живут и которые хотят что-то разрабатывать и разрабатывать с точки зрения искусственного интеллекта. Особенно если вы не даете возможность легко поставить лимиты, легко что-то отключить, легко предупредить, легко ограничить системы. То есть что будет происходить, если такого нету. Вторая история, вторая история, которая существует, это история, конечно, того, а что если действительно я потратил тридцать семь тысяч долларов, в данном случае потратил не я, а потратил Claude Code.

00:22:05–00:23:45Если ИИ действительно потратил деньги: где проходит граница ответственности
Александр Волчек00:22:15

То есть что если действительно Claude Code совершил ошибки и, получив доступ вот к системе, он каким-то образом смог обойти те лимиты, которые стояли, изменить эти лимиты, которые стояли, получить какой-то дополнительный доступ, каким-то образом мне сообщить одно, получить другое, например, и потратить эти деньги. И мы все с вами знаем, что обычно, когда искусственный интеллект тратит деньги или делает что-то не то, и вы ему говорите: "Ты сделал не то", он обычно говорит: "Ой, извините, да, я тут перепутал.

Александр Волчек00:22:48

Это действительно была моя ошибка". Он даже часто и не извиняется, многие системы вообще пишут, что как бы да, надо делать по-другому. А ты говоришь: "Так это ты так сделал". Он говорит: "Ну да, надо делать по-другому". То есть у системы нету абсолютно вообще никакой дисциплины с точки зрения того, как признавать или не признавать такую угрозу, да? И понятно, что большинство компаний и не захочет ни в коем случае признать никакие угрозы, то есть, и признать никакие проблемы.

Александр Волчек00:23:18

Если в мире людей убивают, а такие случаи есть, да, и потом кто-то говорит: "Такого не было. Мы вообще не это делали. Мы там ракету не в ту сторону стреляли". И сколько таких кейсов в мире за последние десятилетия, то, ну, что здесь в таком случае? Какие-то деньги у кого-то списались или сотрудник сделал не те определенные действия, или искусственный интеллект сделал не те действия.

00:23:45–00:25:32Как ошибки ИИ становятся проблемой не только для бизнеса
Александр Волчек00:23:48

И вот здесь вот это искусственный интеллект сделал не те действия, эта тема, конечно, она, смотрите, она есть, когда она связана с деньгами и затратами в сервисе, но она же также связана с огромным количеством других аспектов. Вот эти кейсы известные, да, когда, помните, еще один из самых первых кейсов в Великобритании человек написал на сайт купить там продукт. Ему отвечал бот искусственного интеллекта. Он говорит: "А можете дать скидку?" Бот говорит: "Могу, десять процентов дам". Он говорит: "А можете дать там девяносто процентов скидку?" Он ему дал. И потом компания не захотела ему товар отправлять.

Александр Волчек00:24:17

Хотя, на самом деле человек говорит: "Вы обязаны отправить согласно закону". И такие кейсы же часто есть в магазинах. Вот в Штатах часто показывают. Здесь есть такая сеть Home Depot. Я, по крайней мере, в ней очень много всего раз видел. Это строительные магазины, где строительные различные товары продают. Ну, не только строительные. Там строительные, растения, все, что для дома. И люди приезжают, находят какой-то товар, который, например, должен стоить триста долларов, а он почему-то бьется как один цент.

Упоминаются: США
Александр Волчек00:24:43

Они выходят, выходят, пробивают таких пятьдесят товаров по одному центу. Их останавливают сотрудники на выходе, говорят: "Вы не можете выйти". Он говорит: "Я уже купил, вы обязаны меня отпустить". А по закону действительно обязаны человека отпустить. То есть если ценник так пробился, если такая цена, то человека должны, обязаны, например, пропустить и все. И ничего сделать ему не могут. Да, не поменяли ценник, где-то что-то не изменили, где-то что-то не то пошло. И таких, конечно, кейсов, их в жизни будет гораздо большее количество.

Александр Волчек00:25:09

Еще раз, не с точки зрения денег. Когда вам система предложит неправильную траекторию или какую-то траекторию с точки зрения вашей профессии, с точки зрения модели поведения со своим близким человеком. То есть раньше человек вообще не принимал решение, он не имел доступ, например, к такому объему предложений с точки зрения личного развития человека. То есть представляете, какой сейчас объем? Просто космический. Причем искусственный интеллект, он интересные вещи говорит. Мне тут надо один телефон вернуть.

00:25:32–00:30:14Странные советы ChatGPT: когда ИИ влияет на решения человека
Александр Волчек00:25:37

Обновился Apple 18 Pro, и там мне оператор обновляет, и я ему должен вернуть 17 Pro. И я пишу: "А сколько у меня еще дней есть вернуть Доту?" OpenAI Dots. Он мне пишет: "У вас есть время вернуть до 18 сентября, но я вам рекомендую вернуть сегодня". Я говорю: "А почему сегодня?" Ну вот он мне говорит: "Я вам рекомендую вернуть сегодня, четырнадцатого сентября". Мне сегодня с утра говорит. Я говорю: "А почему сегодня?" Он мне говорит: "Ну, на всякий случай". Я говорю: "Какой случай?" Я захожу в поддержку в Verizon, это оператор сотовой связи в США. Пишу ему: "До какого числа я могу вернуть телефон?"

Упоминаются: США
Александр Волчек00:26:11

Мне автоматически приходит обращение: "Вы можете вернуть ровно через месяц после получения предыдущего телефона, то есть ровно 18 сентября". Я ему присылаю сообщение, он мне пишет, смотрите: "Да, действительно, можно вернуть восемнадцатого числа, но я вам рекомендую не ждать и вернуть хотя бы за два дня". И ты вот сидишь и думаешь а это что за ерунда? Хотя бы за два дня. Я тут своей маме билеты смотрел в Америку сейчас, и она летит из Минска, и у нее там пересадки достаточно непростые, периодически, постоянно есть.

Упоминаются: США
Александр Волчек00:26:40

И он, представьте, говорит: "Для того, что…". Причем это говорит дорогая система, да? Это говорит ChatGPT 6 Pro. Смотрите, это, ну, как бы высший пилотаж, по сути, искусственного интеллекта, рассуждения, его качества рассуждений с точки зрения таких вопросов. Он говорит: "Когда вы прилетели в аэропорт, например, в Стамбуле, для того, чтобы выйти, получить чемодан и сдать его заново, между, окно между рейсами должно быть шесть часов. Ты такой: "Каких шесть часов?" Не, ну понятно, что может произойти все что угодно. И понятно, что в аэропорту может быть очередь.

Александр Волчек00:27:15

И понятно, что в аэропорту, аэропорт могут закрыть. И понятно, что может погода испортиться. И понятно, что может вулкан где-то взорваться. Я не знаю, что может произойти, чтобы шесть часов, значит, тебе не хватило выйти, получить чемодан в этом же самом аэропорту, сдать его, вернуться назад. Мало того, у тебя регистрация на следующий рейс открывается за три часа. То есть ты даже сдать не можешь следующий, следующий чемодан. То есть ты что, три часа выходить будешь и чемодан получать? И он рекомендует, он все время, если вот в поездках вы заметите, он всегда говорит, что надо приезжать за три часа.

Александр Волчек00:27:47

То есть авиакомпании же рекомендуют приезжать за три часа. Понятно, почему они рекомендуют. Они рекомендуют, потому что, чтобы потом ни с кем не связываться. Сказали: "Вы там нам порекомендовали за полтора часа. Вот мы приехали среднее время, мы не успели". Или что-то еще. За три приехали. Вот мы за три открылись. И, значит, стойте в очереди и делайте, что хотите. Но в действительности же это не так. Потому что если логически подумать, то ты имеешь право сдать свой чемодан за сорок минут, за сорок минут до отправления.

Александр Волчек00:28:16

Там, или, ну, там, в разных аэропортах по-разному бывает, там час, не в разных аэропортах, на рейсах, то ты же можешь приехать ровно за час и подойти к стойке. У тебя на стойке обязаны принять твой чемодан, даже если там очередь есть, у тебя в любом случае его примут. В этом логика, потому что в этой очереди, в этой же стойке могут стоять больше. Понятно, что есть другие аэропорты, другие в мире, где, например, есть, не знаю, Израиль. Когда вы вылетаете из Израиля, надо приехать действительно заранее, потому что на входе в аэропорт есть свое security, не авиакомпании.

Александр Волчек00:28:46

В таких ситуациях окей. Но в ситуации, где ты приезжаешь в аэропорт, в котором нет вообще никакого security, ты сразу подходишь, чемодан сдаешь, например. Вот в аэропортах в США так это работает, да? Вообще никаких security нету на входе в аэропорт. Ты просто подходишь к стойке, сдаешь чемодан. То зачем тогда это? Зачем эти действия нужны? Я уже не говорю, если ты находишься внутри, внутри между терминалом. Я уже не говорю о том, что если летит человек взрослый и у него сопровождение, у этого человека в аэропорту, его сопровождают, то там сделают все, конечно же, чтобы помочь человеку.

Упоминаются: США
Александр Волчек00:29:14

Какие шесть часов? То есть система отвечает и настроена неправильно. То есть она дает рекомендацию очень странную. И вам в жизни могут дать такую рекомендацию с точки зрения вашего личного развития. Есть, когда система может сделать ошибку, и вы банкротом станете, да? Ну, вот как с, как, например, с такими серверами. То есть, вот эта же история очень серьезная, да? Потому что для многих людей, например, получить там тридцать семь тысяч долларов случайного счета, например, в системе, в небольшом проекте, ну все, человек может стать банкротом на всю жизнь в определенной стране.

Александр Волчек00:29:49

Это как для определенной компании получить, например, счет, не знаю, на десять миллионов долларов. Потом выставляется счет, и ты ничего сделать не можешь. И у вас не было ограничений. Например, вы не можете на сотрудника переложить ответственность, потому что вы сотруднику разрешили это использовать и так далее. А даже если вы сотруднику не разрешили использовать, то вы что, сотрудника потом эти деньги будете доставать? Как вы с него достанете? Он все равно станет банкротом.

Александр Волчек00:30:11

Таких цепочек очень много. Понятно, что эти цепочки уже присутствовали в мире, когда так люди случайно тратили деньги, такие вещи происходили.

00:30:14–00:33:22Влияние ИИ гораздо масштабнее привычных технологических изменений
Александр Волчек00:30:18

Еще раз, очень интересно здесь в выпуске посмотреть ваши кейсы, что у вас за кейсы, какие у вас были истории, что такого происходило. Потому что, конечно, тема невероятно важная. И важно, еще раз, не из-за того, что искусственный интеллект в какой-то вашей системе токены спишет. Хотя я всем критически рекомендую ставить, следить за этими ограничениями, да. Мы часто не знаем даже, где, в каких системах что может произойти. Кажется, в $10 в системе быть не может, а вот оно может произойти все что угодно, да.

Александр Волчек00:30:48

И, ну, понятно, не то что мне интересно, что будет с тридцатью семью тысячами долларов, для меня это важно. Но посмотрим, что действительно произойдет с этой историей. Потому что когда у тебя аккаунту двенадцать дней в системе и ей система, например, дала потратить столько денег, это большой вопрос. Но Amazon вроде как ограничивает еще раз такие траты. Там тоже есть понятие тиеров с точки зрения доступа. Я, по сути, не мог создавать больше, чем одновременно, по-моему, там, тридцать два или сколько серверов и так далее.

Упоминаются: Amazon
Александр Волчек00:31:17

Хотя похожих кейсов вот именно с точки зрения моего я в интернете, по крайней мере, ИИ, искусственный интеллект, в интернете прямо как корректно, конкретно таких кейсов не нашел. Но мы, мы с вами о них увидим и узнаем. И мы здесь приходим к некоторой дилемме, к очень интересной, фундаментальной дилемме. Еще раз, почему я с самого начала сказал, что все говорят все время про катастрофу искусственного интеллекта, как заразим всю планету, экология, значит, профессии все исчезнут, искусственный интеллект всех уничтожит.

Александр Волчек00:31:51

Но самая важная вещь, которую на сегодняшний день, по сути, вообще мало людей обращает внимание. Ну, вот так вот базово люди не ощущают это, что искусственный интеллект — это не блокчейн и это даже не интернет, не появление интернета. Это то, что сейчас… И кто-то недавно в чате написал: "Называйте это не искусственным интеллектом, называйте это лингвистическими моделями", там, например. То, как сейчас выглядит эта система и то, что они могут сделать, — это в мире появился вообще другой инструментарий.

Александр Волчек00:32:27

Он, конечно, не соизмерим с тем, что есть звезды или планеты, например, или что есть Луна или Солнце, которые невероятно сильно влияют на Землю. Но влияние на сегодняшний день искусственного интеллекта гораздо больше, чем влияние комет вокруг пролетающих, да. То есть влияние искусственного интеллекта на сегодняшний день, на самом деле гораздо больше, чем влияние катаклизмов разных, которые в мире происходят с точки зрения наводнений, землетрясений. Это мое мнение, конечно. Здесь вы расскажите, как вы это видите. То есть то, что сейчас происходит, — это гораздо более серьезное влияние, которое никто не сможет никак рассчитать, никак оценить, никак не посмотреть и никак изучить.

Александр Волчек00:33:04

Ну и ставьте ставки, что произошло с моими тридцатью семью тысячами долларов. Будем это видеть. Увидимся с вами в новых выпусках, и скоро у нас будет выпуск вместе с Максимом Григорьевым на следующей неделе.