СоветПравило без срока
Не верьте рейтингам, обзорам и «экспертам» — проверяйте ИИ сами на своих задачах
31 выпуск за 12 месяцев · всего 42 · впервые в июле 2024
Бенчмарки у каждой компании свои, и каждую неделю кто-то «побеждает». Блогеры и «эксперты» часто сами толком не пользуются ИИ и не знают ваших процессов. Поэтому я не сужу о системе, пока сам её не купил и не прогнал на своих задачах.
Новую модель оценивайте не по одному вопросу, а неделями, на реальных задачах. И ко всем громким заявлениям и «инновациям» относитесь аккуратно, пока не проверили сами.
Правило без срока. Сам так и делаю: покупаю каждую новую систему и гоняю её на своих задачах (№078, октябрь 2025).
С чего начать
ЛюдямСделать следом
Прежде чем верить обзору или рейтингу, прогоните модель неделю на своих задачах.
БизнесуУчитывать в планах
Не покупайте ИИ-решение по демо и чужим рейтингам: проверьте его на своих процессах и данных.
Когда я это говорил
12 мес.
апр 202420252026Ноябрь 2026: 1 из 1 выпуска — №189
Каждая клетка — месяц: доля выпусков месяца, где я это говорю. Нажмите на клетку.
Цитаты
«Откуда они знают? Потому что они не знают твои процессы. Дело в том, что надо знать твои процессы, твою систему, что ты будешь делать, что ты за человек, как ты будешь поддерживать.»
«И как можно вообще сравнивать системы между собой с точки зрения токенов, если вообще надо в целом сравнивать конечный результат? Это очевидно. Человек себе задал вопрос, результат достигнут или нет.»
«Седьмое правило: вы не должны верить рейтингам, обзорам и разным экспертам. Неважно, что это за эксперт. Это Александр Волчек, какой-то эксперт, или это Сэм Альтман, какой-то эксперт, или это Илон Маск, какой-то эксперт, да?»
«Смотрите, важный аспект, когда вы работаете в таких системах, это количество тестов. Вы должны сделать сотни различных задач, даже самых странных задач, для того, чтобы разобраться, что работает лучше или что работает хуже.»