Пару недель назад по Telegram-каналам о нейросетях гулял пост, где юзер пишет «создай няшный калькулятор», а нейронка с первого раза генерирует рабочую программу, да еще и сразу показывает результат работы в отдельном окне. Называлась эта нейронка Mistral AI. Мы решили воспроизвести этот кейс, а заодно изучить Mistral AI чуть подробнее. Но сначала пара слов о том, что это вообще такое.
Что такое Mistral AI
Mistral AI — это французский ИИ-стартап, реализованный в виде модульной нейросети с исходным кодом. Модульность обеспечивается наличием двух типов модели — общей и оптимизированной. И каждая из них, в свою очередь, имеет еще по три версии. Разработчики Mistral AI — бывшие сотрудники Google DeepMind и Meta* Platforms, занимавшиеся ИИ-направлением.
Основное предназначение Mistral AI — интеграция в программные решения компаний, помощь с разработкой кода, аналитика и ответы на вопросы пользователей. Обучалась нейросеть на огромном пуле сайтов и книг, созданных до 2021 года. Также в последних версиях Mistral AI появилась возможность генерации и редактирования графических изображений.
Прочие характеристики Mistral AI
Понимание запроса на разных языках.
Корректная интерпретация контекста запроса.
Генерация изображений по тексту.
Анализ загруженных изображений.
Генерация кода.
Поиск закономерностей.
Обучение и объяснение сложных концепций простыми словами.
Взаимодействие по API.
Кавайный калькулятор
Что ж, раз уж какая-никакая инфа о том, что это за нейронка, у нас есть, перейдем к воспроизведению кейса из Telegram-каналов. В ролике из Телеги юзер пишет промпт «Generate me a kawaii calculator in canvas» и тут же получает готовый результат.
Дополняется видос восторженным текстом. Прям магия какая-то, да? Но давайте попробуем воспроизвести этот кейс. Тот факт, что калькулятор на canvas, — это такой себе пример кодинга, пока проигнорируем.
Сразу оговоримся, изначально мы вводили текст на русском. И да — Mistral AI его понял и даже создал кавайный калькулятор. Правда, создал он его в виде кода отдельных файлов, а не в боковом окне, как на видео. Ну и сам калькулятор не то чтобы работал — кнопки математических действий обрабатывались некорректно. Но это было на русском и без аккаунта. Попробуем зарегистрироваться и написать промпт на инглише — как в кейсе из ролика.
Внезапно ИИ перестал генерировать даже код для файлов. Теперь он просто сливается с темы, говоря о том, что у него таких способностей нет. Выходим из аккаунта и пробуем еще раз.
Теперь ИИ все так же пишет, что не умеет это делать, но все же генерирует код для файлов. Занимательно то, что при первых попытках (до регистрации) он не писал о том, что так не умеет, а просто делал — пусть и не до конца рабочий, но калькулятор. Сейчас же он пишет вот это:
Что ж, подставляем код в файлы и открываем все это дело. Получаем действительно кавайный калькулятор. Однако он снова не работает.
Все дело в том, что сгенерированный нейронкой скрипт не умеет корректно обновлять в своей памяти текущее значение. Так, например, при попытке сделать 2 + 2 получается 24. Происходит это потому, что бот запоминает 2, реагирует на + и запоминает 2 еще раз. Но при этом вместо 2 + 2 у нас получается 2, еще раз 2 (не математическое действие, а цифра) и дальше еще + 2. Что в результате и дает 24.
Несколько десятков уточнений задачи и описания проблем ни к чему не привели. Удалось разве что подправить каскадные таблицы стилей, чтоб кнопки с цифрами располагались в привычном формате 3 х 3.
Означает ли это, что Mistral AI плохая нейросеть? Учитывая то, какое количество людей и компаний ей пользуется — явно нет. Нейронка действительно умеет генерировать код. Однако те кейсы, с помощью которых ее пиарили, несостоятельны. Во всяком случае, у нас не получилось воспроизвести ни один из них.
А, ну и вот еще: чтобы было понятнее, что же происходило в видеоролике…
Подводя итоги
Не стоит верить роликам из пабликов — ваш Кэп. Mistral AI — действительно мощная нейронка, но точно не «волшебная кнопка», которая все сделает сама, да еще и сразу покажет результат. Пока что подобное невозможно технически — хотя бы потому, что все происходит через браузер.
Нейросети — отличное решение для упрощения жизни тем, кто разбирается в какой-либо теме. Но они не сделают за вас всю работу. А PR есть PR. Обсуждая, пусть и с негодованием, что происходящее в каком-то ролике — фейк, люди, так или иначе, рассказывают о продвигаемом продукте.
Можно ли использовать Mistral AI в арбитраже? Однозначно да. Способен ли он составить конкуренцию ChatGPT? Возможно, в будущем, но на текущий момент — нет. И все же у нейронки Mistra есть потенциал — советуем периодически тестить обновления. Кто знает, какие фичи появятся в будущем.
* Запрещенная в России организация
