Как выбрать модель нейросети

Модель нейросети — это цифровой инструмент, который уже прошел обучение и может решить определенную задачу: сгенерировать текст, картинку, аудио или видео, распознать объекты на фото или сымитировать голос.

Что именно может сгенерировать модель нейросети и как качественно это сделать определяют специалисты LLM, которые занимаются обучением этих моделей. Чем больше времени модель обучалась и чем лучше были подобраны материалы для обучения, тем лучше результат она сможет выдать.

Сейчас все модели нейросетей уже обучаются на своих же сгенерированных идеальных данных — это ускоряет процесс обучения модели.

Все модели нейросетей принимают что-то на вход (текст + файлы: изображение, аудио, видео) и выдают что-то на выходе (текст, изображение, аудио или видео файлы).

На платформе Mitup AI есть нейросети только от крупных провайдеров, которые генерируют результаты на высоком уровне. Мы не добавляем нейросети или их модели, которые не предоставляют качественный результат.

Принцип выбора модели

1. Выберите в чате тип генерации. После выбора типа генерации установится первая доступная модель по выбранному типу генерации.
2. Выберите модель. Каждая модель может поддерживать параметры в зависимости от типа генерации. Вы увидите доступные значения параметров после выбора модели.
3. Укажите параметры генерации. Параметры по умолчанию устанавливаются из ранее выбранных значений, если, конечно, у модели есть поддержка этого параметра.

Выбор типа генерации влияет на список моделей, которые будут доступны для выбора. А выбор модели влияет на доступность параметров генерации.

Все выбранные значения в настройках чата по умолчанию сохраняются в локальное хранилище браузера. То есть, выбранный тип генерации, модель и параметры генерации будут сохранены и установлены после повторной загрузки чата.

На что обращать внимание при выборе модели

Все модели нейросети обладают свойствами:

• Провайдер. Поставщик или просто разработчик нейросети.
• Модальности. Контент, который модель может принимать на вход (запрос от пользователя) и то что может выдать на выходе (результат генерации).
• Цены. Для каждой модальности у модели есть цена (на вход и на выход). Цены на вход и выход могут отличаться, т.к. каждая модель по-разному их обрабатывает.
• Файлы. Каждая нейросеть имеет свои ограничения на оработку входных файлов.

Основными критерями для выбора модели является: доступные модальности, цена и возможность обработки нужных файлов для решения конкретной задачи.

Как формировать запрос к нейросети

Контент на ввод (запрос пользователя) может быть представлен в виде текста и плюсом можно передать какие-то файлы: изображение, аудио или видео.

Текстовая часть запроса является обязательной, т.к. нужно дать нейросети информацию, что нужно сделать. Вы можете отправить только текст или добавить файлы для их обработки и в текстовой части запроса указать, что нужно сделать с переданными файлами. Файлы можно будет добавить только если сама модель поддерживает их обработку.

Каждая нейросеть имеет свои ограничения по файлам. Какие-то нейросети не могут обработать видео, а какие-то могут. Это тесно связано с модальностями, которые поддерживает модель на вход в запросе пользователя.

Учитывайте, что модель не сможет сделать то, что не поддерживает на выходе по модальностям. Например, модель не сможет сгенерировать видео, если на выходе поддерживает только текст и картинку.. Точно также работает по модальностям на входе (в запросе пользователя) — вы получите ошибку, если модель не поддерживает обработку нужных файлов на входе.

Полный список моделей, поддержке их модальностей и цены можно посмотреть на страницы Модели.

Формирование цены

Цена на входе формируется на основании ресурсов, которые требуются для обработки входных данных в запросе пользователя. Например, если пользователь отправил текст, то текст нужно преобразовать в вид понятный для нейросети — т.е. токенизировать его. А если пользователь передал еще и файл-картинку, то её нужно отдельно распознать, разложить на пиксели и передать в нейросеть для обработки.

Обработка входных данных происходит на стороне нейросети после отправки запроса.

Цена на выходе же берется за ресурсы, которые требуются нейросети для осуществления самой генерации.

Именно поэтому есть цена на ввод (запрос пользователя) и есть отдельная цена на вывод (генерация модели нейросети).

Мультимодальные модели

Некоторые модели могут принимать сразу несколько типов контента — их называют мультимодальными моделями.

Например, в запросе к мультимодальной модели можно передать текст + картинку, а она может на основании этого сгенерировать картинку.

Мультимодальные модели — это модели, которые могут обработать несколько типов контента в запросе пользователя.

Сейчас мультимодальные модели — это тренд. По нашим прогнозам все модели в будущем будут являться таковыми.