Как собрать собственную визуально-языковую модель с нуля, имея ограниченный бюджет и одну арендованную GPU? Автор эксперимента взял небольшую языковую модель, подключил к ней визуальный энкодер и прошёл весь путь обучения VLM – от настройки архитектуры до оценки качества ответов. В статье – разбор решений, ошибки первых запусков и результаты модели на 628 млн параметров, которая научилась описывать изображения примерно за $200. Смотреть результат
Читать далееAI-агенты
[Перевод] Я обучил собственную визуально-языковую модель меньше чем на 1 млрд параметров
![Обложка: [Перевод] Я обучил собственную визуально-языковую модель меньше чем на 1 млрд параметров](/blog-media/2065d008c7acfcd04e25098908ea835c093007ceee0bd735e7631154985cc85a.jpg)

