Marqo-FashionCLIP и Marqo-FashionSigLIP: модели встраивания для электронной коммерции и розничной торговли
При разработке алгоритмов рекомендаций и поиска в сфере моды использованы мультимодальные методики, объединяющие текстовые и визуальные данные для повышения точности и персонализации. Система способна оценивать визуальные и текстовые описания одежды, что обеспечивает более точные результаты поиска и персонализированные рекомендации.
Представлены две новые мультимодальные модели Margo для поиска и рекомендаций в сфере моды: Marqo-FashionCLIP и Marqo-FashionSigLIP. Они генерируют встраивания для текста и изображений и основаны на обширных метаданных более чем миллиона модных товаров, включая материалы, цвета, стили, ключевые слова и описания.
Для обучения моделей использовались две базовые модели, ViT-B-16-laion и ViT-B-16-SigLIP-webli, с последующим их дообучением с использованием GCL. Многочастная потеря была оптимизирована для ключевых слов, категорий, деталей, цветов, материалов и подробных описаний, что обеспечило значительное превосходство по сравнению с конвенциональной потерей InfoNCE при контрастном обучении и дообучении.
Исследователи использовали семь публичных наборов данных о моде для оценки моделей, выявив их превосходство в различных запросах и длинах. Marqo-FashionCLIP и Marqo-FashionSigLIP демонстрируют улучшенную производительность по сравнению с существующими моделями и обеспечивают улучшение времени вывода на 10%.
Релиз и использование моделей
Marqo-FashionCLIP и Marqo-FashionSigLIP доступны для использования под лицензией Apache 2.0. Их стандартная реализация предоставляется для загрузки на Hugging Face и использования в любом месте.
Рекомендации по внедрению ИИ
Анализируйте, как ИИ может изменить вашу работу, определите возможные области автоматизации и подберите подходящее решение. Внедряйте ИИ постепенно, начиная с малых проектов, и анализируйте результаты для расширения автоматизации на основе полученного опыта.
Информация и контакты
Для получения советов по внедрению ИИ пишите на Telegram.
Ознакомьтесь с ИИ ассистентом в продажах здесь, который поможет в улучшении работы отдела продаж и облегчит общение с клиентами.
