Моделите с изкуствен интелект (AI) и чатботове вече са си проправили път в реалния свят, помагайки на хората да се справят с ежедневните проблеми по-бързо и по-ефективно. Напоследък учените също проучват техния потенциал за подпомагане на хората при творчески задачи, като

измисляне на интересни дизайни, стихове и дори рецепти.

Двама изследователи от PeopleTec, технологична компания, базирана в Алабама, разработиха изчислителен модел, който може да създаде сложни рецепти. Те съдържат съставки, които потребителите имат на разположение, след като анализират изображения на това, което има в хладилника им. Техният подход, представен в статия в arXiv, се основава на модели, които

могат да идентифицират обекти в изображения и GPT-4, известният чат бот, разработен от OpenAI.

„През 2020 г. група от нашите изследователи на AI имаше парти игра, в която един отбор предлагаше списък със съставки. Другият използваше езиков модел, за да измисли оригинална рецепта“, Дейвид Ноевър, един от изследователите, провели проучването , каза пред Tech Xplore.

„Тъй като съставките ставаха по-интересни, рецептите ставаха все по-лоши и накрая се изродиха глупости като „Рецепта за унгарска кожа за обувки, сервиране на 2 за закуска“ – общо взето, пълни безсмислици. Но от 2020 г. и образът, и езикът на моделите са станали толкова добри, че сега наистина бихме могли да създадем

приложение, което да реши предизвикателството на практичния готвач,

просто погледнете в хладилника си, имайте някои основни идеи за това какво искате да сготвите днес и генерирайте страхотна нова рецепта.“

Комбинацията от голям езиков модел и детектор на изображения може да преобразува всеки списък в пълна рецепта с инструкции и размер на порциите.

Ключова цел на скорошната работа на Ноевър и неговата колега Саманта Елизабет Милър Ноевър беше да подчертаят последните постижения в областта на AI по практичен и полезен начин. За да постигнат генериране на рецепти от изображения, те специално са използвали интерфейси за приложно програмиране (API) на модели за анализ на изображения, както и генератора на текст в основата на ChatGPT.

„Основната идея зад нашата работа беше да комбинираме

сурова храна и съставки на рецептата с помощта на анализ на изображения,

след което да поискаме от мощен езиков модел да изгради правдоподобна рецепта за готвене, включително очакваното заглавие, пропорция и стъпки“, обясни Ноевър.

„Един от интересните обрати на този подход на езиково изображение е да се ограничи генераторът на стил на рецепта по различни и често сложни начини. Те са базирани да речем на

минимизиране на цената на храната, промяна на размера на порциите или приспособяване към диетични ограничения.

Трудните части на това наистина зависят от това колко добър е езиковият модел. Той направи огромен пробив само през последните няколко месеца.“

Изследователите оцениха техния изчислителен подход в серия от тестове, подавайки

повече от 2000 изображения на отворени хладилници с различни съставки вътре в тях.

Използвайки тези изображения, техният модел генерира книга с рецепти от 100 страници с интересни и уникални рецепти. В тях се включват 30-те най-добри съставки, изобразени във входните изображения.

„Няколко изследователи ни помогнаха, като направиха снимки на 30-те най-добри артикула за намиране в хладилника“, каза Ноевър. „Ние обучихме нашите собствени модели на изображения, за да върнем списък с тези в различни настройки. Новата част от нашата работа беше непрекъснато

да правим рецептата подходяща за различни ограничения.

Разбира се, има милиарди комбинации, налични дори за малък списък от съставки. Но поставянето на сезонна наличност, остатъци, размери на сервиране, разходи и диетични ограничения наистина накараха проблема и решението да се появи.“

В бъдеще изчислителният подход, въведен от Ноевър, може да бъде интегриран в

приложение за смартфон или други софтуерни инструменти,

предназначени да вдъхновяват както любители, така и опитни готвачи. Едновременно с това може да вдъхнови други екипи по света да прилагат LLMs и други AI модели за задачи за генериране на рецепти или други творчески проблеми.