Вот как можно опробовать новый фоторедактор Apple с искусственным интеллектом

Появился новый фоторедактор от Apple, если вы знаете, где его искать. iPhone Kings объединились с исследователями из Калифорнийского университета в Санта-Барбаре, чтобы создать инструмент, позволяющий редактировать фотографии и изображения с помощью текстовых инструкций. У него нет официального релиза, но исследователи размещают демо-версию, которую вы можете попробовать сами, и которая была замечена впервые. Экстремальные технологии.

Проект называется «Управляемое редактирование изображений мультимодальной большой языковой модели» (MGIE). Сегодня на рынке представлено множество программ для редактирования фотографий с использованием искусственного интеллекта. Photoshop теперь поставляется со встроенными инструментами искусственного интеллекта, а другие, такие как DALL-E от OpenAI, позволяют редактировать изображения, а также создавать их из цельной ткани. Однако, если вы пытались использовать их раньше, вы знаете, что это может немного разочаровать. Во многих случаях ИИ с трудом понимает, что именно вы ищете.

Инновация MGIE добавляет еще один уровень интерпретации ИИ. Когда вы сообщаете ИИ, что вы хотите увидеть, MGIE сначала использует текстовый ИИ, чтобы сделать ваши инструкции более четкими и наглядными. «Результаты экспериментов показывают, что выразительные инструкции необходимы для редактирования изображений на основе инструкций», — говорят исследователи в статье. бумага Опубликовано на arXiv. «MGIE может привести к значительному улучшению».

Apple опубликовала версию программного обеспечения с открытым исходным кодом на github. Если вы сообразительны, вы можете запустить копию MGIE самостоятельно, но исследователи установили этот инструмент на… Обнимание лица. Когда его использует много людей, он работает немного медленно, но это интересный опыт.

Технологические гиганты, такие как Apple, тратят миллиарды долларов на проекты, которые никто никогда не увидит, поэтому вполне возможно, что так называемый инструмент MGIE никогда не получит официального релиза. Apple не сразу ответила на запрос о комментариях.

Мы попробовали это здесь, в офисе Gizmodo. Я загрузил фотографию моего коллеги и ближайшего советника Кайла Барра в странных солнцезащитных очках, которую я снял на Netflix в… Выставка потребительской электроники в этом году. Я сказал Amnesty International: «Этот человек стоит в пустыне». Прежде чем создать изображение, MGIE экстраполирует следующее:

«Мужчина носит металлический шлем и стоит в пустыне. Окружающая среда бесплодна и бесплодна, с песчаными дюнами, простирающимися настолько далеко, насколько может видеть глаз».

Поэкспериментировав с этим инструментом гораздо дольше, чем следовало бы, стало ясно, что он подвержен многим из тех же ограничений, что и любой другой генератор изображений AI. Часто результаты оказываются странными и совсем не похожими на то, что вы заказали. Но в некоторых случаях он проделал впечатляющую работу, и в защиту программного обеспечения ИИ лучше справлялся со знакомыми темами. «Знакомые» — это не то, что вы бы назвали солнцезащитными очками Кайла.