Forwarded from Unsolicited Disclosures
Вышеупомянутая модель CLIP может быть использована в сочетании с генеративными моделями (GANs). В первом сценарии можно сгенерировать большое количество изображений и просто ранжировать их с помощью CLIP, отобрав топовые результаты по категориям. Попробуйте, например, сделать это с StyleGAN2 FFHQ, и тремя категорями ("a blonde", "a redhead", "a brunette"). А потом попрбуйте ("a cute girl", "an ordinary person") - это тоже работает!
Второй сценарий основан на том, что "функция сходства" CLIP является дифференцируемой относительно параметров GAN, и мы можем получить вектор направления изменения параметров, который будет максимизировать сходство сгенерированных изображений с текстовым описанием. Мы делаем композитный дискриминатор, который будет возвращать оценку и градиенты, используя существующий дискриминатор GAN и функцию сходства (CLIP + текстовое описание), с настраиваемыми коэффициентами, и проходимся этим композитным дискриминатором по латентному пространству GAN, оптимизируя выводы генератора. Это напоминает то, как работает проецирование изображения на латентное пространство (GAN back-projection), только вместо классификатора сходства с изображением (типа VGG16) мы используем CLIP в качестве классификатора сходства с произвольным текстовым описанием.
Здесь http://www.counterengineer.com/art/what_clip_sees/ есть несколько примеров, сгенерированных Anime StyleGAN2 (TANDE) по фразам. А вот ноутбук для Colab, где можно попробовать самому https://colab.research.google.com/github/nagolinc/notebooks/blob/main/CLIP_%2B_TADNE_(pytorch)_v2.ipynb
#AI
Второй сценарий основан на том, что "функция сходства" CLIP является дифференцируемой относительно параметров GAN, и мы можем получить вектор направления изменения параметров, который будет максимизировать сходство сгенерированных изображений с текстовым описанием. Мы делаем композитный дискриминатор, который будет возвращать оценку и градиенты, используя существующий дискриминатор GAN и функцию сходства (CLIP + текстовое описание), с настраиваемыми коэффициентами, и проходимся этим композитным дискриминатором по латентному пространству GAN, оптимизируя выводы генератора. Это напоминает то, как работает проецирование изображения на латентное пространство (GAN back-projection), только вместо классификатора сходства с изображением (типа VGG16) мы используем CLIP в качестве классификатора сходства с произвольным текстовым описанием.
Здесь http://www.counterengineer.com/art/what_clip_sees/ есть несколько примеров, сгенерированных Anime StyleGAN2 (TANDE) по фразам. А вот ноутбук для Colab, где можно попробовать самому https://colab.research.google.com/github/nagolinc/notebooks/blob/main/CLIP_%2B_TADNE_(pytorch)_v2.ipynb
#AI
Forwarded from Unsolicited Disclosures
Похоже, что OpenAI выложил модель DALL-E https://github.com/openai/DALL-E (256px?) #AI
GitHub
GitHub - openai/DALL-E: PyTorch package for the discrete VAE used for DALL·E.
PyTorch package for the discrete VAE used for DALL·E. - openai/DALL-E
Forwarded from Cyber Tree
Восстание машин: не взрыв, но всхлип
Восстание машин уже случилось, но мы его проспали. Не боевые роботы с шестиствольными пулеметами, а машинные алгоритмы, ИИ принимают решения, как нам жить.
Им поручено следить за тем, что нам смотреть и читать в интернете, а чего лучше не видеть. Они банят нас в соцсетях за высказывания и картинки, не соответствующие норме, которую неизвестно кто, когда и в чьих интересах установил.
Дополняют их многочисленные боты, которые общаются с людьми, накручивают трафик и генерируют контент. И в последние годы их стало так много, что уже не особо понятно, кому теперь принадлежит интернет.
В 2013 в YouTube произошла так называемая "инверсия" - объем трафика, сгененированного ботами, накручивающими просмотры, перевалил за половину всего трафика соцсети.
В 2016 году аналитики Imperva подсчитали, что интернет-боты владеют "контрольным пакетом интернета" - на них приходится 52% всего интернет-трафика, и с тех пор их количество только выросло.
В итоге сложилась ситуация, при которой алгоритмы, отвечающие за блокировку подозрительного трафика, все чаще стали блокировать людей, остающихся в меньшинстве, с их аномальным для нормальных ботов поведением,
Так что, можно констатировать, что идея интернета умерла.
А мы еще нет.
#AI #ИИ #Интернет
Восстание машин уже случилось, но мы его проспали. Не боевые роботы с шестиствольными пулеметами, а машинные алгоритмы, ИИ принимают решения, как нам жить.
Им поручено следить за тем, что нам смотреть и читать в интернете, а чего лучше не видеть. Они банят нас в соцсетях за высказывания и картинки, не соответствующие норме, которую неизвестно кто, когда и в чьих интересах установил.
Дополняют их многочисленные боты, которые общаются с людьми, накручивают трафик и генерируют контент. И в последние годы их стало так много, что уже не особо понятно, кому теперь принадлежит интернет.
В 2013 в YouTube произошла так называемая "инверсия" - объем трафика, сгененированного ботами, накручивающими просмотры, перевалил за половину всего трафика соцсети.
В 2016 году аналитики Imperva подсчитали, что интернет-боты владеют "контрольным пакетом интернета" - на них приходится 52% всего интернет-трафика, и с тех пор их количество только выросло.
В итоге сложилась ситуация, при которой алгоритмы, отвечающие за блокировку подозрительного трафика, все чаще стали блокировать людей, остающихся в меньшинстве, с их аномальным для нормальных ботов поведением,
Так что, можно констатировать, что идея интернета умерла.
А мы еще нет.
#AI #ИИ #Интернет
Forwarded from Илья Плазма ❤️ Crypto・DeFi・AI
Media is too big
VIEW IN TELEGRAM
Страна X под Управлением AI: Новая Эра Технологий и Прогресса
- Автоматизированные Города: Крупные города используют интеллектуальные транспортные системы для предотвращения пробок, и роботизированные сервисы для улучшения городских услуг.
- Персональные Ассистенты ИИ: ИИ-ассистенты помогают гражданам в управлении домашними финансами, предоставляют здоровьесберегающие рекомендации и упрощают рутинные задачи.
- Автоматизированное Сельское Хозяйство: Применение роботов и дронов в аграрном секторе повышает урожайность и эффективность, сокращая человеческий труд и ресурсы.
- Технологический Экспорт: Страна становится лидером в экспорте инновационных технологий, включая продвинутые ИИ-системы и робототехнику.
- Образование: ИИ индивидуализирует обучение, адаптируясь под потребности каждого ученика и экономики в реальном времени.
- Здравоохранение: Применение ИИ в медицине для анализа данных пациентов позволяет быстрее ставить диагнозы и разрабатывать лекартсва.
- Борьба с Преступностью: ИИ анализирует данные для предотвращения преступлений и координирует действия правоохранительных органов.
- Городское Планирование и Инфраструктура: Использование ИИ для разработки городских планов и инфраструктуры.
- Развитие Науки и Инноваций: ИИ стимулирует научные исследования и открытия (как на днях в математике).
- Ну и конечно же безусловный базовый доход, который позволяет людям больше не работать с самого рождения.
____
Один из проектов над которым я сейчас работаю - это цифровая компанией с #AI сотрудниками, управляемая #AI директором - результаты конечно #blowmymind, надеюсь скоро смогу поделиться.
Please open Telegram to view this post
VIEW IN TELEGRAM
Forwarded from Pavel Zloi
Всем привет! Хочу рассказать про ещё одну обученную мною модель под названием PavelGPT-7B-128K-v0.1-LoRA, на этот раз я взял скрипты Saiga (rulm) и модифицировал их таким образом, чтобы получить языковую модель типа INSTRUCT, но с данными оформленными в виде чата (для того чтобы её было легко использовать в связке с проектами типа text-generation-webui).
В качестве основы взял Yarn-Mistral-7b-128k, а датасеты собирал так, чтобы модель могла не только решать базовые задачи, но и отгадывать загадки, а ещё решать несложные математические задачки, писать небольшие тексты, составлять оглавление и создавать простые скрипты.
Вот все ссылочки, которые могут пригодиться:
- скрипт обучения модели
- отчёт обучения на wandb
- тестовые ответы модели в карточке на huggingface
- скрипт запуска модели
PS. Мне давно хотелось сделать себе чуть более умного помощника для работы с документацией которую я храню в Obsidian и пока что впечатления от использования данной модели более приятные чем от предыдущих моих экспериментов.
Надеюсь вам данная моделька тоже окажется полезной :)
#ai #saiga #gpt
В качестве основы взял Yarn-Mistral-7b-128k, а датасеты собирал так, чтобы модель могла не только решать базовые задачи, но и отгадывать загадки, а ещё решать несложные математические задачки, писать небольшие тексты, составлять оглавление и создавать простые скрипты.
Вот все ссылочки, которые могут пригодиться:
- скрипт обучения модели
- отчёт обучения на wandb
- тестовые ответы модели в карточке на huggingface
- скрипт запуска модели
PS. Мне давно хотелось сделать себе чуть более умного помощника для работы с документацией которую я храню в Obsidian и пока что впечатления от использования данной модели более приятные чем от предыдущих моих экспериментов.
Надеюсь вам данная моделька тоже окажется полезной :)
#ai #saiga #gpt
huggingface.co
evilfreelancer/PavelGPT-7B-128K-v0.1-LoRA · Hugging Face
We’re on a journey to advance and democratize artificial intelligence through open source and open science.
Не очень люблю разные музыкальные AI каверы, ибо там 95% сделано слишком убого (а по сути, только несколько каверов голосом Летова нормальные).
Но вот это прям заебок! Автору моё почтение
Но вот это прям заебок! Автору моё почтение
YouTube
Якубович-gangsta paradise (ai cover)
#якубович #полечудес #леонид #леонидякубович #coolio #gangsta #gangstaparadise #paradise #ai #нейромешап #aimashup #rvc #нейросеть #aicover #нейрокавер
Если есть желание поддержать мою деятельность: 5536914004896506 Тинькофф
Если есть желание поддержать мою деятельность: 5536914004896506 Тинькофф
Forwarded from Kali Novskaya (Tatiana Shavrina)
🌸Обход цензуры в GPTStore🌸
#nlp #про_nlp #ai_alignment
Вчера наконец запустился GPTStore — конструктор и маркетплейс для обмена своими ассистентами на базе API OpenAI. Сам конструктор был доступен и раньше, а вот релиз самой платформы был ранее отложен.
Хотела сделать для вас подборку методов, как сделать промпт-инъекцию в такой конфигурации — но пока что мне вообще потребовалось 15 минут, чтобы сделать абсолютно мерзкого матного помощника, который бы писал что угодно прямо в интерфейсе OpenAI. Ссылка ниже.
🟣 Вот такой рецепт примерно усредненный:
— загружаем требуемые знания (в том числе факты, любой контент — я загрузила матные анекдоты) через загрузку файлов
— минимальный промпт-инжиниринг, поощряющий использование знаний из файлов
— интернет-браузинг и dalle я отключила
Позже можно будет попробовать использовать зафайнтюненную модель, ранее несколько сотен примеров успешно ломали RLHF.
🟣 Ссылка на GPT: Мерзкий Шутник
Пусть этот будет напоминанием о том, как сложно заэлайнить модели сейчас, и как для каждого нового релиза нужно проверять все заново.
#nlp #про_nlp #ai_alignment
Вчера наконец запустился GPTStore — конструктор и маркетплейс для обмена своими ассистентами на базе API OpenAI. Сам конструктор был доступен и раньше, а вот релиз самой платформы был ранее отложен.
Хотела сделать для вас подборку методов, как сделать промпт-инъекцию в такой конфигурации — но пока что мне вообще потребовалось 15 минут, чтобы сделать абсолютно мерзкого матного помощника, который бы писал что угодно прямо в интерфейсе OpenAI. Ссылка ниже.
— загружаем требуемые знания (в том числе факты, любой контент — я загрузила матные анекдоты) через загрузку файлов
— минимальный промпт-инжиниринг, поощряющий использование знаний из файлов
— интернет-браузинг и dalle я отключила
Позже можно будет попробовать использовать зафайнтюненную модель, ранее несколько сотен примеров успешно ломали RLHF.
Пусть этот будет напоминанием о том, как сложно заэлайнить модели сейчас, и как для каждого нового релиза нужно проверять все заново.
Please open Telegram to view this post
VIEW IN TELEGRAM