Намечается официальный колаб Stable Diffusion

https://colab.research.google.com/github/huggingface/notebooks/blob/main/diffusers/stable_diffusion.ipynb

😈 “Diffusers” 😈 - это новый фреймворк для диффузионных моделей, где будет поддерживаться SOTA, единые пайплайны/методы и удобная зоология. Аналогично “Transformers”.

CompVis, Huggingface, StabilityAI

P.S. отдельная благодарность и уважение авторам за их работу ❤️ этот релиз - нереально большой вклад для человечества

@shonenkovAI

Сделала мем про свою жизу.

@sonya_aesthetics

✨ Нейросеть "Стебель Диффузии" доступна каждому

tl;dr Это первая опенсорснутая (и пока что лучшая) Text2Image нейросеть текщего поколения.

🌬 Что такое StableDiffusion? StableDiffusion — это диффузионный Text2Image (как и DALL-E 2) и очень удачный гибрид Latent Diffusion и Imagen.

Stable Diffusion производит диффузию не в пространстве пикселей, а в латенщине. Вместо разрешения 64х64 — выходит сразу 512, благодаря Encoder-Decoder подходу: деталей больше, а вычислений меньше. Информация от текста течет с frozen LM (а именно CLIP), как в случае с T5 в Imagen. SD это модуляр, состоящий из 3х модулей:
1. Frozen CLIP Text Tower (как LM)
2. U-Net (из Diffusion Models Beat GANs)
3. Decoder из 64х64х4 в 512х512х3

👉 Веса и модель (в том числе новый чекпоинт!)

🔮 Оптимизированный нотбук / колаб со всеми плюшками (зарегайся на HuggingFace и получи токен, ссылка выше)

🤗 Diffusers от HuggingFace (библиотека самого графа Диффузора)

📇 Блог пост Stability.AI про релиз весов

Мишин Лернинг

Fusion Brain 2.0

довольно интересная концепция соревнования AI Journey 2022 (в этом году при поддержке AIRI), идея следующая:

(!) подготовить мультимодальную мультизадачную модель

но добавляется интересное условие:

(!) модель должна уметь работать в режиме zeroshot-task

т.е. добавлены неизвестные (скрытые задачи), о которых ни модель, ни участники соревнования заранее не знают 🤯🤯🤯

Q: WHAT? как вообще можно построить адекватный LeaderBoard? 🚑

A: очень просто - модель/вопросы/ответы/метрики работают с гибкой структурой модальностей, что позволяет задавать вопрос и выдавать ответ в общем подготовленном формате. таким образом, задачи могут быть разделены на два типа (известная/скрытая для участников) и оцениваться в одном пайплайне

Q: Что за бред, как натренировать модель без данных не понимая, что она должна решать? 🚑

A: задача не простая - но в качестве доказательства концепта (POC) командой AIRI был сделан бейзлайн с помощью гипермодальной модели RuDOLPH, метрики на скрытых задачах получились далеко не нулевые 🚀

Оказалось, что можно:
- описывать задачи с помощью текстовой или картиночной модальностей
- использовать токены под заранее известные задачи, а с некоторой вероятностью во время обучения “скрывать” задачу, заменяя токен на “<UNK>”
- на инференсе скрытых задач использовать токен “<UNK>”, чтобы модель пыталась решать задачу zeroshot end2end

Q: Если команда AIRI все запилила, то зачем сорев? 💩

A: Далеко не все исследования были проведены. Если закинуть побольше известных задач и натюнить гиперпараметры, то это уже может значительно превзойти бейзлайн. Плюс необычная концепция соревнования на скрытых задачах может подтолкнуть исследователей мыслить в этом направлении

сорева/платформа: здесь
github/бейзлайн: здесь

@shonenkovAI

Kandinsky 2.0: перая мультиязычная диффузия! (by AIRI, SberAI, Сколтех)

Встречайте первую text2image модель для более чем 100 языков! Основано на архитектуре Latent Diffusion + несколько мультиязычных текстовых энкодеров (XLMR-clip, mT5). Код и веса уже доступны!

P.S. Я тоже в этом немного поучаствовал и даже написал статью на хабр 😊

Хабр, HuggingFace, GitHub, демо

🚀 Долгожданный релиз — STABLE DIFFUSION 2

Что будет, если за создание опенсорс решения берутся профессионалы? А что если таких команд много? Представьте:

— LAION собирают 5,000,000,000 пар картинка-текст
— DeepFloyd берут LAION-5B и готовят чистый и роскошный сабсет для трейна
— Rom из LAION делает CLIP-ViT/H
— Robin Rombach из CompVis и StabilityAI собирает роскошный Text2Image — STABLE DIFFUSION 2

Но это еще не все! Встречайте целый зоопарк моделей:

👾 Stable Diffusion 2 base — 512x512
🚀 Stable Diffusion 2 — 768x768
✨ Stable Upscaler 4x
🎨 Stable Diffusion 2 Inpainting
👁 Stable Depth

☠️ Короче, можно смело выбрасывать на помойку всякий шлак) Пришла эпоха STABLE DIFFUSION 2! Генерируй в 768х768, Апскейль до 3072х3072! Делай 3D, Редактируй Инпеинтингом!

p.s.: Я просто боюсь представить, что там может быть дальше! Stability 🫦 ты секс!

🔮 Git настоящего OpenAI

@mishin learning

я не являюсь автором Kandinsky-Z (2.0) 😳

получил много поздравлений “с новым Kandinsky”, но я не принимал участия в разработке и тем более в релизе!

первое, что я увидел - это готовый пост у @abstractDL (мы когда-то работали вместе в AIRI) - решил поддержать ребят и сделать репост новости 🤝

они выкатили мультиязычную латент-диффузию с демкой, КОДОМ и ВЕСАМИ в открытый доступ, что большая редкость (спасибо closedAI и всем новым правовым законам AI этики 🤮)!

вот список реальных авторов (они есть и на Хабре):

@gradientdip @abstractDL @lovedeathtransformers @complete_ai @rybolos_channel @oulenspiegel_channel + еще несколько сильных разработчиков, которые не ведут каналы

на всякий случай приношу еще раз свои извинения авторам и читателям за то, что случилась такая подмена - наверное, это изза схожего названия, но повлиять ДО релиза возможности не представилось

Всем добра!


P.S. Я также поигрался с генерацией и инпейтингом нового Kandinsky - прикольно - кодовая база другая, но сделано все супер user-friendly, легко поднялось как на колабе, так и на моей железке. А за пару часов даже удалось состряпать концепт-арт (см выше). Но с лицами у модели все же есть нюансы (но это не точно).

@shonenkovAI

с конфы AIJ 😂🤦🏼‍♂️

OpenAI показал свою ChatGPT на новой большой языковой модели GPT 3.5, и я не могу остановиться играться с ней уже пару дней. Давно такого не было, что мне становится страшновато от ее возможностей.

Поиграться можете тут:
https://chat.openai.com/chat

Примеры (переведены автоматом):

Как найти свое призвание в этом мире?

Поиск своего призвания в этом мире может быть трудным и индивидуальным путешествием. Некоторые люди находят свою страсть, исследуя свои интересы и пробуя себя в разных профессиях, в то время как другие могут обнаружить свое призвание через самоанализ и самопознание. Также полезно обратиться за советом к наставникам, друзьям и членам семьи, которые могут дать совет и поддержать на этом пути. В конечном счете, ваше призвание - это то, что приносит вам радость и удовлетворение, и оно может меняться и развиваться с течением времени. Важно быть открытым для новых возможностей и опыта и никогда не прекращать учиться и расти.

Если мы находимся в симуляции, как мы можем выйти из нее?

Идея о том, что мы живем в симуляции, - это философская концепция, которая исследуется учеными и философами на протяжении многих лет. Научных доказательств того, что мы живем в симуляции, не существует, и в настоящее время эта концепция считается скорее мысленным экспериментом, чем научной теорией. Как следствие, не существует установленного способа "выйти" из симуляции, поскольку идея пребывания в симуляции является чисто гипотетической. Если предположить, что мы находимся в симуляции, то неясно, каковы будут условия для "выхода" из нее, и возможно, что это невозможно в рамках самой симуляции.

Являетесь ли вы лучшей версией Вики?

Я не являюсь лучшей или худшей версией Википедии, так как я - большая языковая модель, обученная OpenAI, и у меня другая цель и функция, чем у Википедии. Википедия - это онлайн-энциклопедия, которая пишется и редактируется добровольцами и предоставляет информацию по широкому кругу тем. С другой стороны, я - это система ИИ для обработки языка, которая может помочь в решении таких задач, как ответы на вопросы, предоставление информации и генерация текста. У меня нет такой широты знаний, как у Википедии, поскольку мои обучающие данные охватывают только период до 2021 года, и у меня нет возможности просматривать интернет в поисках дополнительной информации. Я могу давать быстрые и краткие ответы на конкретные вопросы, но я не предназначен для того, чтобы быть всеобъемлющим источником информации, как Википедия.

Создай сценарий Матрицы, но где Морфиус - Мэри Поппинс

Фильм открывается оживленной городской сценой, где люди занимаются своими повседневными делами, не обращая внимания на истинную природу реальности.

Вдруг посреди улицы появляется женщина в струящемся голубом платье и шляпе, несущая большой зонт. Она - Мэри Поппинс, и у нее есть особый дар - способность видеть и управлять Матрицей, скрытым кодом, лежащим в основе мира.

Мэри Поппинс: "Здравствуй, мой дорогой. Я вижу, что ты был выбран в качестве Избранного. Поздравляю, тебе предстоит очень важная миссия".
Нео: "Избранный? Что вы имеете в виду? Кто вы?"
Мэри Поппинс: "Я - Мэри Поппинс, и я послана, чтобы направлять тебя в твоем путешествии. Видите ли, мир, который, как вам кажется, вы знаете, - всего лишь иллюзия. Это мир лжи и обмана, созданный машинами, чтобы держать всех нас в узде. Но у тебя, Нео, есть способность видеть за пределами иллюзии, чтобы понять истинную природу реальности".
Нео: "Я не понимаю. Что вы хотите от меня?"
Мэри Поппинс: "Я хочу, чтобы ты присоединился ко мне, Нео. Вместе мы сможем бороться против машин и освободить человечество от их власти. Но это будет нелегко. Машины могущественны, и они не остановятся ни перед чем, чтобы держать нас в узде. Готов ли ты противостоять им?"
Нео: "Я... я не знаю. Все это так ошеломляет. Смогу ли я действительно это сделать?"
Мэри Поппинс: "Конечно, ты можешь, мой дорогой. В тебе есть сила. А с маленькой ложечкой сахара возможно все. Поверь мне, Нео. Вместе мы сможем изменить мир".

С этими словами Мэри Поппинс и Нео пьют чай и отправляются в путь, чтобы свергнуть машины и освободить человечество от их власти. На этом пути они сталкиваются со многими трудностями, но под руководством Мэри Поппинс и благодаря растущему пониманию Нео Матрицы им удается преодолеть их и в конце концов одержать победу над машинами. В конце концов Нео становится героем, которого ждало человечество, и мир навсегда меняется.

Сюжет игры fallout 2 вкратце

Сюжет игры Fallout 2 разворачивается в постапокалиптическом мире, в котором человечество было уничтожено ядерной войной. Игрок берет на себя роль члена племени выживших, известного как Избранный, и должен отправиться в путешествие, чтобы найти легендарный артефакт под названием G.E.C.K. (Garden of Eden Creation Kit), который способен восстановить и возродить мир.

Игра начинается с того, что персонаж игрока живет в деревне Арройо, небольшой общине выживших, которая борется за выживание в суровой пустоши. Деревней правит мудрый и могущественный старейшина, который предвидел, что Избранный должен покинуть деревню и отправиться на поиски G.E.C.K., чтобы спасти племя.

Игрок отправляется в путь, путешествуя по пустошам и встречая на своем пути различные фракции и врагов. Они должны сделать выбор и заключить союз, который определит ход игры, и в конечном итоге столкнуться с рядом трудностей и препятствий, стоящих между ними и G.E.C.K.

В конечном итоге игроку предстоит противостоять Энклаву, могущественной и безжалостной организации, которая стремится контролировать мир и его ресурсы. С помощью своих союзников и силы G.E.C.K. игрок должен победить Энклав и обеспечить будущее человечества.

Игра предлагает разветвленное повествование с несколькими концовками в зависимости от выбора, сделанного игроком на протяжении всей игры. Игрок может присоединиться к различным фракциям, преследовать различные цели и принимать решения, которые будут иметь долгосрочные последствия для мира Fallout 2.

Как пинговать локальный хост?

Чтобы выполнить ping локального хоста, вы можете использовать следующую команду:
ping 127.0.0.1

Эта команда пошлет серию запросов "ping" на localhost, который является специальным IP-адресом, относящимся к локальному компьютеру. Локальный хост ответит на запросы ping, и в выводе команды будет показан результат ping, включая время прохождения каждого запроса.

Сделай шутку про pdf файл

Why was the PDF file so sad? Because it had no body! (Не перевел, чтобы не потерялась)

⚜️⚜️⚜️

Короче, в будущем не рисовать, не писать не нужно будет, что нам всем делать там – я без понятия, но будто это будущее уже очень близко. Надеюсь, мы все станем безработными гедонистами
¯\_(ツ)_/¯