Вещает Ванга
В прошлый раз в одной из самых нижних точек стоимости битка арестовали главу биржи FTX. Теперь арестован Дуров...
Говорит ли это, что рынок вырастет, но тону конец?
Ведь, чтоб расти надо кушать, это знают все мамы, на этот раз на обед русский крипто хомяк😋
В прошлый раз в одной из самых нижних точек стоимости битка арестовали главу биржи FTX. Теперь арестован Дуров...
Говорит ли это, что рынок вырастет, но тону конец?
Ведь, чтоб расти надо кушать, это знают все мамы, на этот раз на обед русский крипто хомяк
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
This media is not supported in your browser
VIEW IN TELEGRAM
Пришли умные весы от mi
И я смог наконец на графиках увидеть как соскуфился за 3 года, спасибо технологиям😎
И я смог наконец на графиках увидеть как соскуфился за 3 года, спасибо технологиям
Please open Telegram to view this post
VIEW IN TELEGRAM
Хотя в процентах Фиби больше соскуфилась, но для нее прошло лет 20 кошачьих 🫣
Телеграм убрал функцию поиска людей рядом (как минимум во Франции). Вероятно, это может быть связано с арестом Павла Дурова.
Ранее при поиске людей рядом можно было увидеть множество аккаунтов, связанных с торговлей наркотиками и проституцией.
Возможно, что компанией включена более агрессивная модерация аккаунтов, а не полное отключение функции поиска людей рядом.
На приложенных изображениях сравнение скриншотов функции от 28 августа и 1 сентября.
Оказывается, это было не так уж сложно.
@cyberoleg
Ранее при поиске людей рядом можно было увидеть множество аккаунтов, связанных с торговлей наркотиками и проституцией.
Возможно, что компанией включена более агрессивная модерация аккаунтов, а не полное отключение функции поиска людей рядом.
На приложенных изображениях сравнение скриншотов функции от 28 августа и 1 сентября.
Оказывается, это было не так уж сложно.
@cyberoleg
Forwarded from Хагаки 👊
Я хочу увидеть 22й и 23й века, а для этого мне нужен доступ к лучшей мировой медицине.
Я должен сильно увеличить мировую экономику, чтоб медицина была лучше.
Связь экономики и качества мировой медицины прямая. Чем беднее страна, тем меньший в ней процент людей захочет на 10 лет откладывать получение дохода, тем короче горизонт планирования людей. И наоборот, чем богаче страна и мир, тем больше научных работ по медицине публикуется каждый год.
У меня небольшая сердечная аритмия, и нервные тики.
Иногда я теряю сознание, что-то вроде панических атак.
Когда это случилось впервые, всё происходило медленно, в течение двух минут.
Я постепенно терял силы, руки и ноги холодели, в глазах темнело. Приступ атаковал меня на кухне, я успел дойти до комнаты, где были родители, и сказать: "Папа, мама, прощайте".
Я сидел в кресле, а мир темнел и уменьшался. Я думал, что умираю, не мог пошевелить руками.
И я мысленно говорил высшим силам: "Пожалуйста, еще один день, еще один день".
Сейчас я знаю, что это просто нервное расстройство, нет срочной угрозы жизни.
Но с другой стороны, я знаю, что это случится со мной еще раз, уже с плохим финалом, лет через 30-40.
Вот мне будет 70-80, вся эта сцена повторяется, но я уже не проснусь на следующий день.
Нет.
Я готов отдать 100% своего времени, я готов работать 40 лет подряд без единого выходного, 365 дней в году, по 10 часов в день, если это гарантирует или существенно повысит мои шансы на радикальное продление жизни. Умирать слишком страшно.
Я буду развлекаться в следующем веке.
Какие же в 22 веке будут компьютерные игры с прямым подключением к мозгу, ноотропные препараты не хуже NZT из "Области Тьмы", транспорт даже представить не берусь, парки развлечений, аквапарки с горками размером с Бурдж Халифу, новые блюда, собранные из лучших компонентов всех кухонь мира. Еда эволюционирует особенно быстро.
Самое крутое развлечение этого века будет скучным в сравнении с обычным ужином в ресторане в 22 веке.
Нашей планете 4.5 миллиарда лет. Как вообще люди могут мириться с фактом, что они увидят меньше 100 лет истории этой планеты.
Я понимаю стариков. Когда ты уже несколько лет живешь с ослабевшим телом, тратишь все свои небольшие силы на решение бытовых проблем, когда у тебя уровень гормонов самый низкий за всю жизнь, ты уже не думаешь о битвах, не планируешь побеждать, ты постепенно сдаешься, годами. И к моменту смерти уже достигается смирение.
Я понимаю молодых. Когда тебе 20-30 лет, то уровень гормонов так высок, тело настолько сильное, что в смерть просто не веришь, как в какую-то байку для стариков.
Получается, что чем сильнее человек, чем больше часов в день он может работать, чем быстрее работает его мозг, тем меньше он верит в смерть, а значит меньше мотивирован искать способы радикального продления жизни, или радикального увеличения мировой экономики.
Звучит как ловушка для всей цивилизации.
Что если был способ большому количеству людей, в молодом возрасте, очень реалистично и медленно испытать ощущение смерти, сохраняя рассудок, с возможностью отрефлексировать каждую секунду этого состояния и его финала.
Я думаю, что в таком случае, на этой планете было бы больше людей, которые не отмахиваются от смерти, а воспринимают её всерьёз и готовятся к сражению с со смертью с молодых лет, когда еще можно что-то сделать.
Было бы круто, если бы существовал прибор, который позволял бы пережить недоступный человеку в повседневной жизни опыт, но позволял бы человеку сохранять рассудок и думать об этом опыте.
Такой прибор увеличил бы осознанность людей, понимание других и эмпатию.
А главное - понимание перспектив.
Самое важное - дальность горизонта планирования, возможность представить что будет дальше, принять правильные решения заранее и начать их реализацию.
У вас достаточно далёкий горизонт планирования? Какие у вас планы на смерть?
Я должен сильно увеличить мировую экономику, чтоб медицина была лучше.
Связь экономики и качества мировой медицины прямая. Чем беднее страна, тем меньший в ней процент людей захочет на 10 лет откладывать получение дохода, тем короче горизонт планирования людей. И наоборот, чем богаче страна и мир, тем больше научных работ по медицине публикуется каждый год.
У меня небольшая сердечная аритмия, и нервные тики.
Иногда я теряю сознание, что-то вроде панических атак.
Когда это случилось впервые, всё происходило медленно, в течение двух минут.
Я постепенно терял силы, руки и ноги холодели, в глазах темнело. Приступ атаковал меня на кухне, я успел дойти до комнаты, где были родители, и сказать: "Папа, мама, прощайте".
Я сидел в кресле, а мир темнел и уменьшался. Я думал, что умираю, не мог пошевелить руками.
И я мысленно говорил высшим силам: "Пожалуйста, еще один день, еще один день".
Сейчас я знаю, что это просто нервное расстройство, нет срочной угрозы жизни.
Но с другой стороны, я знаю, что это случится со мной еще раз, уже с плохим финалом, лет через 30-40.
Вот мне будет 70-80, вся эта сцена повторяется, но я уже не проснусь на следующий день.
Нет.
Я готов отдать 100% своего времени, я готов работать 40 лет подряд без единого выходного, 365 дней в году, по 10 часов в день, если это гарантирует или существенно повысит мои шансы на радикальное продление жизни. Умирать слишком страшно.
Я буду развлекаться в следующем веке.
Какие же в 22 веке будут компьютерные игры с прямым подключением к мозгу, ноотропные препараты не хуже NZT из "Области Тьмы", транспорт даже представить не берусь, парки развлечений, аквапарки с горками размером с Бурдж Халифу, новые блюда, собранные из лучших компонентов всех кухонь мира. Еда эволюционирует особенно быстро.
Самое крутое развлечение этого века будет скучным в сравнении с обычным ужином в ресторане в 22 веке.
Нашей планете 4.5 миллиарда лет. Как вообще люди могут мириться с фактом, что они увидят меньше 100 лет истории этой планеты.
Я понимаю стариков. Когда ты уже несколько лет живешь с ослабевшим телом, тратишь все свои небольшие силы на решение бытовых проблем, когда у тебя уровень гормонов самый низкий за всю жизнь, ты уже не думаешь о битвах, не планируешь побеждать, ты постепенно сдаешься, годами. И к моменту смерти уже достигается смирение.
Я понимаю молодых. Когда тебе 20-30 лет, то уровень гормонов так высок, тело настолько сильное, что в смерть просто не веришь, как в какую-то байку для стариков.
Получается, что чем сильнее человек, чем больше часов в день он может работать, чем быстрее работает его мозг, тем меньше он верит в смерть, а значит меньше мотивирован искать способы радикального продления жизни, или радикального увеличения мировой экономики.
Звучит как ловушка для всей цивилизации.
Что если был способ большому количеству людей, в молодом возрасте, очень реалистично и медленно испытать ощущение смерти, сохраняя рассудок, с возможностью отрефлексировать каждую секунду этого состояния и его финала.
Я думаю, что в таком случае, на этой планете было бы больше людей, которые не отмахиваются от смерти, а воспринимают её всерьёз и готовятся к сражению с со смертью с молодых лет, когда еще можно что-то сделать.
Было бы круто, если бы существовал прибор, который позволял бы пережить недоступный человеку в повседневной жизни опыт, но позволял бы человеку сохранять рассудок и думать об этом опыте.
Такой прибор увеличил бы осознанность людей, понимание других и эмпатию.
А главное - понимание перспектив.
Самое важное - дальность горизонта планирования, возможность представить что будет дальше, принять правильные решения заранее и начать их реализацию.
У вас достаточно далёкий горизонт планирования? Какие у вас планы на смерть?
Выгрузил 190 тысяч своих сообщений из телеграма!
На картинке топ моих частых слов, исключая уж совсем популярные “я” и пр.
Дальше я хотел их загрузить в какую-то из мобильных клавиатур (кстати, Microsoft SwiftKey неплохая), потому что стандартные меня бесят.🤯
Но я ничего не нашел такого! Кто знает есть ли те, которые можно кастомизировать по словарям?
Дальнейший шаг потрейнить ллмку и сделать свою клавиатуру. Что посоветуете файнтюнить?
А пока можно попросить ллмку написать в “моем стиле”, все напутано но ок, сойдет как из альтернативной вселенной
____
“Привет! Нужно обсудить наш новый проект. Лёша уже скинул вариант модели, но есть сложности с генерацией. Прям вижу, что некий код в некоторых случаях выдаёт чета странное, возможно, проблема в юзере или сервере. Олег предложил вечером созвониться, чтобы глянуть картинку и решить, что делать дальше. Вика тоже подключится, она уже в курсе задачи.
Норм, если созвон будет через час? Мб обсудим и новые идеи для рекламы? Если нужно, скину текст и ссылки на примеры.
Короче, давай примерно в 7 вечера, окей? Если что, сорри за поздний запрос, просто нужно успеть до конца недели. Визу можно обсудить отдельно, когда все будет готово. Франция и Армения тоже в списке на следующую неделю. Будем надеяться на успех!”
_
ПС Если пост наберет 10 лайков, то выложу код, чтоб вы локально могли на своих проганть (хотя там изи) + трейн ллмки и интеграцию с клавиаутрой😎
@cyberoleg
На картинке топ моих частых слов, исключая уж совсем популярные “я” и пр.
Дальше я хотел их загрузить в какую-то из мобильных клавиатур (кстати, Microsoft SwiftKey неплохая), потому что стандартные меня бесят.
Но я ничего не нашел такого! Кто знает есть ли те, которые можно кастомизировать по словарям?
Дальнейший шаг потрейнить ллмку и сделать свою клавиатуру. Что посоветуете файнтюнить?
А пока можно попросить ллмку написать в “моем стиле”, все напутано но ок, сойдет как из альтернативной вселенной
____
“Привет! Нужно обсудить наш новый проект. Лёша уже скинул вариант модели, но есть сложности с генерацией. Прям вижу, что некий код в некоторых случаях выдаёт чета странное, возможно, проблема в юзере или сервере. Олег предложил вечером созвониться, чтобы глянуть картинку и решить, что делать дальше. Вика тоже подключится, она уже в курсе задачи.
Норм, если созвон будет через час? Мб обсудим и новые идеи для рекламы? Если нужно, скину текст и ссылки на примеры.
Короче, давай примерно в 7 вечера, окей? Если что, сорри за поздний запрос, просто нужно успеть до конца недели. Визу можно обсудить отдельно, когда все будет готово. Франция и Армения тоже в списке на следующую неделю. Будем надеяться на успех!”
_
ПС Если пост наберет 10 лайков, то выложу код, чтоб вы локально могли на своих проганть (хотя там изи) + трейн ллмки и интеграцию с клавиаутрой
@cyberoleg
Please open Telegram to view this post
VIEW IN TELEGRAM
Apple Intelligence посадит персонального товарища майора во все данные, что у вас только есть и могут быть ))
Сообщения? - ага (ну кстати за реально хорошую AI клаву готов отдать им данные)
Анализ фоток со всем контекстом ? - да
В камеру ? - да
В нотификации (якобы для саммери) ? - да
В наушники, чтобы вы лучше слышали окружение ? - давайте и сюда
В эмоджи ? - да давайте и туда вообще пофиг
Эпл клянется, что весь Gen AI будет крутится в приватном облаке, в которое у Apple якобы не будет доступа
верю, я поверив😁
Сообщения? - ага (ну кстати за реально хорошую AI клаву готов отдать им данные)
Анализ фоток со всем контекстом ? - да
В камеру ? - да
В нотификации (якобы для саммери) ? - да
В наушники, чтобы вы лучше слышали окружение ? - давайте и сюда
В эмоджи ? - да давайте и туда вообще пофиг
Эпл клянется, что весь Gen AI будет крутится в приватном облаке, в которое у Apple якобы не будет доступа
верю, я поверив
Please open Telegram to view this post
VIEW IN TELEGRAM
Я не против технологий самих по себе. Все, кто тормозит будущее без причин на то, вроде некоторых европейских политиков, пускай едут на северный полюс в одних штанах.
Apple приятно удивила новыми КНОПКАМИ (никто не ждал после стольких лет отказа от кнопок)
И Apple Intelligence звучит очень круто на словах, надеюсь они будут дофига функций добавлять с учетом персонального контекста.
Для меня это самые ожидаемые функции и клавиатура, но думаю сначала будет очень мало функций.
В сказку про безопасное облако я не верю, разрейшайте только то, чем готовы делиться 🤔
По поводу данных я всегда писал тут, что считаю, что у людей отнимают право продавать свои данные и зарабатывать на этом.
Попробуйте собирать столько же данных сколько планирует Apple и вас закроют через 2 дня.
Монополист же может собирать сколько хочет / любых данных,
прикрываясь либеральной повесткой, карбон фри 2030 и анонимным облаком, а главное штатом юристов и лоббистов 😎
Считаю должно быть дофига платформ, которым вы можете продать свои данные и рядом эпл, которая берет их для “улучшения своих продуктов”. Сейчас же у огромных корпораций монополия на данные, которые еще больше их усиливают, а потом еще усиливают дополнительно за счет ИИ…
Apple приятно удивила новыми КНОПКАМИ (никто не ждал после стольких лет отказа от кнопок)
И Apple Intelligence звучит очень круто на словах, надеюсь они будут дофига функций добавлять с учетом персонального контекста.
Для меня это самые ожидаемые функции и клавиатура, но думаю сначала будет очень мало функций.
В сказку про безопасное облако я не верю, разрейшайте только то, чем готовы делиться 🤔
По поводу данных я всегда писал тут, что считаю, что у людей отнимают право продавать свои данные и зарабатывать на этом.
Попробуйте собирать столько же данных сколько планирует Apple и вас закроют через 2 дня.
Монополист же может собирать сколько хочет / любых данных,
прикрываясь либеральной повесткой, карбон фри 2030 и анонимным облаком, а главное штатом юристов и лоббистов 😎
Считаю должно быть дофига платформ, которым вы можете продать свои данные и рядом эпл, которая берет их для “улучшения своих продуктов”. Сейчас же у огромных корпораций монополия на данные, которые еще больше их усиливают, а потом еще усиливают дополнительно за счет ИИ…
Заработали 5 000 000 ₽ в первый месяц ведения видеоблога!
Привет! Я Иван Сёмке, основатель студии видеомаркетинга Semke Studio.
Мы помогаем делать видео, которые будут интересны вам самим и вашим подписчикам и будут приводить на ваш канал нужную целевую аудиторию.
В этой статье расскажу, как мы сделали предпринимателю канал, который набрал уже 70 000 подписчиков и принёс 5 000 000 ₽ в первый месяц нашей работы.
Тоже хотите развивать видеоблог?
Подписывайтесь на мой канал: там я выкладываю полезные советы и чек-листы и рассказываю, как масштабировать бизнес через видео (YouTube, Reels, Shorts, VKvideo и другие медиасети).
Привет! Я Иван Сёмке, основатель студии видеомаркетинга Semke Studio.
Мы помогаем делать видео, которые будут интересны вам самим и вашим подписчикам и будут приводить на ваш канал нужную целевую аудиторию.
В этой статье расскажу, как мы сделали предпринимателю канал, который набрал уже 70 000 подписчиков и принёс 5 000 000 ₽ в первый месяц нашей работы.
Тоже хотите развивать видеоблог?
Подписывайтесь на мой канал: там я выкладываю полезные советы и чек-листы и рассказываю, как масштабировать бизнес через видео (YouTube, Reels, Shorts, VKvideo и другие медиасети).
Я тут чуть больше оевропеелся - получил пластик ВНЖ на 4 года (еще напишу сколько занял весь процесс и план пошагово как повторить). Еще зовел наконец-то револют, даже не знаю, что из этого круче
У revolut есть тариф Ultra за 55 евро/мес и в целом там довольно неплохие плюшки, некоторые мне интересны:
1/ повышенный кэшбек
2/ аж 3 дня в WeWork / месяц, хотя мне там невыносимо сидеть :(
3/ всякие досутпы в приложения вроде Masterclass, ClassPass, NordVPN и пр.
Про мастеркласс я давно слышал уже, идея проекта снять со всякими известными людьми мира небольшие курсы, где они делятся знаниями
Хмм не знаю, кто это раньше придумал даже - они или инфобиз в России? ))
Пока глянул курс нестандартного миллиардера Ричарда Брэнсона из Англии.
И он достаточно прикольно снят. Основный посыл для меня был, что смелые люди живут мало, но боязливые не живут вовсе (раунд🤔 )
И вообще он много рассказывал про то как он растил компании, которые не были новы сами по себе, но сильно отличались от конкурентов и того, что есть на рынке.
Несколько мыслей:
/ Гигантов и государство можно вызывать в суд, если уверены, что правы в своем
/ Если вы небольшая компания и на рынке есть монополист, то нужно радикально быть лучше по большому числу параметров, потому что один параметр гигант может временно улучшить, чтобы вас задавить! У Virgin Airlines были даже комики на борту, а потом они придумали поставить телевизоры в кресла
/ Собеседовать людей можно в ресторане или в реальной обстановке, а не скучно на диване, чтобы лучше понять как они себя ведут в реальной жизни, есть ли у вас мэтч
/ Мыслите, как вы можете принести максимальную пользу сначала небольшому кругу людей, потом все больше и больше до всей планеты
/ Не забывать про фан
@cyberoleg
У revolut есть тариф Ultra за 55 евро/мес и в целом там довольно неплохие плюшки, некоторые мне интересны:
1/ повышенный кэшбек
2/ аж 3 дня в WeWork / месяц, хотя мне там невыносимо сидеть :(
3/ всякие досутпы в приложения вроде Masterclass, ClassPass, NordVPN и пр.
Про мастеркласс я давно слышал уже, идея проекта снять со всякими известными людьми мира небольшие курсы, где они делятся знаниями
Хмм не знаю, кто это раньше придумал даже - они или инфобиз в России? ))
Пока глянул курс нестандартного миллиардера Ричарда Брэнсона из Англии.
И он достаточно прикольно снят. Основный посыл для меня был, что смелые люди живут мало, но боязливые не живут вовсе (раунд
И вообще он много рассказывал про то как он растил компании, которые не были новы сами по себе, но сильно отличались от конкурентов и того, что есть на рынке.
Несколько мыслей:
/ Гигантов и государство можно вызывать в суд, если уверены, что правы в своем
/ Если вы небольшая компания и на рынке есть монополист, то нужно радикально быть лучше по большому числу параметров, потому что один параметр гигант может временно улучшить, чтобы вас задавить! У Virgin Airlines были даже комики на борту, а потом они придумали поставить телевизоры в кресла
/ Собеседовать людей можно в ресторане или в реальной обстановке, а не скучно на диване, чтобы лучше понять как они себя ведут в реальной жизни, есть ли у вас мэтч
/ Мыслите, как вы можете принести максимальную пользу сначала небольшому кругу людей, потом все больше и больше до всей планеты
/ Не забывать про фан
@cyberoleg
Please open Telegram to view this post
VIEW IN TELEGRAM
Вышла новая моделька от OpenAI o1
В ней добавлен CoT, иначе цепочка рассуждений, это улучшает процесс рассуждений при решения задач и растит метрики на сложных и долгих тасках. Есть эксперименты на задачах по 6 часов и более.
Человек еще лучше (пока что)
AI ресерчеры хотя только одного - как можно скорее самовыпилиться
https://openai.com/index/learning-to-reason-with-llms/
В ней добавлен CoT, иначе цепочка рассуждений, это улучшает процесс рассуждений при решения задач и растит метрики на сложных и долгих тасках. Есть эксперименты на задачах по 6 часов и более.
Человек еще лучше (пока что)
AI ресерчеры хотя только одного - как можно скорее самовыпилиться
https://openai.com/index/learning-to-reason-with-llms/
Openai
Learning to reason with LLMs
We are introducing OpenAI o1, a new large language model trained with reinforcement learning to perform complex reasoning. o1 thinks before it answers—it can produce a long internal chain of thought before responding to the user.
Forwarded from DLStories
Мы наконец открыли набор на осенний семестр Deep Learning School!
DLschool — это школа при ФПМИ МФТИ, где мы учим нейронным сетям с самых азов до продвинутого уровня. Полный курс состоит из двух частей, каждая из которых длится полгода.
- Первая часть посвящена введению в нейросети и компьютерному зрению. Начинаем с основ машинного обучения и нейросетей, переходим к CNN для обработки картинок, заканчиваем переносом стиля изображений и ГАНами. В этом семестре мы улучшили многие занятия, записали новые версии лекций и семинаров и обновили домашки.
- Вторая часть полностью посвящена обработке естественного языка (NLP). Начинаем с эмбеддингов слов и заканчиваем GPT-2,3, RLHF, RAG и другими актуальными темами вокруг LLM.
Сейчас идет набор на оба потока обучения — часть 1 (введение в DL + CV) и часть 2 (NLP).
Особенность нашей школы в том, что мы даем много практики (теория при этом тоже есть, разумеется, и немало). Вам предстоит много практических домашних заданий и самостоятельный итоговый проект в конце семестра. По окончании обучения вы точно получите нужные практические навыки работы с нейросетями. Больше информации об организации курса и программы обучения можно найти тут.
Преподаватели школы — ведущие специалисты российских и зарубежных IT-компаний и научные сотрудники исследовательских лабораторий. Среди них — я (Таня), буду вести у вас несколько лекций в обеих частях курса.
Школа бесплатная. Полностью онлайн: учиться можно из любой точки мира, где есть интернет. Занятия проходят раз в неделю — лекция, семинар и домашнее задание. Обучение проходит на платформе Stepik. Берем всех, отбора нет.
❗️Для первой чати курса также есть возможность приобрести дополнительный пакет, в который входит индивидуальная поддержка от менторов и преподавателей в прохождении курса, а также дополнительные вебинары. Подробнее о нем читайте на нашем сайте.
Старт обучения — 21 сентября. В этот день откроется первое занятие и будет живой вводный вебинар.
Чтобы зарегистрироваться на курс, нажмите на кнопку "поступить" на нашем сайте.
Ссылки:
Наш сайт
Подробная программа и оргинформация обоих частей курса
Ответы на часто задаваемые вопросы (F.A.Q)
Наш YouTube (тут видео всех лекций и семинаров школы, а также открытые лекции и интервью)
Наша группа VK
🧡 Поддержать нашу школу на Boosty
Если остались вопросы, пишите нам на почту ([email protected]) или в комментарии под этим постом.
Ждём вас в чатике курса в новом семестре!
DLschool — это школа при ФПМИ МФТИ, где мы учим нейронным сетям с самых азов до продвинутого уровня. Полный курс состоит из двух частей, каждая из которых длится полгода.
- Первая часть посвящена введению в нейросети и компьютерному зрению. Начинаем с основ машинного обучения и нейросетей, переходим к CNN для обработки картинок, заканчиваем переносом стиля изображений и ГАНами. В этом семестре мы улучшили многие занятия, записали новые версии лекций и семинаров и обновили домашки.
- Вторая часть полностью посвящена обработке естественного языка (NLP). Начинаем с эмбеддингов слов и заканчиваем GPT-2,3, RLHF, RAG и другими актуальными темами вокруг LLM.
Сейчас идет набор на оба потока обучения — часть 1 (введение в DL + CV) и часть 2 (NLP).
Особенность нашей школы в том, что мы даем много практики (теория при этом тоже есть, разумеется, и немало). Вам предстоит много практических домашних заданий и самостоятельный итоговый проект в конце семестра. По окончании обучения вы точно получите нужные практические навыки работы с нейросетями. Больше информации об организации курса и программы обучения можно найти тут.
Преподаватели школы — ведущие специалисты российских и зарубежных IT-компаний и научные сотрудники исследовательских лабораторий. Среди них — я (Таня), буду вести у вас несколько лекций в обеих частях курса.
Школа бесплатная. Полностью онлайн: учиться можно из любой точки мира, где есть интернет. Занятия проходят раз в неделю — лекция, семинар и домашнее задание. Обучение проходит на платформе Stepik. Берем всех, отбора нет.
❗️Для первой чати курса также есть возможность приобрести дополнительный пакет, в который входит индивидуальная поддержка от менторов и преподавателей в прохождении курса, а также дополнительные вебинары. Подробнее о нем читайте на нашем сайте.
Старт обучения — 21 сентября. В этот день откроется первое занятие и будет живой вводный вебинар.
Чтобы зарегистрироваться на курс, нажмите на кнопку "поступить" на нашем сайте.
Ссылки:
Наш сайт
Подробная программа и оргинформация обоих частей курса
Ответы на часто задаваемые вопросы (F.A.Q)
Наш YouTube (тут видео всех лекций и семинаров школы, а также открытые лекции и интервью)
Наша группа VK
🧡 Поддержать нашу школу на Boosty
Если остались вопросы, пишите нам на почту ([email protected]) или в комментарии под этим постом.
Ждём вас в чатике курса в новом семестре!
Не знаю как я это пропустил, но спасибо ютубу и нейросетям 😁
https://www.youtube.com/watch?v=mgpWkLC2EjY&ab_channel=GovnovozFM
https://www.youtube.com/watch?v=mgpWkLC2EjY&ab_channel=GovnovozFM
Please open Telegram to view this post
VIEW IN TELEGRAM
YouTube
Говновоз, но поёт Аркадий Укупник [Udio ai]
Иногда вы заказываете оооооочень странные вещи #mashup #cover #говновоз #udio #sunoai #music
Скинуть автору на новый паспорт: https://www.donationalerts.com/r/govnovoz_fm
Наш телеграм с картиночками: https://www.tg-me.com/govnovoz_fm
Плейлист в вк музыке: htt…
Скинуть автору на новый паспорт: https://www.donationalerts.com/r/govnovoz_fm
Наш телеграм с картиночками: https://www.tg-me.com/govnovoz_fm
Плейлист в вк музыке: htt…
Forwarded from NLP Wanderer
Мы выпускаем в релиз свои лучшие модели и тулкит алайнмента. который использовался для их тренировки.
Итак, наш флагман - Vikhr-Nemo-12B-Instruct-R-21-09-24 (карточка на HF)
12B модель на основе Mistral-Nemo, с качеством на русском языке в некоторых задачах не хуже gpt-4o-mini и имеет 128к токенов контекста, была специально заалайнена под решение широкого спектра задач на реальных и синтетических вопросах пользователей, включая код, математику, суммаризацию, ризонинг, ответы в специальном формате (JSON/HTML и тд) и многие другие.
Модель получила винрейт 79.8 (относительно gpt-3.5-turbo) на оффлайн бенчмарке Ru-General-Arena, что лучше любой текущей опенсорс модели до 30В для русского языка.
Для достижения такого качества мы собрали большой инструктивный датасет со втроенным CoT, что позволило сильно прочкать ризонинг модели, далее обучили Reward модель, сделали Rejection Sampling и применили собственный метод SMPO (вариация DPO) для выполнения преференс-тюнинга.
Вторая модель - Vikhrmodels/Vikhr-Llama3.1-8B-Instruct-R-21-09-24 (карточка на HF)
Так же обучена Llama-3,1-8B и имеет аналогичный размер контекста в 128k токенов. Винрейт на Ru-Arena-General - 63.9, что делает ее одной из лучших 8B моделей дла русского языка.
Модели обучены работать с RAG
Обе модели имеют уникальную особенность - они заалайнены для работы с RAG, т.е. используя системный промпт и спец. роль documents, вы сможете подавать ей документы в стандартизированной форме (JSON). При этом сам текст каждого документа может быть грязным чанком HTML, Markdown или Plain text формата до 4к символов каждый.
Модели умеют выделять информацию из предоставленных документов самостоятельно, реализуя таким образом "реранкер" на уровне LLM. Это сделано за счет двух-этапного ответа. Первый ответ модели представляет из себя JSON со списокм релевантных идентификаторов документов, а второй, если юзер его запросит, будет уже текстовым ответом модели на вопрос пользователя.
Благодаря такому обучению, на нашем бенчмарке для RAG (судья gpt-4o) Vikhr-Nemo показала качество в RAG задачах даже лучше, чем gpt-4o-mini (цифры в карточках моделей)
SMPO - Simple Margin Preference Optimization
Наш собственный метод выравнивания, разработанный для стабилизации прцоесса PO. Этот метод во многом заимствует идеи IPO, SimPO, C-RLFT, а также содержит собственную функцию потерь для разделения выбранных и отклоненных пар, отказываясь от классической сигмойды.
Основная идея метода заключается в стремлении плавно достичь желаемого уровня margin, не заставляя модель переобучаться, в том числе с помощью добавления балансирующего SFT лосса для выбранных и отклоненных вариантов одновременно.
Тулкит на Github - effective_llm_alignment
Репозиторий содержит скрипты и конфиги которые использовались для всех этапов обучения моделей. он позволяет удобно работать с основными методами алайнмента для LLM, включая наш SMPO.
Больше подробностей о моделях, как с ними работать, бенчмарках, процедуре обучения, вы можете найти в их карточках на HF.
Поиграться с Vikhr-Nemo-12B можно в tg bot_e (@vikhrbot), Gradio инференс
Please open Telegram to view this post
VIEW IN TELEGRAM