Cuckoo Hashing 😉

Я думал Google Colab – это лучшее, что есть по сей день для быстрого и простого DS/ML, как среда разработки.

Я был неправ. Встречайте DeepNote: https://deepnote.com

Он на рынке уже довольно давно, но я начал пользоваться им со своей командой по capstone project в универе неделю назад.

Нужно работать вместе над одним ноутбуком? Изи, DeepNote не начинает лагать ужасно как Colab. Нужно подключить notebook к сторонней базе данных? Делается в два клика. Нужно запустить SQL query и сохранить в Pandas dataframe? У DeepNote всё это есть, и не только.

В общем, офигенный продукт. Пользуйтесь на здоровье. Единственное НО – вроде использование GPU будет платным.

Кстати, наш проект спонсирует Merck & Co. Inc. – фармацевтический гигант, который по весу 19-ый в списке S&P 500. В целом, проект интересный. По сути позволяет почувствовать полный workflow Machine Learning Engineer-а: от создания модели до её деплоймента. Причём сама проблема, над которой мы работаем, ещё не была решена компанией, поэтому наш спонсор очень мотивирован работать с нами.

К сожалению, много про проект рассказать не могу из-за конфиденциальной информации.

Сегодня OpenAI наконец-то выпустили API для ChatGPT и Whisper (speech-to-text). Надо будет обновить код своего Podcast Notes Generator.

https://openai.com/blog/introducing-chatgpt-and-whisper-apis

Just segmented my first (and I hope last) lung airway!!! Looks like a tree branch tho

Tomorrow’s gonna be lit 🎸🔥 Any John Mayer fans?

На этой неделе закончил свои консультации, общее число которых составило 22.

Общаться со своей аудиторией вживую это очень приятно. Было не мало встреч, где происходил интересный обмен информацией и дискуссии, поэтому спасибо всем за участие!

Ещё я очень удивился, что участники консультаций были из совершенно разных возрастных групп (были и школьники, и студенты бакалавра, и магистратуры, и даже профессионалы из сферы образования), и разных стран (Казахстан, Узбекистан, Кыргызстан, некоторые уже в США).

Посмотрим, может в будущем я сделаю что-то ещё подобное таким встречам.

У Delta Airlines лучший бесплатный WiFi на борту.

До этого летал через United и был удивлен, когда мог пользоваться бесплатным интернетом — но он был ограничен только сообщениями.

Delta же, даёт полный доступ к интернету. Капец кайф, особенно когда ты купил билеты на мили.

Позавчера был на концерте John Mayer-а, на его первом выступлении Solo Tour.

Не перестаю восхищаться тем, насколько John талантливый музыкант. Весь концерт на сцене он был только один и пел и играл одновременно на акустической гитаре, клавишах, гармонике и электро-гитаре.

Особенное наслаждение от любого концерта происходит тогда, когда артист начинает играть твою любимую песню, и ты понимаешь, что девушка спереди, чувак слева от тебя, да и вообще весь зал знает слова – которые имеют для всех какой-то особенный смысл в жизни.

https://www.instagram.com/p/Cpsqrmauefq/

Интересная статья. Я думал, что такое только в универе происходит

https://emaggiori.com/employed-in-tech-for-years-but-almost-never-worked/

Лол, смогли понаблюдать запуск ракеты Falcon 9 пока летели с Флориды. SpaceX запустили её буквально 15 минут назад. Ниже видео с самолёта

После того как я стал со-автором статьи, мне начали приходить приглашения на конференции с обращением “Dr.”

Мелочь, но приятно :))

Go and check these events out: https://amazonstudentevents.splashthat.com/SP

Amazon CodeWhisperer теперь бесплатный 🥳 Не знаю насколько он лучше Copilot, поэтому put your thoughts down below 👇

https://aws.amazon.com/codewhisperer/

Вчера был introductory meeting с моим менеджером в Амазоне/AWS. Не смотря на то, что стажировка начинается только через две недели, где-то за месяц до её начала Amazon Student Programs представляют вас с менеджером, который будет руководить процессом вашей стажировки.

Обычно менеджеры - это работники на позиции Software Development Manager (SDM), которые уже руководят одной из команд состоящей из Software Development Engineers (SDE).

Команда в которой буду я занимается ML at Edge – линия продуктов от AWS которые помогают бизнесам использовать инструменты машинного обучения локально на своих девайсах. В общем, как раз сочетается с моим background в ML.

Подробнее о стажировке расскажу в будущем если интересно.

Клянусь, это был не мой баг! Но было прикольно наблюдать за этим всем изнутри:

https://www.foxbusiness.com/markets/amazon-web-services-suffers-hours-long-outage.amp

Check this out:

https://twitter.com/dsiroker/status/1684185699996831744?s=46&t=Xqv-8tHUNkdwwhoJQlQOjQ

Вчера официально прошло ровно 2 месяца с момента моего начала работы в AWS.

В целом, время пролетело очень быстро. Объем знаний который я получил за этот довольно небольшой период сложно измерить, но теперь я понимаю насколько важно пройти стажировку перед началом фулл-тайм работы.

Быть стажёром – это своего рода привилегия в компании. У тебя по-сути есть бенефиты полноценного работника, но с твоих плеч снимают ответственность, если ты что-то сломал или не так сделал. Если у тебя есть доступ к продакшену, то виноваты инженеры или руководство, которые тебе его дали. Если ты запушил изменения, которые что-то сломали – всё норм, это learning process. Такая среда помогает тебе развиваться без какого-либо стресса.

Конечно, во время стажировки я пытаюсь быть как можно более похожим на фулл-тайм работника, и Амазон это поощряет. В начале стажировки вам дают критерии по которым вас будут оценивать на протяжении всей стажировки (для меня это были критерии L4 инженера), и конечно же Leadership Principles. Главные leadership principles для стажёра – это learn and be curious, deliver results и bias for action.

Стажировка в Амазоне (для SDE) - очень структурирована. Структуру и таймлайн в принципе задаёте вы, но весь процесс обязательно проходит по следующему принципу:

• 1-2 недели: onboarding process. Вы ознакомляетесь с командой, организацией и возможностями в Амазоне. Проходите тренинги (я прошел наверное больше 30). Кстати, обязательно туда входит курс по ML. Менеджер вам назначает onboarding buddy (как правило новенький инженер), и ментора (обычно Senior Dev со стажем 5+ лет). С каждым из них у вас 1:1 два раза в неделю, и один раз с менеджером, где вы обсуждаете прогресс.

• 3-8 недели: project implementation. Сначала вам дают проект. Описание очень vague и вы должны разобраться, как подходить к решению проблемы. Задаёте вопросы ментору, инженерам в команде, инженерам из других команд, и делаете Design document. Потом назначаете встречу со всеми stakeholders и они прожаривают ваш дизайн. Получаете обратную связь и улучшаете дизайн. Кстати, не каждый фидбэк нужно принимать. Мой менеджер сказал: “Feedback is like a gift, you may or may not take it”. Дальше начинаете приступать к написанию кода (я понял что это самая легкая часть).

Процесс разработки очень удобный, так как у Амазона есть много internal tools, чтобы процесс был наиболее легким. Узнал много нового про code reviews, пайплайны и сервисы AWS.

• 9 неделя: тестирование. Ваш код будет тестироваться в пайплайне.

• 10 неделя: документация.
• 11 неделя: презентация
• 12 неделя: off-boarding

Для меня таймлайн выглядел немного по-другому, так как я за неделю закончил onboarding, за неделю справился с дизайном, и за 2 недели закончил 80% всего проекта. Оставшееся время я работал над новыми фичами в моем проекте (так называемые stretch goals).

Не могу не взять во внимание то, что мне попалась действительно хорошая команда, которая постоянно помогала и поддерживала меня на протяжении всего пути. Общаясь с другими стажерами, я понял, что с командой может не повезти.

Ещё я понял, что как и во многих вещах, чем больше ты узнаешь, тем больше ты понимаешь сколько всего ты не знаешь. До стажировки, во время учёбы, я всё чаще и чаще думал, что software development - это монотонная и скучная работа. Теперь я вижу, что на самом деле я мало чего знаю в разработке, и это мотивирует.

Если есть более specific questions, feel free to ask in the comments section.

Opinions expressed are solely my own and do not express the views or opinions of my employer.