🖥 Paramiko — библиотека, реализующая протокол SSHv2 на языке Python!

🌟 Эта библиотека предоставляет функциональность как для SSH-клиентов, так и для серверов, включая такие возможности, как удаленное выполнение команд и безопасная передача файлов. Она используется как основа для более высокоуровневых инструментов, таких как Fabric, которые предназначены для автоматизации задач администрирования серверов.

🔐 Лицензия: LGPL-2.1

🖥 Github

@devopsitsec

🖥 neohtop — это современная кроссплатформенная утилита для мониторинга системы, созданная с использованием Svelte, Rust и Tauri!

🌟 Она расширяет возможности классического htop, предлагая современный интерфейс с темной и светлой темами, мониторинг CPU и памяти в реальном времени, поиск и фильтрацию процессов, управление процессами (включая их завершение), а также автообновление системной статистики.

🔐 Лицензия: MIT

🖥 Github

@devopsitsec

🖥 Uptime Kuma — это платформа для мониторинга состояния серверов и сервисов, предлагающая визуальные отчеты и уведомления о простоях и ошибках. Она поддерживает различные виды мониторинга, включая HTTP, TCP, и DNS, а также уведомления через Telegram, Discord и другие каналы. Интерфейс интуитивен и ориентирован на удобство использования, позволяя легко отслеживать статус работы сервисов.

🔐 Лицензия: MIT

🖥 Github

@devopsitsec

🖥 Cosmos-Server — решение для безопасного и удобного само-хостинга домашних серверов!

🌟 Он служит защищённым шлюзом к приложениям, а также менеджером серверов. Cosmos предназначен для минимизации уязвимостей в приложениях и персональных серверах, предоставляя встроенные функции безопасности.

🔍 Ключевые особенности:

🌟 App Store для установки приложений, автоматических обновлений и проверок безопасности.

🌟 Управление хранилищем с поддержкой Parity Disks и MergerFS.

🌟 Реверс-прокси с автоматическим HTTPS.
Сервер аутентификации с поддержкой 2FA, OpenID и других методов.

🌟 Менеджер контейнеров с интеграцией Docker.


🔐 Лицензия: Apache-2.0

🖥 Github

@devopsitsec

📞 Plumbum — библиотека для Python, которая упрощает выполнение команд в стиле shell и их обработку в коде!

💡 Эта библиотека предоставляет интерфейсы для выполнения системных команд, построения конвейеров (pipelines), управления процессами и работы с удалёнными серверами через SSH. Plumbum задуман как мощный инструмент для автоматизации задач, объединяя понятный синтаксис Python и функциональность shell.

🔍 Основные возможности Plumbum:

🌟 Вызов системных команд: Команды представляются как объекты, которые можно вызывать, передав параметры так, как это делается в командной строке.

🌟 Пайплайны и перенаправление ввода/вывода: Поддержка гибкого перенаправления стандартных потоков и построения пайплайнов.

🌟 SSH-интерфейс: Управление удалёнными хостами через SSH, включая выполнение команд на удалённой машине.

🌟 Локальные и удалённые команды: Возможность однородного вызова локальных и удалённых команд.

🌟 Обработка ошибок: Исключения для различных ошибок выполнения команд.

🔐 Лицензия: MIT

🖥 Github

@devopsitsec

📞 delta — командная утилита для улучшенного отображения разницы между версиями кода!

⭐️ Delta позволяет более удобно визуализировать результаты команд git diff, git blame, и grep, делая их более понятными и визуально приятными. Основные функции включают в себя нумерацию строк, подсветку синтаксиса, поддержку бокового отображения (side-by-side), улучшенную обработку конфликтов при слиянии и поддержку гиперссылок для ссылок на изменения.

⭐️ Delta легко интегрируется в привычный рабочий процесс Git, и его можно настроить, добавив соответствующие параметры в файл ~/.gitconfig.

🔐 Лицензия: MIT

🖥 GitHub

@devopsitsec

🤓 Git Town — инструмент для оптимизации рабочих процессов с Git, ориентированный на команды разработчиков!

🌟 Git Town предоставляет возможности для автоматизации часто выполняемых операций, таких как синхронизация веток, слияние изменений и управление иерархией веток. Этот инструмент помогает минимизировать количество ручных действий, повышая производительность и снижая вероятность ошибок в работе с Git.

🌟 Git Town также предлагает интеграцию с GitHub Actions, которая позволяет визуализировать "стек изменений" (stacked changes) при создании или обновлении pull-реквестов, упрощая навигацию между связанными ветками.

🔐 Лицензия: MIT

🖥 Github

@devopsitsec

🖥 Полезный репозиторий-роадмап по DevSecOps!

🔐 Лицензия: MIT

🖥 Github

@devopsitsec

⚡️Выбор правильного архитектурного шаблона имеет решающее значение для создания масштабируемых, поддерживаемых и высокопроизводительных приложений.

Представляем вам крутую шпаргалку по шести основным архитектурным шаблонам, каждый из которых подходит для разных сценариев.

💬 𝟭. 𝗠𝗼𝗻𝗼𝗹𝗶𝘁𝗵𝗶𝗰 𝗔𝗿𝗰𝗵𝗶𝘁𝗲𝗰𝘁𝘂𝗿𝗲
Это самый простой и традиционный подход, при котором все компоненты связаны между собой в единой кодовой базе. Монолитная архитектура проста и идеально подходит для небольших приложений, не требующих обширной масштабируемости. Однако по мере роста систем ее масштабирование, тестирование и поддержка могут стать сложными. Идеально подходит для стартапов или небольших команд, ищущих быструю разработку.

💬 𝟮. 𝗠𝗶𝗰𝗿𝗼𝘀𝗲𝗿𝘃𝗶𝗰𝗲𝘀 𝗔𝗿𝗰𝗵𝗶𝘁𝗲𝗰𝘁𝘂𝗿𝗲
Любимый вариант для больших сложных приложений, которым требуется масштабируемость и гибкость. Здесь приложение разделено на независимо развертываемые сервисы, каждый из которых обрабатывает определенные бизнес-функции. Микросервисы позволяют командам использовать различные технологические стеки и масштабировать сервисы независимо. Этот шаблон популярен в приложениях с высоким трафиком и организациях, которым нужна свобода для независимого развертывания функций.

💬 𝟯. 𝗖𝗼𝗻𝘁𝗿𝗼𝗹𝗹𝗲𝗿-𝗪𝗼𝗿𝗸𝗲𝗿 𝗔𝗿𝗰𝗵𝗶𝘁𝗲𝗰𝘁𝘂𝗿𝗲
Этот шаблон разделяет задачи на контроллеры и рабочие. Контроллер управляет взаимодействиями с пользователем, в то время как рабочие выполняют фоновые задачи, такие как обработка данных, создавая систему, которая является высокомасштабируемой и эффективной. Идеально подходит для приложений, которым необходимо выполнять интенсивные фоновые задания, такие как обработка заказов, аналитика в реальном времени или уведомления.

💬 𝟰. 𝗠𝗼𝗱𝗲𝗹-𝗩𝗶𝗲𝘄-𝗖𝗼𝗻𝘁𝗿𝗼𝗹𝗹𝗲𝗿 (𝗠𝗩𝗖)
Классический шаблон, обычно используемый в веб-приложениях, MVC разделяет логику приложения (модель), пользовательский интерфейс (представление) и взаимодействие (контроллер). Такое разделение задач упрощает поддержку и обновление определенных частей, не затрагивая всю систему. MVC является популярным выбором для приложений, которым требуются пользовательские интерфейсы, особенно в сферах электронной коммерции и управления контентом.

💬 𝟱. 𝗘𝘃𝗲𝗻𝘁-𝗗𝗿𝗶𝘃𝗲𝗻 𝗔𝗿𝗰𝗵𝗶𝘁𝗲𝗰𝘁𝘂𝗿𝗲
Идеально подходит для систем, которым необходимо реагировать на определенные действия или события, такие как щелчки пользователя, обновления базы данных или показания датчиков. В этом шаблоне компоненты реагируют на события асинхронно, что делает его масштабируемым и слабосвязанным. Архитектура, управляемая событиями, отлично подходит для приложений со сложными рабочими процессами или асинхронными потребностями в обработке, такими как IoT, аналитика в реальном времени и системы уведомлений клиентов.

💬 𝟲. 𝗟𝗮𝘆𝗲𝗿𝗲𝗱 𝗔𝗿𝗰𝗵𝗶𝘁𝗲𝗰𝘁𝘂𝗿𝗲
Организует приложение по слоям (Презентация, Бизнес, Доступ к данным и Инфраструктура) для создания четкого разделения интересов. Каждый слой отвечает за определенный аспект, делая систему более обслуживаемой и тестируемой. Многоуровневый подход часто используется в корпоративных приложениях и идеально подходит для создания четкой стандартизированной структуры во всей системе.

📂 Сохраняем

#doc #web #cheatsheet

@devopsitsec

🖥 bocker — минималистичная реализация контейнерного движка Docker на основе Bash-скриптов!

🌟 Основная цель проекта — продемонстрировать базовые принципы работы Docker, используя только стандартные инструменты Unix. Этот проект не предназначен для реального использования в производственных средах, но он предоставляет ценную возможность для обучения концепциям контейнеризации.

🔐 Лицензия: GPL-3.0

🖥 Github

@devopsitsec

🔥 k6 — это инструмент с открытым исходным кодом для нагрузочного тестирования, созданный для выполнения сложных сценариев тестирования API, веб-приложений и других систем! Он поддерживает JavaScript для написания тестов и предоставляет возможность сбора метрик производительности, что делает его мощным средством для анализа производительности систем.

🔍 Основные возможности k6:

🌟 Сценарии нагрузочного тестирования: k6 позволяет моделировать сложные сценарии нагрузки, включая параллельные запросы, ожидания и время выполнения.

🌟 Масштабируемость: Подходит как для локального использования, так и для тестирования в облаке.

🌟 Интеграция с CI/CD: Подходит для автоматизации тестов в конвейерах DevOps.

🌟 Работа через Docker: Предоставляются Docker-образы для легкого развертывания.

🌟 Поддержка gRPC, WebSocket и HTTP/2.

🔐 Лицензия: AGPL-3.0

🔗 Сайт проекта: *клик*
🖥 Github

@devopsitsec

🖥 Очень глубокое погружение в Docker-сборки!

🌟 Контейнеры повсюду. От Kubernetes для оркестровки развертываний и упрощения операций до Dev Containers для гибких, но воспроизводимых сред разработки. Тем не менее, несмотря на их повсеместность, образы часто создаются неоптимально. В этой статье мы рассмотрим полный пример сборки Docker для приложения Python и какие передовые практики следует учитывать.

🔗 Ссылка: *клик*

@devopsitsec

👣 k8e — минималистичный и облегчённый дистрибутив Kubernetes!

🌟 Основная цель проекта — предоставить легковесное и простое в использовании решение для управления Kubernetes, которое может быть адаптировано для локальных и облачных сценариев. Этот проект вдохновлён Rancher K3s и стремится минимизировать размер и сложность установки, сохраняя функциональность Kubernetes.

🔐 Лицензия: Apache-2.0

🖥 Github

@devopsitsec

🔥 geeksforgeeks.org — невероятно полезный сайт с огромным числом справочных материалов, курсов и подготовкой к собеседованиям во всевозможных отраслях IT!

🔗 Ссылка: *клик*

@devopsitsec

🤓 Terrateam — инструмент GitOps, интегрированный с Terraform и GitHub, для управления инфраструктурой как кодом (IaC)!

🌟 Он позволяет автоматизировать планирование, применение и мониторинг изменений инфраструктуры через GitHub pull requests и Actions. Основная идея — упростить управление IaC, обеспечивая полную прозрачность и возможность совместной работы через GitHub.

🌟 Terrateam поддерживает несколько окружений (например, dev, staging, prod), обнаружение дрейфа инфраструктуры и строгие меры безопасности, такие как RBAC и OpenID Connect для аутентификации. Также реализованы функции параллельных операций, блокировки конфликтов и прогнозирования стоимости.

🔐 Лицензия: MPL-2.0

🖥 Github

@devopsitsec

🖥 dbnd — инструмент для управления и отслеживания данных в рабочих процессах! Этот проект предлагает фреймворк для конструирования, мониторинга и анализа работы data engineering команд.

🔍 Основные функции:

🌟 Трекер данных — отслеживает происхождение данных, их использование и зависимости между компонентами.

🌟 Оркестрация — управление сложными рабочими процессами, включая автоматизацию их выполнения.

🌟 Интеграция — поддерживает существующие инструменты, такие как Apache Airflow, и предлагает расширенные возможности для мониторинга.

🌟 Обсервация данных — помогает выявлять и исправлять ошибки в процессах обработки данных.

🔐 Лицензия: Apache-2.0

🖥 Github

@devopsitsec

🔥 Keep — полезный инструмент для управления инженерными оповещениями!

🌟 Он позволяет командам разработчиков и DevOps эффективно фильтровать, группировать и анализировать инциденты, предоставляя мощные инструменты визуализации и интеграции. Keep собирает оповещения из различных систем мониторинга и автоматизации, включая Prometheus, Datadog, Sentry, и другие, а затем предоставляет контекст для их анализа.

🌟 Основные функции Keep включают настройку уведомлений, создание аналитических дашбордов, а также возможность интеграции с внешними API. Он ориентирован на улучшение реакции на инциденты и минимизацию шума от незначительных событий, помогая командам сосредотачиваться на решении критических проблем.

🖥 Github

@devopsitsec

✔️ Уязвимости в инструментах машинного обучения.

Уязвимости, обнаруженные компанией JFrog в популярных инструментах машинного обучения с открытым исходным кодом: MLflow, H2O, PyTorch и MLeap, позволяют злоумышленникам использовать клиентские библиотеки машинного обучения, которые работают с Safetensors.

Взлом клиента машинного обучения позволяет получить доступ к учетным данным реестра моделей и внедрить вредоносный код. Среди обнаруженных уязвимостей - недостаточная санитизация в MLflow (CVE-2024-27132), небезопасная десериализация в H2O (CVE-2024-6960), проблема с обходом пути в PyTorch и уязвимость Zip Slip в MLeap (CVE-2023-5245).
thehackernews.com

✔️OPENAI представили reinforcement finetuning для o1 (RFT).

Этот метод отличается от обычного файнтюнинга (или файнтюнинга с учителем) тем, что он позволяет обучать модель думать определённым образом в конкретной области, важной для пользователя.
Подробнее

✔️ Apple планирует изменить конструкцию памяти iPhone для повышения производительности ИИ.

Компания планирует внедрить дискретную упаковку памяти в iPhone, начиная с 2026 года, чтобы повысить производительность ИИ на устройстве. Samsung, поставщик компонентов памяти Apple, уже начал проводить исследования, чтобы удовлетворить запрос Apple. Сейчас iPhone использует упаковку типа «пакет-на-пакете» (PoP), где DRAM LPDDR размещается непосредственно на "системе-на-кристалле" (SoC).

Переход на дискретную упаковку позволит увеличить количество контактов ввода-вывода, повышая скорость передачи данных и количество параллельных каналов данных. Это улучшит пропускную способность памяти и возможности ИИ и также улучшает теплоотвод. Однако это изменение может потребовать уменьшения размера SoC или аккумулятора, а также увеличить энергопотребление и задержку.
macrumors.com

✔️ Google DeepMind представит более 100 научных работ на NeurIPS 2024.

Google DeepMind примет участие в 38-й ежегодной конференции по нейронным системам обработки информации (NeurIPS), которая пройдет с 10 по 15 декабря в Ванкувере, где представит более 100 новых научных работ по темам: агенты ИИ, генеративные медиа, инновационные подходы к обучению. В рамках конференции запланированы живые демонстрации Gemma Scope, ИИ для создания музыки, модели прогнозирования погоды, системы CAT3D и Android Control.
deepmind.google

✔️ PlayerUnknown представил 2 новые игры, основанные на машинном обучении.

Разработчик PlayerUnknown анонсировал две новые игры, основанные на технологиях Ai и ML: Preface: Undiscovered World и Prologue: Go Wayback.

Preface: Undiscovered World доступна в раннем доступе в Steam и представляет собой техническую демонстрацию процедурно генерируемых миров. Prologue: Go Wayback – это "выживалка", в которой погода и окружающая среда непосредственно влияют на исследование мира игроком. Обе игры служат «строительными блоками» для будущих проектов PlayerUnknown Productions и предназначены для сбора отзывов пользователей.
dualshockers.com

✔️ Китай представил сверхпроводящий чип с 504 кубитами.

Китай представил свой самый передовой квантовый компьютер «Tianyan-504» с 504-кубитным чипом «Xiaohong», разработанным в партнерстве с Китайской академией наук и компанией QuantumCTek. «Tianyan-504» устанавливает новый национальный рекорд, преодолевая порог в 500 кубитов, и конкурирует с IBM, по показателям производительности, времени жизни кубита и точности считывания. «Tianyan-504» будет интегрирован с квантовой облачной платформой China Telecom «Tianyan», запущенной в 2023 году, чтобы обеспечить глобальный доступ к возможностям квантовых вычислений. Платформа «Tianyan» уже привлекла более 12 миллионов посещений пользователей из более чем 50 стран.
thequantuminsider.com

@ai_machinelearning_big_data

#news #ai #ml

🖥 Большой бесплатный практический курс по Haskell MetaLamp

Этот ресурс создан, чтобы предложить вам тестовые задания для изучения Haskell на пркатике.

⚡️ Программа обучения полностью открыта и доступна бесплатно для всех.

Всего заданий пять, и они достаточно объёмные.

🕘 Даже при интенсивном темпе прохождения курса потребуется примерно 5 месяцев.

Задания нацелены на систематическое освоение основ и принципов Haskell разработки.

Одной из самых грубых ошибок при обучении является стремление сразу погрузиться в сложные практические задачи и начать осваивать множество высокоуровневых технологий (таких как веб-фреймворки), требующих значительного времени на изучение документации. Но без прочного фундамента лучше не углубляться в подобные темы 😊

Поэтому вы начнете с основ: изучение самого языка, ключевых шаблонов проектирования и архитектурных принципов. После этого перейдете к самым простым технологиям ( веб-серверам, примитивным обёрткам для работы с базами данных и т.п.).

Завершающим этапом становится масштабная переработка кода на основе множества различных источников и анализ ваших GitHub-репозиториев с созданием issue-заданий.

🌟 Кроме того, авторы поддерживают подход, согласно которому новичкам не следует сразу включаться в реальные проекты до тех пор, пока они не выполнят несколько своих собственных проектов размером хотя бы на 2–3 тысячи строк кода.

Погружаясь слишком рано в реальный проект, существует высокий риск потеряться в сложном и незнакомом коде, утратить мотивацию, а самое важное — приобрести фрагментарный и бессистемный опыт, поскольку задачи будут крайне специфическими, а процесс обучения — неравномерным.

В результате, даже если стажёр сохранит свою мотивацию, его знания окажутся менее глубокими, чем у коллеги, который начал с нуля и последовательно выполнил несколько самостоятельных проектов.

Эта стажировка должна стать отличным опытом для вас!

🖥 Курс

@haskell_tg