MLPops
788 subscribers
424 photos
120 videos
5 files
180 links
We are ML&MLOps community based in 🇷🇺Russia

Наш чат - t.me/+qJm7Ak4nU4EwZmJi
Download Telegram
🏗️ Модель Архитектуры C4: Ключ к Пониманию и Документированию Систем

🔍 Что такое Модель C4?
Модель C4 – это подход к визуализации и документированию архитектуры программных систем. Она разбивает сложные системы на четыре уровня: Контекст, Контейнеры, Компоненты и Код. Это позволяет легко понимать, обсуждать и разрабатывать архитектурные решения.

🌐 Контекст
На этом уровне мы рассматриваем внешнее окружение системы: основные пользователи и взаимодействия.

📦 Контейнеры
Этот уровень фокусируется на приложениях и данных, составляющих систему, и их взаимодействиях.

🔩 Компоненты
Тут мы детализируем структуру отдельных приложений или сервисов внутри контейнеров.

👨‍💻 Код
Последний уровень - это реализация конкретных компонентов системы.

Почему это Важно?
Модель C4 помогает архитекторам, разработчикам и заинтересованным сторонам лучше понять структуру и динамику системы, что важно для эффективной работы и сопровождения.

📚 Хотите Узнать Больше?
Подробнее об этой модели читайте в статье! 👇

🔗 Полная Версия Статьи
Андрей Карпатый в очередной раз берет и выкатывает часовую лекцию «Интро в большие языковые модели».

Не пропустите, это must-watch! 🚀

Часть 1: LLMs
00:00:00 Intro: Large Language Model (LLM) talk
00:00:20 LLM Inference
00:04:17 LLM Training
00:08:58 LLM dreams
00:11:22 How do they work?
00:14:14 Finetuning into an Assistant
00:17:52 Summary so far
00:21:05 Appendix: Comparisons, Labeling docs, RLHF, Synthetic data, Leaderboard

Часть 2: Future of LLMs
00:25:43 LLM Scaling Laws
00:27:43 Tool Use (Browser, Calculator, Interpreter, DALL-E)
00:33:32 Multimodality (Vision, Audio)
00:35:00 Thinking, System 1/2
00:38:02 Self-improvement, LLM AlphaGo
00:40:45 LLM Customization, GPTs store
00:42:15 LLM OS

Часть 3: LLM Security
00:45:43 LLM Security Intro
00:46:14 Jailbreaks
00:51:30 Prompt Injection
00:56:23 Data poisoning
00:58:37 LLM Security conclusions


Преза
🤖 Разбираем Типы Инференса ML Моделей - От Batch до Real-Time!

🧠 Инференс в ML - это когда обученные модели применяются к новым данным для выводов и предсказаний. Каждый тип подходит для разных сценариев использования:

1️⃣ Batch Inference: Идеален для больших объемов данных, обрабатываемых за один раз. Основные преимущества - эффективность, масштабируемость и снижение стоимос​​ти.

2️⃣ Asynchronous Inference: Отлично подходит для обработки запросов, не требующих мгновенного ответа, позволяя системе обрабатывать другие зада​​чи.

3️⃣ Serverless Inference: Обработка данных моделью ML без необходимости поддержания сервера. Вычислительные ресурсы выделяются динамически, что упрощает управление инфраструктур​​ой.

4️⃣ Real-Time Inference: Для приложений, требующих быстрой обработки данных и предоставления результатов в реальном времени. Критично для приложений, требующих немедленного реагирован​​ия.

🔗 Узнайте больше о каждом типе и их применении в полной статье: Типы Инференса ML Моделей
Кек дня
Twitch разрешил стримить сексуальный контент — для него будет специальная пометка

С пометкой «Сексуальная тематика» теперь разрешены:
• Контент, который «намеренно подчеркивает грудь, ягодицы или тазовую область»;
• Эротические танцы, включающие в себя раздевание или демонстративные жесты, например, стриптиз.
• Вымышленные (нарисованные, анимированные или скульптурные) полностью обнаженные женские груди и/или гениталии или ягодицы независимо от пола;

Мастурбация и вымышленные сексуальные акты остались под запретом

Контент со следующими метками больше не будет включаться в рекомендаций на главной странице:
• Сцены насилия и графические изображения;
• Азартные игры;
• Сексуальные темы.
• Наркотики, опьянение, чрезмерное употребление табака;

Игры, в которых нагота, порнография, секс или сексуальное насилие являются основной темой или функцией, полностью запрещены. Играм, в которых наготы нет или её мало и она случайна — потребуется метка контента для взрослых.

Бонгокамс подвинься
⚡️Google релизнул Imagen 2.

Есть только блогпост да и только. Есть сильное улучшение по сравнению с Imagen 1, но пока нельзя сказать за счет чего достигли столь хороших результатов. Статьи нет.

Обещают реализм и text faithfulness, то есть модель будет более точно следовать текстовому запросу.

Доступна модель только через Imagen API in Google Cloud Vertex AI.
StabilityAI релизнули новый генератор 3D моделей из картинки.

Релиз основан на базе другого генератора - Zero123. Чекпоинт дообучен на датасете из 800.000 3D объектов.
По сути ничего нового, конечно, просто хорошая база NERF и качественный набор исходников.
Запустить уже можно сейчас, но для работы надо 24Гб VRAM.

Блог о релизе
Модель в хагингах
Для подписоты планирую сделать очередное улучшение аниме.
Вышли новые модели, да и более подробнее разобрался в теме, и связи появились с щаряшими командами.


Вопрос какое аниме в этот раз взять? 
Предложения в комменты.
Начал потихоньку сравнивать модели, пока тестирую на онидхзуке в 480п

Модельки пока такие TAH, Swin2SR,а внизу оригинал

В принципе, если дообучить сетки на похожих новых аниме, то можно улучшить качество.

Так же позамерял LPIPS везде в районе 0.06
По итогам выбора аниме на улучшение выиграл "Ковбой Бибоп".

Осталось выбрать озвучку. Предлагайте

А так же накидайте в комменты похожие аниме, главное что бы 4К/1080p было, будем использовать для дообучения в сайфай домене.