DevBrain

ML Research Engineer GOAT.Al 4.000 to 5.000 USD NET per month Almaty Office GOAT.Al is a research lab on Human <> AI engagement. The team behind the popular app GoatChat.Al. We are working on solving the problems of large language models, including hallucination, mode collapse, and context length limitations. Responsibilities: • Conduct cutting-edge research on large language models • Write and publish academic papers describing new research Requirements: • Broad knowledge of academic research in the field of deep learning, with a focus on the latest trends and papers • Experience with PyTorch and related frameworks like DeepSpeed and HuggingFace • Knowledge of state-of-the-art training techniques, including mixed-precision training • Proficiency in MLOps and experience with distributed training Optional skills: Experience with natural language processing (NLP) or reinforcement learning (RL) is preferred, but not required. Contacts: 📧 yerzat.d@goat.ai @rempact

Beeline Data Engineering Meetup: Решение бизнес-задач с помощью данных 🗓18 июля, 17:00 (МСК, GMT +3) 🌐Онлайн В программе: ✔️ Максим Петров — «ETL Pipelines как микросервисы» Внедрение микросервисов на ETL-потоках для создания системы со встроенными аналитическими возможностями.  ✔️ Андрей Чучалов — «Как оптимизировать параметры запуска приложения Spark — ищем проблемы и повышаем производительность» Доклад о том, как выявить ошибочную конфигурацию приложения, рассчитать параметры работы и эффективно использовать ресурсы кластера.  ✔️ Владислав Шевченко, Оксана Солдатова — «Как мы управляем данными с помощью каталога данных» Как в Альфа-Банке и билайне выбирался и внедрялся каталог данных: что от него ожидали и что фактически получилось. Вы сможете задать вопросы спикерам и подискутировать с другими участниками. Авторы лучших вопросов получат подарки🎁 А еще будет разыгран онлайн-билет на конференцию SmartData 🔥 Участие бесплатное. Нужно только зарегистрироваться.

Доклады с DjangoCon Europe 2023: — Squeezing Django performance for 14.9 million users on WhatsApp — Building and scaling a live event platform with django-channels — Tuning PostgreSQL to work even better — Good form: How Django’s form rendering improved during the 4.x series Выше список наиболее интересных с моей т.з. докладов с прошедшей конференции. Полный список можно посмотреть тут.

В сети появились долгожданные доклады с прошедшей в конце апреля конференции PyCon US 2023: https://bit.ly/3WLW0oG

Бесплатный курс об изучении языка Rust. Курс рассчитан на 12 полных недель. Каждую неделю открывается новый материал для изучения, сейчас доступен материал 1-й недели.

Django 4.2 LTS Вчера вышла LTS версия Django 4.2. Из значимых изменений: — поддержка psycopg3 (асинхронный режим для работы с PostgreSQL) — возможность добавлять комментарии к таблицам/моделям — тёмный режим в админке Django — асинхронный интерфейс для Related Managers

🔐 Насколько вы уверены в безопасности своей корпоративной сети? 22 марта в 11:00 по Москве приходите на вебинар Лаборатории Касперского и межсетевого экрана ИКС, чтобы узнать: — как изменился характер IT-угроз за последний год — какие теперь цели ставят киберпреступники — какие методы используют для их достижения Регистрация на вебинар 💡Будьте в курсе главных трендов информационной безопасности этого года, познакомьтесь ближе с инструментами защиты сетевого периметра в ИКС. 👍 35 дней бесплатного тестирования ИКС с модулями Kaspersky. Подробности по ссылке.

Привет! На связи Podlodka Java Crew! А вы используете микросервисы? Это давно стандарт коммерческой разработки, но часто командам бывает сложно обеспечить согласованность данных, наблюдаемость, метрики, трейсинг. Поэтому темой второго сезона нашей онлайн-конференции выбрали микросервисную архитектуру. Опытные эксперты расскажут: 🌟Как обеспечивать целостность данных в микросервисных архитектурах. Архитектор с 20+ годами опыта Филипп Дельгядо строил продукты в Яндекс.Деньгах, 1ЦУПИС, OpenWay и других финтех-проектах. Филипп разберёт паттерны реализации целостности, раскроет содержание понятия «саги», расскажет о связанных проблемах. 🌟Что делать, чтобы падения из детективных историй превратились в понятную последовательность логов и трейсов. Архитектор / IT leader цифровой платформы продаж Альфа-Банка Максим Чернухин объяснит, как обеспечить observability, на примерах реальных кейсов. Ещё больше подробностей — на сайте. Стартуем 20 марта. Поспеши! Билеты ещё можно купить по сниженной цене 😉

Приглашаем на VK Kubernetes Conf — конференцию для тех, кто развивает экосистему K8s в России! ⏰Когда: 21 марта, 13:00 по Москве 📍Где: Онлайн и офлайн ⚡️Регистрация На конференции хотим поговорить о самых больных местах при работе с Kubernetes. Вот только часть вопросов, на которые мы будем вместе искать ответы: 🔹 Сетевая защита Kubernetes и как ее готовить. А Kubernetes по российским стандартам? 🔹 Так ли стабилен GitOps, как мы думаем, и где же все-таки подводные камни? 🔹 eBPF, WebAssembly, SBOM, OpenTelemetry, Oh my… — как подготовиться к наступлению новых технологий в безопасности и мониторинге? 🔹 After-party для всех участников конференции. Приглашаем обмениваться знаниями, опытом, экспертностью и просто пообщаться в неформальной обстановке. Сделаем Kubernetes доступным вместе! 👉 Зарегистрироваться

Cоздание сквозных логов, настройка ETL в Apache NiFi и конфигурация Apache Flink. Обсудим инструменты дата-инженера на бесплатном митапе от билайна при поддержке JUG Ru Group. 📆 20 декабря, 17:00, онлайн. В программе: ✔️ Сергей Евсеев — «Как настроить ETL с JSON'ами в Apache NiFi». ✔️ Никита Хилов — «Система сквозного логирования с передачей единого идентификатора процесса между независимыми задачами airflow». ✔️ Александр Булатов — «Apache Flink: Flink Table API & SQL». После каждого доклада вы сможете подискутировать с другими участниками и задать вопросы спикерам. Авторы лучших вопросов получат в подарок мерч от билайна — классные поясные сумки. Бесплатная регистрация на сайте митапа.

Стать сотрудником Яндекса быстрее и проще, чем кажется. Участвуйте в днях быстрого найма: решите тестовое, пройдите несколько секций собеседования и получите офер за несколько дней. Теперь дни быстрого найма будут проходить регулярно. Чтобы вам было удобно следить за расписанием, собрали все мероприятия на отдельной странице. Ближайшее мероприятие: • 19–25 декабря — Week Offer для backend, frontend, mobile-разработчиков и аналитиков в команду Рекламы Узнать подробнее и зарегистрироваться

Требования информационной безопасности: как всё учесть? С каждым годом всё больше компаний задумывается о защите персональных данных клиентов, сертификации и разграничении прав доступа. На вебинаре спикеры из RPPA и Yandex Cloud помогут вам разобраться в множестве стандартов, а также прокачать свои знания в сфере безопасности. ➡️Регистрируйтесь на вебинар

Как стать хорошим бэкенд-инженером? Наткнулся на интересную статью от известного в узких кругах инженера Hussein Nasser про фундаментальные знания для бэкэнд-разработчика — How To Become a Good Backend Enginner. У автора более 18 лет опыта в разработке бэкенда и для себя он выделяет несколько основных фундаментов на которые опирается хорошее бэкенд-приложение: - Протоколы транспортного уровня TCP и UDP. Самые популярные протоколы прикладного уровня так или иначе базируются либо на TCP либо на UDP. - Нюансы работы веб-сервера, будь то nginx, apache httpd/tomcat и т.д. Я полностью согласен с автором, т.к. понимание как работает веб-сервер значительно упрощает решение проблем с производительностью приложения. У автора есть статья про разбор архитектуры nginx. - Базы данных. Бесспорно база данных это сердце практически любого бэкенд-приложения. Понимание как работают индексы, что значит ACID Compliance, как база хранит данные на диске сделают вас лучшим инженером. От себя добавлю, что важно понимать плюсы и минусы той или иной БД, чтобы ваш выбор был максимально взвешенным и обоснованным. Чем с большим количеством баз вы столкнётесь на практике тем более взвешенным будет ваше решение о её выборе. - Прокси-серверы. В эпоху микросервисной архитектуры появилось множество сервисов для проксирования запросов как транспортного уровня (например, HAProxy) так и прикладного (nginx http reverse-proxy, HAProxy HTTP). Область их применения разнообразная: балансировка нагрузки между серверами, кеширование, проверка авторизации/аутентификации и т.д. - Системы обмена сообщениями (Messaging systems). Apache Kafka, RabbitMQ, Redis и многие другие популярные системы обмена сообщениями прочно вошли в нашу жизнь в эпоху распределённых приложений. Помимо преимуществ в масштабировании ваших сервисов, системы обмена сообщениями также значительно снижают связность между приложениями. Автор статьи рекомендует читателю разобраться в тонкостях той или иной системы, а именно в механизме создания и получения сообщения, нюансам доставки сообщений (at most once, at least once) - Формат сообщений. XML, JSON, ProtoBuf, MessagePack и другие. Существует множество форматов кодирования информации для обмена между системами и у каждой есть свои минусы и плюсы (кроме XML, шутка). Если вы уменьшаете размер пересылаемой информации (например, выбирая сжатый формат), то не забывайте про накладные расходы CPU при десериализации сообщения. - Безопасность. Знания об основах безопаности никогда не будут лишними. Для веб-разработчиков рекомендую ознакомиться с Топ-10 наиболее популярных уязвимостей в веб-приложениях: https://owasp.org/www-project-top-ten/ А что бы вы добавили от себя? Пишите в комментариях.

В блоге у компании Sentry нашел свежую и классную серию статей про Django Performance Improvements: - Part 1: Database Optimizations - Part 2: Code Optimization - Part 3: Frontend Optimizations - Part 4: Caching in Django Applications

В сети стали доступны доклады с DjangoCon US 2022. Я ещё не смотрел, но выделил для себя интересные презентации на основе названий: - The Django Admin Is Your Oyster: Let’s Extend Its Functionality - Django Logging Demystified - Why I Didn't Start With Django - Herding your database queries: diagnosing, improving and guarding performance of DB interactions - Type checking your Django code with django-types and Pyright - Keeping track of architectural-ish decisions in a sustainable way - Explaining EXPLAIN: A dive into PostgreSQL's EXPLAIN plans - Security Best Practices for Django Applications - Why large Django projects need a data (prefetching) layer - A pythonic full-text search with Paolo Melchiorre - Integrating React in the Django way! - Full Text Search with Django and PostgreSQL: More Facets, Less Dependencies! Полный плейлист с докладами доступен по ссылке. К слову, Django по-прежнему остаётся моим фаворитом когда дело касается разработки веб-приложений на Python 🐍

Если вы разработчик и у вас есть пара минут, порефлексируйте, пожалуйста, с нами о происходящем в небольшом опросе. Ваши ответы помогут крупному работодателю понять, где теперь открывать офисы и какая помощь и поддержка вам нужны. Пройти опрос

А на этот раз в сеть подъехали доклады с PiterPy 2022: http://bit.ly/3A2bdId

В сети стали публично доступны доклады с PyCon Russia 2022: https://bit.ly/3UwdOBR

​​Все наверняка слышали про историю Твиттера и Илона Маска. Сейчас в компании началась оптимизация о которой Илон неоднократно упоминал. Gergely Orosz у себя в блоге Pragmatic Engineer написал подробный разбор того, что сейчас творится внутри: https://blog.pragmaticengineer.com/turmoil-at-twitter/

Ко мне обратилась IT-компания с просьбой провести анонимный опрос среди подписчиков моего канала. Если у вас есть пара минут, порефлексируйте, пожалуйста, с нами о новой реальности в небольшом опросе. Ваши ответы помогут крупной IT-компании понять, где теперь лучше организовывать профессиональные мероприятия и оказывать помощь и поддержку комьюнити. Пройти опрос.