Data Science: Алгоритмы и Структуры данных

⚡️ IT-обучение теперь в Telegram! В cвязи с недавнем замедлением Ютуба — лучшие обучающие каналы переехали в Telegram Вот каналы для айтишников: 📱 Python: @Python 📱 GitHub: @GitHub 📱 Frontend: @Frontend 🤓 Общее айти: @portalToIT ⚙️ Backend: @Backend 📱 Маркетинг: @Marketing 🖥 Дизайн: @Design 👩‍💻 С/С++: @Cpp 👩‍💻 Java: @Java 👩‍💻 C#: @Csharp 🖥 Базы Данных & SQL: @SQL 👩‍💻 Golang: @Golang 🖥 PHP: @PHP 👩‍💻 Моб. разработка: @MobDev 👩‍💻 Разработка игр: @GameDev 👩‍💻 DevOps: @DevOps 🖥 Data Science: @DataScience 🤔 Хакинг & ИБ: @InfoSec 🐞 Тестирование: @QA ➡️ Сохраняйте себе, чтобы не потерять

Векторные представления — что это такое, и почему в них важно разбираться Векторные представления (эмбеддинги, векторы) — это по‑настоящему приятный инструмент, но в любом рассказе о векторных представлениях эта техника скрыта за ворохом каких‑то страшных словес. Если вам удастся продраться через эти словеса, то вы откроете для себя мощные и интересные приёмы, применимые для решения всевозможных интересных задач. Я выступал с лекцией о векторных представлениях на конференции PyBay 2023. Эта статья — улучшенная версия той самой лекции, и она должна быть интересна сама по себе, даже если не смотреть видео. Если вы пока не знакомы с эмбеддингами, то, полагаю, в этой статье вы найдёте всю необходимую информацию, которая позволит вам приступить к их использованию при решении реалистичных задач. https://habr.com/ru/articles/781408/ Алгоритмы и Структуры данных

FizzBuzz for Senior Парень из статьи с++ оч круто оптимизировал решение. И мне стало интересно, а как эти решения ведут себя на Java. Перед тем как перейти к алгоритмам нужно понять, как мы будем мерить скорость. Если погуглить то первые ссылки скажут использовать System.out.println и трэкать так время. Но это не до конца верный вариант. Вы же знаете об оптимизаторе в Java? Может получиться так, что оптимизатор переставит эти строки и ваши замеры будут неверными. Поэтому этот вариант мы отбрасываем. Я решил использовать бенч марки. Настроить их мне прекрасно помогла эта статья - https://www.baeldung.com/java-microbenchmark-harness. Я не претендую на то, что это сто процентно верное решение и если я делал что то не так дайте мне знать пожалуйста. https://habr.com/ru/articles/781256/ Алгоритмы и Структуры данных

Как устроен PassMark. Воспроизводим тесты из машинного кода На сегодняшний день существуют сотни программ для оценки производительности вычислительных устройств, но абсолютным лидером среди них несомненно является PassMark - "Industry standard benchmarking since 1998", - как его позиционирует сам разработчик, и вдобавок предоставляющего обширную публичную базу оценок производительности разнообразных устройств по всему миру для возможности их сравнения между собой. Все это делает PassMark выбором №1 для всех, кто не только желает оценить производительность своего устройства, но и сравнить его с любым другим устройством в мире. Но что находится под капотом у легендарной программы для бенчмаркинга? В этой статье мы изучим ее алгоритмы тестирования и воспроизведем их самостоятельно на других языках программирования, чтобы иметь независимую возможность получения оценки производительности. Эта статья и ей подобные исследования сначала публикуются на моем сайте bekhan.org. Узнать первыми о публикациях можно в моих сообществах. https://habr.com/ru/articles/768618/ Алгоритмы и Структуры данных

Помощь в трудоустройстве в IT-сфере! В России из-за дефицита айтишников запустили бесплатную программу по обучению IT-специалистов. Теперь любой желающий может попробовать себя в IT с полного нуля и начать обучение бесплатно! Узнайте про дальнейшее трудоустройство в ведущие IT-компании для восполнения кадрового дефицита. Для этого нужно: - Перейти по ссылке - Заполнить анкету и ответить на вопросы (занимает менее 3 минут) - На основании ваших ответов вы сразу узнаете, подходит ли вам сфера IT и сможете ли вы в ней работать Перейти на сайт #реклама 16+ urban-university.ru О рекламодателе

Как применять метод PCA для уменьшения размерности данных Одной из ключевых задач при работе с данными является уменьшение размерности данных, чтобы улучшить их интерпретируемость, ускорить алгоритмы обучения машин и, в конечном итоге, повысить качество решений. Сегодня мы поговорим о методе, который считается одним из наиболее мощных инструментов в арсенале данных разработчиков — методе главных компонент, или PCA (Principal Component Analysis). PCA — это статистический метод, который позволяет сократить размерность данных, сохраняя при этом наибольшее количество информации. Он основан на линейной алгебре и математической статистике, и представляет собой мощный инструмент для анализа многомерных данных. Главная идея PCA заключается в том, чтобы найти новые признаки, называемые главными компонентами, которые максимально коррелируют с исходными данными. На практике, PCA может использоваться для различных целей, включая снижение размерности для визуализации данных, удаление шума из данных, улучшение производительности моделей машинного обучения и многое другое. https://habr.com/ru/companies/otus/articles/769274/ Алгоритмы и Структуры данных

Помощь в трудоустройстве в IT-сфере! В России из-за дефицита айтишников запустили бесплатную программу по обучению IT-специалистов. Теперь любой желающий может попробовать себя в IT с полного нуля и начать обучение бесплатно! Узнайте про дальнейшее трудоустройство в ведущие IT-компании для восполнения кадрового дефицита. Для этого нужно: - Перейти по ссылке - Заполнить анкету и ответить на вопросы (занимает менее 3 минут) - На основании ваших ответов вы сразу узнаете, подходит ли вам сфера IT и сможете ли вы в ней работать Перейти на сайт #реклама 16+ urban-university.ru О рекламодателе

Bitcoin — умер. Вся крипта в моменте покатилась на дно. Такие новости уже 10 лет ждут те, кому лень разбираться в крипте и надоело наблюдать, как на ней богатеют даже школьники Но годы идут, а крипта только набирает обороты. И если вы устали смотреть, как люди колотят на ней целое состояние — начните разбираться в теме вместе с каналом Адила Жигерова Это один из немногих фанатов крипты, который на понятном языке объясняет, откуда в ней деньги и с чего начать новичку без гроша в кармане Внутри: бесплатный гайд по заработку первых 100к на криптовалюте, словарь терминов для новичка, мануал по поиску проектов с потенциалом взлёта х10-15 и многое другое Подписывайтесь и кликайте на закреп — там всё нужное для старта: @adil_crytpo

Улучшаем навигацию роботов с помощью нейронного потенциального поля Чтобы мобильный робот мог перемещаться автономно, он должен уметь планировать траекторию своего движения. Часто такое планирование делается в два этапа. На первом этапе (глобальное планирование) нужно соединить начало и конец требуемого перемещения линией, так, чтобы эта линия не задевала препятствий. Линия чаще всего бывает ломаной, в терминологии планирования она называется геометрическим путем. Реальный робот обычно не может ехать по ломаной линии, у него есть ограничения на радиус поворота колес и, следовательно, на кривизну траектории. Поэтому нужен второй этап (локальное планирование), на котором делается сглаживание или оптимизация траектории. На этом этапе траектория движения определяется с учетом всех кинодинамических ограничений. Часто оптимизация траектории делается по мере движения: робот движется вдоль геометрического пути и ближайшие участок этого пути оптимизируются с учетом самых актуальных данных о препятствиях. https://habr.com/ru/companies/airi/articles/844682/ Алгоритмы и Структуры данных

9 алгоритмов сортировки и поиска для JS, о которых вас спросят на собеседовании Даже если ты frontend-разработчик и решаешь прикладные задачи, тебе в любом случае придётся знать алгоритмы хотя бы на базовом уровне. Но статей на русском с объяснением алгоритмов и тем, как их реализовать на JavaScript, крайне мало. Поэтому хочу поделиться некоторыми алгоритмами сортировки и поиска, и немного рассказать про структуры данных. Знание алгоритмов и структур данных поможет вам в оптимизации приложений. Статья будет полезна разработчикам любых направлений, которые начали свой путь к крепкому уровню middle. https://habr.com/ru/companies/simbirsoft/articles/769312/ Алгоритмы и Структуры данных

IT аутсорсинг в СПб! Обслуживание серверов и оргтехники! АйТи аутсорсинг в СПб! Сертифицированные специалисты! Опытная команда IT специалистов! Сертификаты Microsoft! CISCO Mikrotik! 12 лет на рынке! Перейти на сайт #реклама svcnet.ru О рекламодателе

Процедурная генерация укрытий в играх В игровых мирах сражения, взаимодействия НПС и стратегические маневры приводят к необходимости поиска точек защиты или точек укрытия (cover). В этой статье я рассмотрю один из аспектов игровой механики – создание такой системы на основе анализа окружения, которые позволяют игрокам и AI эффективно и эффектно сражаться в разных игровых сценариях и делают игровой опыт более динамичным. Посмотрим на особенности, которые влияют на алгоритм генерации и реализацию в движке 4A Engine. https://habr.com/ru/articles/769696/ Алгоритмы и Структуры данных

Как специалисту экономить 67% рабочего времени? СПС КонсультантПлюс поможет Вам, в среднем, сократить время для выполнения рабочих задач на 67%, предоставляя проверенную информацию, доступ к экспертным консультациям, а также набор полезных сервисов и шаблонов. Подключая систему у нас, Вы не только получаете доступ к справочно-правовой системе КонсультантПлюс, но и ко множеству дополнительных сервисов, которые значительно облегчат вашу работу! Оставьте заявку на расчёт стоимости комплекта сейчас и получите ТЕСТ-ДРАЙВ новой версии 2024 года под свои задачи на 2 дня! Получить предложение #реклама 16+ consplus-msk.ru О рекламодателе

Реализация консенсусного алгоритма Raft В этой статье, мы рассмотрим один из наиболее популярных консенсусных алгоритмов - Raft. Рассмотрим его ключевые компоненты, алгоритм выбора лидера, обеспечение целостности данных и оптимизации для улучшения производительности. https://habr.com/ru/companies/otus/articles/769786/ Алгоритмы и Структуры данных

Эмоциональный и искусственный. Учим нейросети понимать социальные взаимодействия людей на AIJ Contest Мы в лаборатории Fusion Brain уже много лет работаем на созданием мультимодальных моделей, способных работать с как можно большим числом данных разного типа. Не так давно, например, мы релизнули мультимодальную LLM OmniFusion 1.1, способную поддерживать визуальный диалог и отвечать на вопросы по картинкам, причём с поддержкой русского языка — и рассказали об этом на Хабре. https://habr.com/ru/companies/airi/articles/843656/ Алгоритмы и Структуры данных

Регистрируйтесь на главную конференцию Yandex Cloud! Большая конференция Yandex Cloud для тех, кто создаёт цифровые продукты и решения. Вас ждут 5 тематических треков, 31 доклад, 50 экспертов, нетворкинг и общение. Участие бесплатное! Зарегистрироваться #реклама 16+ scale.yandex.cloud О рекламодателе

😒 На одном кодинге уже давно не вывезешь, перспектива 2024 года - Информационная Безопасность Ловите два канала на тему ИБ и хакинга ZeroDay - Уроки по кибербезопасности и хакингу с нуля. Вирусы, взломы, OSINT, криптография и свежие новости Белый Хакер - программное обеспечение, утилиты, OSINT, инструменты, полезная литература и много другое. Совершенно новый формат непохожий на другие каналы.

Простая латиница для русского языка Это не нужно — компьютеры отлично переваривают кириллицу. Ну, может кому-то не нравится как их фамилия записана в загранпаспорте, но это не дело федерального масштаба. Ну, иногда кайф чё-то читабельное в URL воткнуть. Кому-то может приходится набирать текст на устройстве, не поддерживающем кириллицу. Минорные поводы найдутся. Тем не менее, задачка занимательная, поэтому окунёмся в неё чисто по фану. https://habr.com/ru/articles/844218/ Алгоритмы и Структуры данных

Синтаксический анализатор — модифицированный Shunting Yard Модифицированный Shunting Yard — это алгоритм синтаксического анализа, который расширяет алгоритм Дейкстры для работы не только с операторами и операндами, но и с более сложными синтаксическими конструкциями. Он сочетает элементы восходящего синтаксического анализа с ручным управлением состояниями для построения абстрактного синтаксического дерева (AST). В отличие от традиционного Shunting Yard, который фокусируется на арифметических выражениях, модифицированная версия может обрабатывать сложные конструкции языков, такие как блоки кода, вызовы функций, условия и прочие структуры. https://habr.com/ru/articles/844252/ Алгоритмы и Структуры данных

Компьютерное зрение и котики. Или алгоритмы против человека Разберём основы компьютерного зрения на примерах с котиками, узнаем, почему CV на самом деле совсем не про зрение и научимся делать свёртку. https://habr.com/ru/articles/844360/ Алгоритмы и Структуры данных