Computer Science

Web scraping Скрапинг — стандартная процедура для сбора необходимой информации. Для этих целей применяется специализированное программное обеспечение.  С помощью веб-скрейпинга информация собирается в автоматическом режиме по заданным параметрам, структурируется и записывается в файл для дальнейшего анализа.  Такой метод подходит для сбора статистики, стоимости различных офферов, получения данных о товарах в каталогах.

Законно ли это? Если боитесь собирать данные с сайтов, то лучше не стоит, но все, что находится в открытом доступе, можно собирать.

Wi-Fi обычно работает на двух основных частотах: 2.4 ГГц и 5 ГГц. • 2.4 ГГц Преимущества: Лучшее покрытие и большая дальность действия. Недостатки: Более загруженная частота, подвержена помехам от других устройств (например, микроволновок, беспроводных телефонов). • 5 ГГц Преимущества: Более высокая скорость передачи данных и меньшее количество помех. Недостатки: Меньшее покрытие и более слабое проникновение через стены. Соответственно, если нужна скорость, лучше выбрать 5 ГГц, а для большого покрытия — 2.4 ГГц.

Бесплатный вебинар - QoS в ESR Дата: 18.10.2024 Время: 14:00 по МСК Программа вебинара: ⚡ Базовый и расширенный QoS ⚡ Механизмы классификации трафика ⚡ Доступные алгоритмы организации очередей ⚡ Policing и Shaping Практичекая часть: ⚡ Практические тесты с применением генератора трафика Cisco TRex Спикер: Алексей Листаров — инженер с многолетним опытом работы в крупном операторе связи. Сертифицированный преподаватель Академии Eltex. Зарегистрироваться #реклама 16+ webinar.eltexcm.ru О рекламодателе

HDD vs SSD Принцип работы HDD и SSD кардинально отличается. Классические HDD состоят из одного или нескольких магнитных дисков и считывающих головок. SSD, наоборот, состоит из большого количества отдельных чипов Flash-памяти, которые встроены в диск по тому же принципу, что и в USB-флешках. Так как у SSD нет механических частей, то, во-первых, это делает его прочнее, тише, но самое главное преимущество SSD в том, что они работают значительно быстрее классических жестких дисков. Благодаря этому ПК и ноутбуки с SSD запускаются примерно в два раза быстрее, чем с HDD, а файлы и программы открываются до четырех раз быстрее. Но говорить, что SSD во всем превосходят HDD, тоже неверно. HDD все еще гораздо дешевле SSD, а также жесткие диски предлагают гораздо больше места для хранения данных. Здесь возможны объемы и 10, и 20 Тбайт, в то время как потребительские SSD в большинстве своем пока ограничиваются 8 Тбайт.

Проект ДКЭ предлагает работу мечты по результатам теста! Ищешь стажировку или работу в крупной компании? Мы ждали тебя, чтобы предоставить уникальную возможность получить работу мечты! Список компаний внушительный — среди них МТС, Сбер, Лукойл, Ингосстрах, Росатом и другие. Участие в нашем проекте бесплатное и доступно для жителей России старше 18 лет! Переходи по ссылке, пройди тестирование по профессии и получи предложение от работодателей. Попробовать #реклама dke.moscow О рекламодателе

Сериализация - процесс преобразования объекта или структуры данных в формат, который можно хранить или передавать по сети. Существует несколько форматов сериализации, каждый со своими сильными и слабыми сторонами: 1. JSON (JavaScript Object Notation) JSON - легковесный формат, который широко используется в веб-приложениях. Он легко парсится и генерируется. Поддерживается большинством языков программирования. Пример: {"имя": "Алиса", "возраст": 25} 2. XML (Extensible Markup Language) XML - это язык разметки, который используется для хранения и передачи данных. Он подробный, но обеспечивает высокую степень гибкости и настройки. Пример: <person><имя>Алиса</имя><возраст>25</возраст></person> 3. CSV (Comma Separated Values) CSV - это текстовый формат, который используется для хранения табличных данных. Он прост и легко парсится, но не поддерживает сложные структуры данных. Пример: имя,возраст\nАлиса,25\n 4. Avro Бинарный формат сериализации, который используется в больших данных и распределенных системах. Он компактен и эффективен, но требует определения схемы заранее. 5. Protocol Buffers Бинарный формат сериализации, разработанный Google. Он компактен и эффективен, и обеспечивает высокую степень гибкости и настройки. 6. YAML (YAML Ain't Markup Language) Человеко-читаемый формат, который используется для конфигурационных файлов и обмена данными. Он легко читается и пишется, но может быть подробным. Пример: имя: Алиса\nвозраст: 25 7. MessagePack Бинарный формат сериализации, который подобен JSON, но более компактен и эффективен.

Как обучать студентов облачным технологиям? Уже 15 октября на вебинаре преподаватели ННГУ и НИУ ВШЭ поделятся своим опытом по внедрению образовательных треков по работе с облаками. Регистрируйтесь, участие бесплатное! Зарегистрироваться #реклама 16+ yandex.cloud О рекламодателе Реклама на Яндексе

За годы были выпущены несколько стандартов Bluetooth, каждый со своими функциями и улучшениями. Bluetooth 1.0: Первый стандарт Bluetooth, выпущенный в 1998 году, который ввел основные принципы технологии Bluetooth. Bluetooth 1.1: 2001 год. Стандарт улучшил скорость передачи данных и добавил поддержку нешифрованной передачи данных. Bluetooth 1.2: 2003 год. Стандарт ввел адаптивное скачкообразное хоппинг, которое улучшило устойчивость к радиопомехам. Bluetooth 2.0: 2004 год. Стандарт ввел Улучшенный режим передачи данных (EDR), который увеличил скорость передачи данных до 3 Мбит/с. Bluetooth 2.1: 2007 год. Стандарт ввел Безопасное простое спаривание, которое улучшило процесс спаривания между устройствами. Bluetooth 3.0: 2009 год. Стандарт ввел Высокоскоростную передачу данных (HS), которая позволила передавать данные со скоростью до 24 Мбит/с. Bluetooth 4.0: 2010 год. Стандарт ввел Технологию низкого энергопотребления (LE), которая уменьшила потребление энергии и позволила устройствам работать в течение лет на одном аккумуляторе. Bluetooth 4.1: 2013 год. Стандарт улучшил скорость передачи данных и ввел поддержку устройств Bluetooth Smart и Smart Ready. Bluetooth 4.2: 2014 год. Стандарт ввел Подключение к интернету по протоколу IP, которое позволило устройствам подключаться напрямую к интернету. Bluetooth 5.0: 2016 год. Стандарт учетверил диапазон устройств Bluetooth, удвоил скорость и увеличил емкость вещания. Bluetooth 5.1: 2020 год. Стандарт ввел улучшения в направлении нахождения и услугах определения местоположения.

Деливери — Доставка еды и не только Добавьте комфорта в свою жизнь — заказывайте еду с быстрой доставкой в Деливери ❤️ Выбрать #реклама О рекламодателе

Краткие характеристики сетевых протоколов TCP (Transmission Control Protocol): • Обеспечивает надежную передачу данных через сетевые протоколы. • Устанавливает соединение (TCP handshake) перед передачей данных. • Гарантирует доставку данных в правильном порядке и без ошибок. • Используется для передачи данных в приложениях, требующих надежности, таких как веб-браузеры и клиенты электронной почты. UDP (User Datagram Protocol): • Протокол без соединения, не гарантирует доставку данных. • Быстрый и легкий протокол, используемый для передачи небольших пакетов данных. • Часто используется в приложениях, требующих быстрой передачи данных, таких как потоковая передача видео и аудио. HTTP (Hypertext Transfer Protocol): • Протокол передачи гипертекста, используемый для передачи данных между веб-сервером и веб-клиентом (браузером). • Работает поверх TCP и использует порт 80 по умолчанию. • Использует методы GET и POST для получения и отправки данных. HTTPS (HTTP Secure): • Защищенная версия HTTP, использующая протокол SSL/TLS для шифрования данных. • Используется для обеспечения безопасности передачи данных между веб-сервером и клиентом. • Работает поверх TCP и использует порт 443 по умолчанию. FTP (File Transfer Protocol): • Протокол передачи файлов, используемый для передачи файлов между клиентом и сервером. • Работает поверх TCP и использует порты 20 (для данных) и 21 (для управления) по умолчанию. • FTP не шифрует данные, поэтому для защиты конфиденциальных данных рекомендуется использовать FTP через SSL (FTPS) или SFTP. SMTP (Simple Mail Transfer Protocol): • Протокол простой передачи почты, используемый для передачи электронных писем между почтовыми серверами. • Работает поверх TCP и использует порт 25 по умолчанию. • SMTP не шифрует данные, поэтому для защиты конфиденциальных данных рекомендуется использовать STARTTLS или SMTPS. DNS (Domain Name System): • Протокол, используемый для преобразования доменных имен в IP-адреса. • Работает поверх UDP и использует порт 53 по умолчанию. • DNS является распределенной системой имен, состоящей из иерархически организованных серверов.

Managed Kubernetes® в Yandex Cloud Автоматическое масштабирование кластеров. Оплата за потребленные ресурсы. - Высокая доступность - Безопасная инфраструктура - Лёгкое обслуживание - Автомасштабирование Грант на тестирование 4000 руб. Попробовать #реклама 16+ yandex.cloud О рекламодателе

Протокол NTP Не все протоколы передачи нужны для обмена классического вида информацией. NTP — протокол для синхронизации локальных часов устройства со временем в сети.  Он использует алгоритм Марзулло (алгоритм согласования данных, использующийся для выбора более точных источников для оценки точного времени из ряда источников времени, разной степени точности и усреднения времени). Благодаря нему протокол выбирает более точный источник времени.  NTP работает поверх UDP — поэтому ему удаётся достигать большой скорости передачи данных. Протокол достаточно устойчив к изменениям задержек в сети. Последняя версия NTPv4 способна достигать точности 10мс в интернете и до 0,2мс в локальных сетях.

Лицензионные решения Microsoft доступные в России Доступные решения к продаже на территории России со сроком подписки 12 месяцев: - Microsoft Office 365 для бизнеса (Basic, Standard, Premium) - Office E1, E3, E5, Microsoft F1, F3, F5 - Project Plan 5 - Microsoft Power BI - Microsoft Dynamics 365 Заполните заявку, чтобы подключить продукт Microsoft Попробовать #реклама 16+ cloud4y.ru О рекламодателе

SSH Протокол для удалённого управления операционной системой с использованием TCP. В SSH шифруется весь трафик, причём с возможностью выбора алгоритма шифрования. В основном это нужно для передачи паролей и другой важной информации. Также SSH позволяет обрабатывать любые другие протоколы передачи. Это значит, что кроме удалённого управления компьютером, через протокол можно пропускать любые файлы или даже аудио/видео поток. SSH часто применяется при работе с хостингами, когда клиент может удалённо подключиться к серверу и работать уже оттуда. Он безопасен, поскольку оба компьютера могут шифровать и дешифровать сообщения с использованием симметричных ключей.

Где закупаются все модники? H&M, Zara, Converse и другие легендарные бренды переехали на Яндекс Маркет. Подписывайтесь на официальный канал и не пропустите лучшие цены на оригиналы! Узнать больше #реклама О рекламодателе

Обзор протокола HTTP Изначально протокол передачи HTML-документов. Сейчас же он используется для передачи произвольных данных в интернете. Он является протоколом клиент-серверного взаимодействия без сохранения промежуточного состояния. В роли клиента чаще всего выступает веб-браузер, хотя может быть и, например, поисковый робот. Для обмена информацией протокол HTTP в большинстве случаев использует TCP/IP. HTTP имеет расширение HTTPS, которое поддерживает шифрование. Данные в нём передаются поверх криптографического протокола TLS. HTTP, как правило, прост и удобен для восприятия человеком. HTTP-сообщения могут читаться и пониматься людьми, обеспечивая более лёгкое тестирование разработчиков и уменьшенную сложность для новых пользователей.

Как IT-компании увеличить продажи с помощью вебинаров? Делимся гайдом для маркетологов IT-компаний с рекомендациями ведущих российских разработчиков и экспертов МТС Линк. Вы узнаете: - Как правильно использовать онлайн-мероприятия для продвижения; - Как собрать 5 000 потенциальных клиентов из любой точки мира в одном месте; - Как увеличить узнаваемость бренда и создать комьюнити вокруг него; - Как оценить вклад онлайн-мероприятия в продвижение компании и правильно обработать лиды; Получите методичку бесплатно на сайте! Скачать #реклама 16+ mts-link.ru О рекламодателе

Протокол UDP Один из основных протоколов, расположенных непосредственно над IP.Он предоставляет прикладным процессам транспортные услуги, немногим отличающиеся от услуг протокола IP. Протокол UDP обеспечивает доставку дейтограмм, но не требует подтверждения их получения. Он не требует соединения с удаленным модулем UDP. К заголовку IP-пакета UDP добавляет поля порт отправителя и порт получателя, которые обеспечивают мультиплексирование информации между различными прикладными процессами, а также поля длина UDP-дейтограммы и контрольная сумма байт, позволяющие поддерживать целостность данных.  Таким образом, если на уровне IP для определения места доставки пакета используется адрес, на уровне UDP - номер порта.

Методичка: как сделать онлайн-встречи эффективнее Надоело ждать коллег, которые постоянно забывают о встречах, а отсутствие повестки и потерянные договоренности мешают нормально работать? Команда МТС Линк собрала на 37 страницах полезные материалы, чек-листы и кейсы, которые помогают компаниям проводить эффективные совещания в онлайне с помощью сервиса Встречи. Из методички узнаете: - Как создать постоянную ссылку и подключаться на встречи в 2 клика, - Как делать заметки и работать с файлами, не переживая за качество связи и безопасность данных. - Как облегчает жизнь ИИ, который расшифровывает созвоны в текст и автоматически отправляет расшифровку на почту. Еще в методичке описаны 7 способов оценки текущей эффективности ваших онлайн-встреч. Получить гайд можно бесплатно на сайте. Скачать #реклама mts-link.ru О рекламодателе

Протокол TCP Используется для обеспечения надёжной доставки данных на транспортном уровне. Его две основные задачи: сегментация данных и адресация приложений Но помимо этого протокол обеспечивает:  ⁃ Надёжную доставку сегментов Каждый сегмент маркируется при помощи порядкового номера. После отправки пакетов, протокол ожидает подтверждения от получателя, где находится порядковый номер следующего сегмента. В случае, если такое подтверждение не получено, отправка автоматически повторяется. После некоторого количества неудачных попыток, TCP считает, что адресат не доступен, и сессия разрывается.  ⁃ Упорядочивание сегментов при получении Иногда получатель может получить сегменты не в том порядке, в котором они отправлялись.В этом случае, TCP автоматически пересоберёт их в нужном порядке, используя всё то же поле порядковых номеров, и передаст после склейки на уровень приложений.  ⁃ Работу с сессиями Перед началом передачи пакетов, когда TCP убеждается в том, что получатель существует и готов принимать данные, тогда открывается сессия. После передачи пакетов, сессия закрывается.  ⁃ Контроль за скоростью передачи Благодаря механизму скользящего окна, TCP может корректировать скорость отправки пакетов в зависимости от возможностей получателя.