Data Analysis / Big Data

Google выпустила Cloud Inference API для анализа больших данных в реальном времени Cloud Inference API интегрирован с Google Cloud Storage, поэтому поступающие данные будут доступны и в других сервисах платформы. Читать: «Google выпустила Cloud Inference API для анализа больших данных в реальном времени»

Дмитрий Песков: «Я вижу больше перспектив у закона о киборгах, чем у закона о роботах» Спецпредставитель президента по цифровому развитию рассказал о легализации криптовалют, взаимодействии с IT-компаниями и подготовке законов робототехники. Читать: «Дмитрий Песков: «Я вижу больше перспектив у закона о киборгах, чем у закона о роботах»»

Исследователи научились заранее определять границы оползней с помощью больших данных ПО, разработанное учеными из Мельбурна, преобразует данные о движении мельчайших частиц земли в сложную кинематическую сеть для определения границ оползней. Читать: «Исследователи научились заранее определять границы оползней с помощью больших данных»

Uber представила kepler.gl, набор инструментов для визуализации геоданных Kepler.gl представляет собой высокопроизводительное веб-приложение, способное создавать «на лету» интерактивные карты на основе геоданных. Пользователь может настраивать отображение слоев, фильтровать интересующий его контент или разбивать по группам. Читать: «Uber представила kepler.gl, набор инструментов для визуализации геоданных»

Microsoft: работодатели ищут навыки программирования даже в гуманитарных сферах Исследование Microsoft и HeadHunter показало, что работодатели ищут навыки программирования в сферах маркетинга, рекламы и PR (3,7 %), а также производства (3,4 %). В 2017 году количество вакансий с упоминанием программирования превысило количество резюме на 17 %. Читать: «Microsoft: работодатели ищут навыки программирования даже в гуманитарных сферах»

«Жадное» исполнение, визуализация, JS: представлены обновления библиотеки TensorFlow В рамках второй ежегодной конференции, посвящённой библиотеке TensorFlow, разработчики анонсировали множество нововведений и обновлений открытого инструмента для тренировки моделей машинного обучения. Теперь можно переносить разработку в браузер, а также производить визуализированную отладку. Читать: ««Жадное» исполнение, визуализация, JS: представлены обновления библиотеки TensorFlow»

В MIT создали алгоритм, ускоряющий обработку больших данных в 100 раз Алгоритм под названием Taco автоматизирует компрессию тензорных разрежённых матриц. Читать: «В MIT создали алгоритм, ускоряющий обработку больших данных в 100 раз»

«Яндекс» и Coursera стали официальными партнерами «Яндекс» начинает публиковать свои курсы на платформе открытого онлайн-образования Coursera. Первая программа, посвящённая Big Data, уже доступна. Читать: ««Яндекс» и Coursera стали официальными партнерами»

Vespa, движок обработки «больших данных» сервисов Yahoo, стал открытым проектом Компания Oath, владеющая активами Yahoo, выпустила в открытый доступ движок обработки данных Vespa, являющийся основой большинства сервисов Yahoo. Читать: «Vespa, движок обработки «больших данных» сервисов Yahoo, стал открытым проектом»

Сбербанк проведет хакатон по блокчейну и Big Data на конференции Startup Village 2017 6 и 7 июня в рамках конференции Startup Village пройдет хакатон от «Сбербанка» и «Сбербанк-Технологий» с общим призовым фондом 1.5 миллиона рублей. Читать: «Сбербанк проведет хакатон по блокчейну и Big Data на конференции Startup Village 2017»

Google купила Kaggle — площадку для проведения соревнований по машинному обучению и анализу данных В Сети распространились слухи о том, что Google покупает Kaggle — платформу, на которой проводятся соревнования... Читать: «Google купила Kaggle — площадку для проведения соревнований по машинному обучению и анализу данных»

Эффективность вместо точности: Facebook выпустила новый фреймворк для машинного обучения FAIR, лаборатория Facebook по разработкам в области искусственного интеллекта, представила Faiss — библиотеку, поз... Читать: «Эффективность вместо точности: Facebook выпустила новый фреймворк для машинного обучения»

Новый онлайн инструмент использует Big Data для предсказания вашего будущего, включая вероятность смерти в этом году Пользователи Интернета оставляют в сети более 2,5 миллиардов гигабайт данных каждый день. Это огромный объем и... Читать: «Новый онлайн инструмент использует Big Data для предсказания вашего будущего, включая вероятность смерти в этом году»

В MIT создают новый язык программирования, способный существенно ускорить параллельные вычисления Стало известно, что MIT (Массачусетский технологический институт) разрабатывает новый язык Milk, кот... Читать: «В MIT создают новый язык программирования, способный существенно ускорить параллельные вычисления»

Federate access to Amazon Redshift query editor V2 with Active Directory Federation Services (AD FS): Part 3 Read: https://aws.amazon.com/blogs/big-data/federate-access-to-amazon-redshift-query-editor-v2-with-active-directory-federation-services-ad-fs-part-3/

Reading Statistical Analytics Illustrated Read: https://junkcharts.typepad.com/numbersruleyourworld/2022/05/reading-statistical-analytics-illustrated.html

7 элементов продуманной стратегии развития ИИ: опыт Salesforce Искусственный интеллект перестал быть вотчиной исключительно крупных компаний. Он становится мейнстримом для бизнеса, однако, по словам президента и исполнительного директора Salesforce Брета Тейлора, успех способствует ему не всегда. Продуманная стратегия развития ИИ должна в первую очередь учитывать интересы клиента и чётко определять результаты для бизнеса, а ключевым аспектом для всего этого являются данные. В своём докладе на конференции Scale TransformX 2021 Тейлор рассказал об основных вопросах, которые компании любого размера должны учитывать, чтобы выполнять задачи клиентов и достигать стабильных результатов. В этой статье мы вкратце изложим семь основных выводов из презентации Тейлора. Более подробную информацию можно посмотреть в видео. Читать: https://habr.com/ru/post/663112/

Data Engineering Weekly #86 Read: https://www.dataengineeringweekly.com/p/data-engineering-weekly-86

Кто такой Analytics Engineer – E2E-решение с использованием bash + dbt + Looker Привет! Меня зовут Артемий Козырь, и я Analytics Engineer в Wheely. Мы могли бы долго и нудно обсуждать, кто такой Analytics (Data / Backend) Engineer, какими инструментами он должен владеть, какие buzzwords в тренде и ценятся в CV, однако, на мой взгляд, гораздо интереснее рассмотреть процесс и результаты его деятельности в рамках конкретной прикладной задачи. В этой публикации: Читать: https://habr.com/ru/post/665642/