Data2Good | Про данные, финансы, технологии и жизнь

Всем привет! Давно не писал, зарылся в задачах, да и наблюдается определенный кризис идей. Решил ответить на вопрос и заодно поделиться видением. Набросал с дипсик краткий план создания синтетического датасета для диагностики компрессора В целом это базовый, слегка усреднённый подход. Можно использовать как чек-лист при генерации данных. Шаг 1. Генерация «нормального» режима работы Для каждого из 380 тэгов нужно задать: · Базовое значение (среднее) — берётся из паспорта компрессора или экспертной оценки. · Допустимый разброс (σ) — например, 2–5% от базового значения. · Сезонность или цикличность — суточные, недельные или сезонные паттерны нагрузки, если они есть. Генерация выполняется для временного ряда длиной T (например, 100 000 точек с частотой 1 Гц). Шаг 2. Имплантация паттернов деградации Выбирается начало деградации t0 и её длительность L. Для каждого тэга определяется тип деградации. Один и тот же отказ может по-разному проявляться на разных датчиках. Я спросил дипсик, он предложил как вариант использовать такие соответствия: · Вибрация → рост дисперсии + появление гармоник. · Провисание штока → линейный дрейф среднего значения. · Температура → экспоненциальный рост. · Уровень → рост дисперсии (турбулентность). Шаг 3. Добавление реалистичного шума и помех Рекомендуется добавить несколько слоёв искажений: · Гауссовский шум N(0, σ) — для фонового шума измерений. · Импульсный шум — случайные выбросы. · Дрейф нуля — медленное изменение из-за калибровки. · Пропуски данных — обнуление случайных участков. Шаг 4. Кросс-корреляция между датчиками Отказы обычно видны на нескольких датчиках одновременно: · Построить матрицу корреляции реальных данных (если есть) или назначить связи экспертно. · При генерации деградации на одном датчике — добавить ослабленный сигнал (50–70% амплитуды) на коррелирующие датчики. Можно этот план использовать как основу. Дальше его можно расширять под конкретные типы оборудования и доступные данные. P.s. кстати, мне кажется создание датасетов для ИИ моделей, это неплохой бизнес и монетизация🤔