Dealer.AI
Жоский ИИ дядя. Твой личный поставщик AI 💊💉🤖 Канал о мире интересного AI: ML, DL, NLP/NLU, RL, Retrieval, RecSys. Для связи @dealer_ai Habr @Andriljo
Mostrar más5 239
Suscriptores
+924 horas
+217 días
+16030 días
- Suscriptores
- Cobertura postal
- ER - ratio de compromiso
Carga de datos en curso...
Tasa de crecimiento de suscriptores
Carga de datos en curso...
Photo unavailableShow in Telegram
Когда пытаешься воспроизвести sota пейперы.
*пятница развратница-sota юмор*
Спасибо @FuturioFranklin
😁 32❤ 2
Вокруг всякие там FA3 анонсы
а тут HF под шумок с Кекасом-Керасом колабятся..
https://huggingface.co/blog/keras-nlp-integration
Announcing New Hugging Face and Keras NLP integration
We’re on a journey to advance and democratize artificial intelligence through open source and open science.
❤ 7
Repost from Den4ik Research
В копилку эмбеддинг моделей - deepvk/USER-bge-m3
Модель позиционируется как сентенс энкодер для русского языка, инициализированная на основе TatonkaHF/bge-m3_en_ru (урезанной версии baai/bge-m3).
Однако близость с эмбдами оригинального BGE-M3 довольно высока:
дистиллят рисерч))
При этом авторы описывают процесс обучения, включающий файнтюн на русскоязычных датасетах и применение техники LM-Cocktail для объединения моделей.
Ниже приложу код замеров и ссылка на датасет:
Датасет: en-ru-corpus
Поддержать автора: cloudtips
@den4ikresearch
Avg Cosine Similarity: 0.9666Такая схожесть наводит на мысль о возможной дистилляции оригинальной BGE-M3, а что, так можно было?)) Вот он такой современный
Den4ikAI/yandex_parallel_ruen_corpus at main
We’re on a journey to advance and democratize artificial intelligence through open source and open science.
🔥 6
Тут конечно вопрос, скок видел BGE и этот тюн. Мб там шифт минимальный от родителя, а еще там мерджа, ну мб и дистилл. Интересное👇
Когда роутят mom LLM, RouteLLM
Уже во всю гуляет тренд роутить LLM. Дядя писал даже идейку тут.
И вот очередная поделка, для этого. RouteLLM - это либа для эффективной маршрутизации нескольких LLM.
Обещают как всегда скорость, и рост метрик аля mtbench и mmlu.
В фреймворке реализована интеграция с API (OpenAI, Anthropic, Google, Amazon Bedrock) и локальным бекэндом (Ollama)
Имеются 4 преднастроенные стратегии роутинга: х2 с LLM , одна на bert и святой random:)
https://github.com/lm-sys/RouteLLM
https://arxiv.org/pdf/2406.18665
https://huggingface.co/routellm
GitHub - lm-sys/RouteLLM: A framework for serving and evaluating LLM routers - save LLM costs without compromising quality!
A framework for serving and evaluating LLM routers - save LLM costs without compromising quality! - lm-sys/RouteLLM
🔥 4👍 2❤ 1🥴 1
Photo unavailableShow in Telegram
По легенде, особи AI противоположенного пола сбегаются на ДСов с Axe AI.
Не реклама. Просто кек. Жена подогнала.
😁 66🙈 6
Elige un Plan Diferente
Tu plan actual sólo permite el análisis de 5 canales. Para obtener más, elige otro plan.