RU

Проверка теории улучшения результата LoRA файн‑тюнинга на «умных» слоях

При LoRA‑дообучении адаптеры обычно применяются ко всем слоям модели, хотя активность разных слоев во время обработки промпта заметно разл…

машинное обучениедообучение llmlorafine-tuningtransformerspytorchhuggingfacenlpllmresearch
Habr
RU

О командах и организациях в организациях или снова о философии…

Сегодня HR-службам не позавидуешь. Часто именно они оказываются в центре скандалов, обвинений и объекты «раздачи слонов». И везде есть своя правда.…

aginlphrhr-технологииии-ассистентии-агентыии и машинное обучениеии помощник
Habr
RU

О новом мире, деглобализации, иммиграции и будущем llm

Если вся вторая половина века XX-го и начало XXI-го веков проходили под знаком глобализации, то теперь, если верить Хантингтону ( я имею ввиду его р…

ии-агентыaginlpии-ассистентии чат-ботии и машинное обучениеии
Habr
RU

Философия и культурология становится трендом в IT. А может такое уже было?

Крупные компании начинают не просто привлекать,  а брать в штат философов , культурологов. Цукерберг и Безос начинают ходить на благотворительн…

nlpagiии-ассистентии-инжинирингии-агентыии-помощники
Habr
RU

476 000 новостей против нейронки: пять попыток заставить текст предсказывать цену

Гипотеза «новости двигают рынок» — самая интуитивная в трейдинге. Настолько интуитивная, что я потратил на её проверку неде…

алготрейдингмашинное+обучениеnlpанализ данныхsentiment analysisбэктестингнейронные сетимосбиржа
Habr
RU

Онлайн-магистратура НИЯУ МИФИ «Специалист по работе с данными и применению ИИ»: как успеть поступить в 2026 году

Привет, это команда Яндекс Практикума. Приём документов на поступление в 2026 году закончится меньше, чем через неделю, но вы ещё можете успеть пост…

яндекс практикуммифимагистратураонлайн-образованиеииmlcvnlp
Habr
RU

Сжатие словаря. Языки из омонимов и хроматическое число

В естественном языке распространена ситуация, когда значение слова нельзя установить без контекста: «замок закрыли ключом», «замок окружён рвом». С…

сжатие данныхомонимияхроматическое числоnlpграфсжатие словаряраскраска графажадный алгоритмграф сочетаемости словпохожесть слов
Habr
RU

Облачные ИИ не справляются, MiniLM-L6 ломается на философии: строим локальный RAG для сложных семантических текстов

Этот проект долго вынашивался и, в конце концов, начался как очередная попытка разобраться в философских текстах, написанных Джейн Робертс во второй…

raglocal llmnlppythonvector search
Habr
RU

Как переводить смешанный русский-казахский и не сойти с ума

В Казахстане часто смешивают казахский и русский в соцсетях, переписке, быту. Но попробуйте скормить русско-казахскую фразу любой системе машинного…

SimAlignдатасетыдатасеты обучениямашинный переводязыковые моделиllmказахский языкnlpисследованиясинтетические данные
Habr
RU

Как переводить смешанный русский-казахский и не сойти с ума

В Казахстане часто смешивают казахский и русский в соцсетях, переписке, быту. Но попробуйте скормить русско-казахскую фразу любой системе машинного…

SimAlignдатасетыдатасеты обучениямашинный переводязыковые моделиllmказахский языкnlpисследованиясинтетические данные
Habr
RU

[Перевод] Структура, скрытая за написанием текста языковыми моделями

Языковые модели генерируют текст, следуя скрытым грамматическим правилам, или грамматика - просто побочный эффект предсказания следующего слова? Это…

языковые моделиllmграмматикаnlpгенерация текста
Habr
RU

RAG не только для вопросов и ответов: почему он естественно подходит для рекомендаций

Retrieval-Augmented Generation (RAG) чаще всего рассматривается в контексте вопросно-ответных систем и чат-ботов поверх базы знаний. Большинство пуб…

ragnlpрекомендательные системыmachine learningllmинформационный поискfaissэмбеддинги
Habr
RU

Почему WER недостаточно: Семантическая декомпозиция ошибок ASR

В продуктах, построенных поверх моделей распознавания речи (Automatic Speech Recognition models, ASR), качество распознавания речи напрямую влияет н…

werasrnernlpречевые технологиираспознавание речиwhisperмашинное обучениеОценка качества моделейречь в текст
Habr
RU

Эволюция 'More Like This'

Во многих поисковых сценариях пользователь начинает не с пустой строки запроса, а с существующего результата. Пользователь открывает статью и хочет…

nlpобработка естественного языкавекторный поископтимизация производительностиполнотекстовый поисксемантический поискранжирование поискаtf-idfbm25
Habr
RU

Современные морфоанализаторы русского языка: от словарей к нейросетям

В статье «Извлечение и обработка требований из документов с помощью NLP-инструментов » я уже показывал, как переход от LLM к NLP-библиотекам помогае…

морфологический анализморфологический словарьnlp
Habr
RU

Ask.com закрылся. Что это был за сервис? Вспоминаем 90-е

На главной странице Ask.com недавно появилось короткое уведомление: сервис официально прекратил работу 1 мая 2026 года. Компания-владелец решила зак…

selectelask.comистория интернетапоисковые системыnlpвеб-археологияask jeeves
Habr
RU

Кастомный пайплайн BERTopic: как кластеризовать тексты и получить интерпретируемые темы с помощью LLM

Привет, Хабр! Меня зовут Антон и я занимаюсь задачами NLP в компании Ростелеком Информационные технологии. Если вам приходилось разбирать большие ма…

кластеризацияbertopicllmhdbscannlpumap
Habr