RU

Можно ли научить маленькую LLM учиться без роста весов? Продолжение: почему повторное обучение упёрлось в потолок

В первой статье я показал несколько опытов с небольшой моделью (её размер влезает в обычную домашнюю видеокарту) вокруг одного вопроса: может ли так…

llmcontinual learningloraдистилляциямашинное обучениеэкспериментыверификацияnatural language processing
Habr
RU

Своя модель решений на русском за вечер аренды GPU: что она умеет, сколько стоит и где проигрывает

Немалую долю задач в бизнесе, где применим ИИ можно свести к выбору варианта ответа на тот или иной вопрос, например, куда направить обращение, кто…

классификациямодель решенийкалибровкаloraqwenyandexgptgigachatавтоматизациярусский nlphugging face
Habr
RU

Я б в ИИ-шечку пошёл, пусть меня научат

Привет, Хабр! В эфире руководитель проектов компьютерной редакции издательства «БХВ» @Holmogorov и сегодня я хотел бы поговорить о будущем, вернее о…

ИИлитературакнигибхвAIllmагентымашинное обучениеloraискусственный интеллект
Habr
RU

Метеостанция, которая измеряет радиацию: счётчик Гейгера, ESP32 и LoRa

Каждый день мы интересуемся погодой — смотрим, идёт ли дождь, какая температура на улице, сильно ли дует ветер. Однако есть ещё один важный параметр…

esp32loraсчётчик Гейгерарадиациядозиметрметеостанцияarduinoмикроконтроллерысвоими руками
Habr
RU

От 3000 сессий в месяц до 100 в секунду: как LLM заменила ручную оценку ботов поддержки

Привет, Хабр! На связи Ангелина Большина, Денис Толкачев и Игорь Буянов, команда Customer Support NLP, мы разрабатываем ботов для службы поддержки к…

мтсmws aigcr2.0чатботыискусственный интеллекllmподдержка клиентовloraGROSSразметка
Habr
RU

От 3000 сессий в месяц до 100 в секунду: как LLM заменила ручную оценку ботов поддержки

Привет, Хабр! На связи Ангелина Большина, Денис Толкачев и Игорь Буянов, команда Customer Support NLP, мы разрабатываем ботов для службы поддержки к…

мтсmws aigcr2.0чатботыискусственный интеллекllmподдержка клиентовloraGROSSразметка
Habr
RU

Хотел свою систему, которую можно менять когда угодно, и сделал три десктопных AI-приложения

Я всегда хотел иметь свою систему: свои приложения, в которых можно изменить что угодно, а не что-то чужое, что завтра могут поменять. Так появился…

Aiai-агентыtaurielectronollamaлокальные llmfine-tuningloraдесктопные приложенияreact
Habr
RU

Проверка теории улучшения результата LoRA файн‑тюнинга на «умных» слоях

При LoRA‑дообучении адаптеры обычно применяются ко всем слоям модели, хотя активность разных слоев во время обработки промпта заметно разл…

машинное обучениедообучение llmlorafine-tuningtransformerspytorchhuggingfacenlpllmresearch
Habr
RU

Ретранслятор LoRa своими руками: увеличиваем дальность связи без лишней мощности

В предыдущей статье я рассказывал о том, как предоставить удалённый доступ к данным измерений метеостанции с помощью модулей Heltec Automation HTIT-…

loraретрансляторрепитеррадиосвязьdiyмикроконтроллерыинтернет вещейarduino
Habr
RU

Как я автоматизировал создание стикеров для соцсетей: локально обучаем стилевую LoRA для SD 1.5 на 30 картинках

Генерация красивых единичных артов давно перестала быть проблемой. Но как только возникает прикладная задача — например, сделать…

stable diffusionloracomfyuiгенерация изображенийобучение нейросетидатасетonetrainerстикерыblipsd1.5
Habr
RU

Стоит ли использовать TCXO в LoRa2012?

Группа точек мониторинга орошения, распределённых в горной местности, днём нагревается на солнце, а ночью остывает — суточный перепад температур мож…

loralr2012LoRa2012tcxoкварцевый генератортемпературный дрейфsub-GHzSemtechчувствительность приёмникабеспроводная связь
Habr
RU

Как мы за $2k собрали управляемую мировую модель на базе Wan 2.1

Всем привет! Мы два 19-летних студента второго курса из Казахстана. В свободное от учёбы время мы развиваем DreamForge — собстве…

world modelsмировые моделилораlorawanавторегрессионные моделиdreamforgeиигенеративные моделитрансформер
Habr
RU

Как я обучил русский RAG‑сплиттер, который режет документы по индексам, а не по тексту

TL;DR.  Из интереса обучил собственный русский RAG‑сплиттер — захотелось проверить, можно ли сделать context‑aware‑нарезку русск…

ragчанкингдистилляцияloraunslothтокенизацияllama.cppggufvulkanamd
Habr
RU

35 годиков, а я радуюсь радио. История о том, как хаос в отладке автономного узла стоил шести месяцев

Собрал автономный радиоузел на заборе с солнечной панелью — связь без интернета заработала. Решил добавить метрики энергопотребления…

meshtasticdiyloralorawani2cрадио
Habr
RU

Дообучаем FLUX.2 [klein] за час на одной видеокарте: LoRA, Diffusers и Gradio без лишней боли

FLUX.2 [klein] достаточно компактна, чтобы дообучать её на одной потребительской видеокарте. Прогон обучения LoRA для 4B-модели укладывается в 24 ГБ…

FLUX.2loraдообучение моделейгенерация изображенийгенеративный ИИdiffusersподготовка датасетаредактирование изображений
Habr
RU

Распределённая система мониторинга и аналитики присутствия людей в инфраструктурных объектах без использования камер

Обзор будущего продукта. Distributed Occupancy Intelligence Platform - это распределённая система мониторинга и аналитики присутствия людей в здания…

loraiotiot платформаmesh-сетьembeddedembedded systemsc++iot разработкаiot distributedsystemsembedded software development
Habr
RU

Как я сделал резервное управление дачей через Meshtastic

Обычно Meshtastic используют как мессенджер. Я применил его как резервный канал связи с удаленным объектом.  Задача простая: есть дача с регуля…

wiren boardmeshtasticloraуправлениеesp32linuxстатусумный домSQLiteдиспетчеризация