RU

Как я подружил llama-server с Claude Code: доработка Go-лаунчера для локальных LLM

В своих прошлых материалах я уже рассказывал о запуске крупных MoE-моделей на ограниченном железе через llama-server и о сравнительных экспериментах…

искусственный интеллектclaude-codeлокальные llmлокальные моделиllama.cpp
Habr
RU

Локальные нейросети без Python, CUDA и терминала: делаю программу, в которой всё настраивается само

Vulkan на моей GTX 1080 генерирует в полтора раза быстрее CUDA. Qwen вставляет китайские слова в русский текст даже при температуре 0. А маленькая м…

локальные нейросетиLLMllama.cppRustTauriVulkanCUDAHuggingFaceGGUFOllivo
Habr
RU

Как я выбирал локальную модель для кодинга на 16 ГБ VRAM — и трижды менял победителя

Сначала я выбрал модель, которая отлично писала код. Подключил её к OpenCode и выяснил, что создавать файлы на диске она просто не&nb…

локальные LLMлокальные нейросетиQwen3-Coderllama.cppOpenCodeмодели для программированияквантование моделейVRAMWordPress-разработкаагентское программирование
Habr
RU

Тест локальных MOE моделей

Я тут решил решил чуток заморочиться и протестировать локальные MOE модели на кодинг. Кодинг громко сказано - мои задачи исключительно игры причем н…

llmllama.cppигрыhtml
Habr
RU

LongConspectWriter: автоматическая генерация структурированных конспектов лекций на потребительском GPU

Автоматическая генерация структурированных академических конспектов из аудиозаписей лекций по точным и естественным наукам затруднена для локальных…

LLMлокальные LLMllama.cppквантизациясуммаризация текстадлинный контекстмультиагентные системысемантическая кластеризацияLLM-as-a-judgeконспекты лекций
Habr
RU

Vibecode по дешевке — домашний сервер с Qwen Code за 25к, который не отключит Anthropic

Я начинающий инженер: учусь, работаю, пишу код. Подсел на Claude — и быстро уткнулся в лимиты: полчаса работы, и могучие руки превращаются в лапки.…

Tesla V100локальный LLMllama.cppдомашний серверинференсself-hostedнейросетиAI-агентводяное охлаждениеqwen code
Habr
RU

Claude Code с локальными Qwen3.6 на AMD Strix Halo: полное руководство по настройке

Всем привет! Продолжаю тему локальных LLM. В предыдущей статье  мы сравнивали железо для инференса — Nvidia DGX Spark, Mac Studio M3 Ultra и St…

claude-codestrix haloии-агентыпрограммированиеantropicqwen3.6локальный ииllama.cppvibecoding
Habr