Все выпуски
Архив публикаций
Все материалы AiManual в единой хронологической ленте.
9577
Медицинские записи в JSON за 15 минут: как заставить локальные LLM читать почерк врачей
Практический гайд по обработке медицинских записей локальными LLM. Сравнение моделей (Llama 3.2, Meditron), OCR для рукописного текста, структурирование в JSON/
9578
DGX Spark: Обучение Llama 3.2 на практике оказалось в 5 раз медленнее рекламы. Вот как это исправить
Реальный бенчмарк DGX Spark для Llama 3.2. Разбираемся, почему скорость в 2 раза ниже заявленной и как настроить PyTorch окружение.
9579
Тёмная цепочка мыслей: как заставить Gemma 3 4B думать как 70B модель
Эксперимент с тонкой настройкой Gemma 3 4B на уникальном наборе данных для прокачки стратегического мышления. Технические детали, метрики, код.
9580
Llama.cpp больше не мучает: веб-центр с мозгом, который сам подбирает параметры
Обзор инструмента для автоматизации llama.cpp: веб-интерфейс, умный подбор n_gpu_layers и n_ctx, мониторинг и управление процессами через FastAPI.
9581
MiniMax M2.1 и Q6_K: как квантование ломает логику модели и что с этим делать
Почему квантованный Q6_K MiniMax M2.1 генерирует бредовый код и странные ответы. Детальный разбор проблемы и практическое решение для llama.cpp и LM Studio.
9582
Конвертация .pth в GGUF и настройка GPU в Ollama/LM Studio: полный разбор для новичков
Пошаговое руководство по конвертации моделей .pth в GGUF и настройке GPU ускорения в Ollama и LM Studio. Работаем с Llama 3.2-11b, RX 9070 XT и Vulkan.
9583
GRPO + LoRA на нескольких GPU: инженерный гайд по выжиманию последних мегабайтов из VRAM
Практическое руководство по настройке GRPO с LoRA на нескольких GPU. Конкретные параметры, метрики, экономия 33% времени, решение проблем VRAM.
9584
mHC в DeepSeek: Как гипер-соединения убивают нестабильность обучения (и почему это не магия)
Полный разбор метода mHC от DeepSeek с кодом на PyTorch. Узнайте, как гипер-соединения стабилизируют обучение глубоких сетей без взрыва градиентов.
9585
Обзор Seline: приватный AI-ассистент с векторами, пайплайнами и локальной установкой
Обзор Seline - приватного AI-ассистента с векторной БД, пайплайнами LLM и установкой в один клик. Сравнение с альтернативами, примеры использования.
9586
Maincoder-1B: как запустить новую 1-миллиардную модель для кодинга через llama.cpp
Пошаговая инструкция по запуску легкой модели Maincoder-1B для программирования через llama.cpp. Скачивание GGUF, настройка, примеры кода и сравнение.
9587
Симуляция реальности: как Qwen Long назвал мир фейком и что это говорит о проверке фактов
Технический разбор: почему LLM ошибаются на экстремальных новостях. Системные промпты Qwen Long, правила Evidence Authority и Hoax Classification. Практический
9588
RTX 5060 Ti vs RX 9060 XT для локальных LLM: гайд по выбору GPU для первого AI-PC
Полное сравнение RTX 5060 Ti и RX 9060 XT для локальных языковых моделей. Выбор видеокарты для сборки AI-PC: поддержка CUDA и ROCm, производительность, цена и э