Все выпуски
Архив публикаций
Все материалы AiManual в единой хронологической ленте.
337
Как настроить ESP-Claw на ESP32-S3: превращаем микроконтроллер в ИИ-агента для умного дома
Полный гайд по настройке ESP-Claw на ESP32-S3: подключение к LLM через OpenRouter, управление Tuya-устройствами, развертывание Open WebUI. Никакого облака — тол
338
Самовоспроизводящийся AI-червь: почему ваша локальная модель может стать заразной
Ученые создали AI-червя, реплицирующегося через локальные open-source LLM. Как это работает и почему ваша модель под угрозой — разбор инцидента безопасности 202
339
Ускорение AI на AMD GPU: новый метод генерации HIP-ядер с помощью RL и мультиагентного поиска
Новый метод использует reinforcement learning и мультиагентный поиск для автоматической генерации оптимизированных HIP-ядер. Ускорение инференса на AMD GPU до 2
340
Домашний сервер для LLM на 6x P40: запуск Minimax M2.7 с квантованием Q3_XL
Подробный гайд по сборке дешёвого сервера из шести NVIDIA P40 (144 ГБ VRAM) для запуска больших языковых моделей. На примере Minimax M2.7 с квантованием Q3_XL —
341
OpenLumara Harness: токен-эффективная упряжка с OpenAI-мостом для локальных LLM
Обзор OpenLumara — супер-токен-эффективного инструмента с OpenAI Bridge для локальных моделей. Сравнение с альтернативами, примеры, кому подойдёт.
342
Tokenminning: как сократить расходы на AI-агентов, минимизируя токены без потери качества
Практическое руководство по оптимизации токенов в AI-агентах. Методы сжатия промптов, кэширование, маршрутизация запросов и реальные кейсы экономии до 60%.
343
Полное руководство по сжатию декодерных эмбеддеров: от 8B до продакшена без потери recall
Научитесь сжимать эмбеддинги Qwen3-Embedding и NV-Embed с 4 ГБ до 128 МБ без потери качества. Product Quantization, бинарное квантование, FAISS и продакшен-сове
344
Как собрать локальную мультимедийную RPG-модель: дьявольски подробный гайд
Пошаговое руководство по созданию локальной ролевой ИИ-модели с генерацией текста, изображений и звуков. Ollama, ComfyUI, TTS. Работает на 24 ГБ VRAM.
345
Первое независимое тестирование 1-битной модели Bonsai-8B для вызова инструментов на CPU: победа над IBM Granite при грамматически ограниченной декодировке
Независимый бенчмарк 1-битной Bonsai-8B для tool calling на CPU: грамматическая декодировка через llama.cpp. Bonsai-8B опередила IBM Granite в точности вызова и
346
Как развернуть кодинг-модель на трёх Spark GB10: выбор модели и стек (vLLM + llama-swap)
Локальный инференс Qwen 3.5 122B на трёх Spark GB10 с помощью vLLM и llama-swap. Дёшево, без облака. Подробный гайд с пошаговыми инструкциями и нюансами.
347
Meta-Spider: мета-внимание для контроля поведения LLM — разбор новых компонентов
Глубокий технический обзор фреймворка Meta-Spider с новыми компонентами: ручка неуверенности, сторож и фабрика обвязок. Как это решает дрейф цели и что дает раз
348
Создаем локальный бэкенд для NPC с диалогами NPC-NPC на базе LLM
Как создать бэкенд для диалогов между NPC с помощью локальной LLM. Код, примеры, сравнение с альтернативами. Для разработчиков игр.