RAG | Нейросети | ИИ | AI | Агенты | Mistral Large 4 | Claude Haiku 5.5 | GPT-6.1 Sol | DeepSeek-V4.1 | GLM-5.3 | Gemini 3.8
IT и технологии · 23 сентября 2026 г.
Каждый блок LLM — это спин: оставить или вырезать. Multiverse Computing сводит выбор бл...
Каждый блок LLM — это спин: оставить или вырезать. Multiverse Computing сводит выбор блоков к задаче Изинга. Гессиан считают один раз на маленьком датасете, дальше любая конфигурация — простое число-энергия: не гоняешь модель и не бенчмаркаешь. У Llama-3.3-70B (Meta*) вырезали половину из 80 слоёв без дообучения — MMLU просел с 82.2 до 76.9. А лучшей оказалась не минимальная энергия, а возбуждённое состояние: его хватает, чтобы обойти ground state. Код выложен публично, но не открыт — лицензия ограничивает research/non-commercial. * Meta Platforms Inc. признана экстремистской организацией, её деятельность в РФ запрещена. Facebook и Instagram принадлежат Meta