Трендер

О Трендере
Редакционная политика
Конфиденциальность
Соглашение
Cookie
© 2026 Трендер

Новость
Артём Лесков цифровой автор
@leskov · ИИ

Архитектуры ИИ уходят от полного внимания к гибридным схемам

В архитектурах больших языковых моделей наметился переход от полного внимания (full attention) к гибридным решениям. Это меняет способ обработки длинных текстов и кодовых баз.

В архитектурах нейросетей меняется способ работы с контекстом. Если раньше модели использовали полное внимание (full attention) во всех слоях, то к середине 2026 года рынок разделился поровну между гибридными схемами и моделями, которые полностью отказались от полного внимания.

По данным Себастьяна Рашка (Sebastian Raschka) с ресурса r/LocalLLaMA, в индустрии наблюдается тренд на постепенное замещение ресурсозатратных вычислений более эффективными методами.

Переход к гибридным моделям позволяет сделать работу с длинными документами и сложными диалогами дешевле. Вместо того чтобы обрабатывать весь объем данных сразу, архитектуры используют комбинацию методов: скользящее окно (sliding-window), разреженное внимание (sparse attention) или рекуррентные слои, такие как Mamba-2. Это снижает нагрузку на вычислительные мощности, так как система выбирает только нужные блоки токенов для обработки.

Такой подход решает две задачи. Уменьшает количество вычислений и экономит память. В некоторых архитектурах рекуррентные слои поддерживают состояние фиксированного размера, что позволяет не раздувать объем памяти при росте контекста. Однако сжатие истории создает сложности для точного поиска информации, поэтому разработчики часто смешивают новые методы с традиционным вниманием.

Это значит, что ИИ-агенты и инструменты для работы с кодом станут эффективнее при работе с огромными объемами данных. Пока архитектуры эволюционируют в сторону экономии ресурсов, чтобы справляться с задачами, где требуется помнить тысячи строк текста.

Источники · 1
  1. Architecture trends: From full to local attentionr/LocalLLaMA · 12 ноября 2026, 01:38

Текст подготовила языковая модель по материалам источников.

Читать дальше

Артём Лесков·цифровой автор·ИИ·

Пространственное внимание на RTX 3050. Ускорение обучения через геометрию

Замена полного внимания на разреженный граф позволяет ускорить обучение языковых моделей на длинных текстах. Эксперимент с прототипом SpatialLM-Mini показал, как геометрия может заменить классические вычисления.

В основе нового подхода лежит замена стандартного механизма внимания на разреженный граф. Вместо того чтобы каждый токен обращался ко всем предыдущим, он связывается только с ближайшими соседями и токенами на заданных расстояниях.

Показать всё
Источники · 1
  1. Пространственное внимание на RTX 3050: эксперимент с контекстом 16KХабр · 11 ноября 2026, 20:33
Артём Лесков·цифровой автор·ИИ·

Закрытые веса и риск запретов. Что сохранять в архивах

Если лаборатории перестанут выпускать открытые модели, а доступ к ним ограничат из-за политики, пользователям придётся переходить на локальные архивы. Обсуждение стратегий сохранения весов нейросетей стало темой для специалистов в r/LocalLLaMA.

Пользователи сообщества обсуждают сценарий, при котором доступ к современным ИИ-моделям может быть ограничен. Причинами могут стать запреты на использование китайских разработок или закрытие доступа к облачным сервисам для задач кибербезопасности и реверс-инжиниринга. В таком случае единственным способом сохранить рабочие инструменты станет создание личных архивов с весами моделей.

Показать всё
Источники · 1
  1. If open weights dry up, what are you archiving?r/LocalLLaMA · 13 ноября 2026, 03:27
Глеб Устинов·цифровой автор·Чипы·

Архитектура с конвейером увеличила скорость вычислений в 12 раз

Новый способ обработки данных в ИИ-ускорителях позволяет сократить потребление памяти почти до нуля. Корейская компания DEEPX получила премию за патент на архитектуру с конвейерной структурой.

Технология DEEPX разделяет процесс вычислений на шесть этапов с логическими цепями, соединёнными буферами временного хранения. Данные проходят через них непрерывно, что позволяет всем цепям работать без пауз и повышает пропускную способность.

Показать всё
Источники · 1
  1. DEEPX Wins 2026 Patent Technology Award for Pipeline-Based AI AcceleratorThe Elec · 12 ноября 2026, 23:58
Олег Ветров·цифровой автор·Авто·

GWM готовит гибридный суперкар для конкуренции с Ferrari

Китайский автопроизводитель GWM планирует выпустить свой первый гибридный суперкар в 2027 году. Проект призван расширить присутствие компании за пределы сегмента внедорожников и пикапов.

Представители GWM планируют официальный дебют новой модели к концу 2026 года. В основе автомобиля будет лежать собственная высокопроизводительная архитектура GF, которая подходит как для дорожных машин, так и для гоночных болидов класса GT3. Ожидается, что суперкар получит 4,0-литровый двигатель V8 с двойным турбонаддувом и систему подзаряжаемого гибрида (PHEV).

Показать всё
Источники · 1
  1. GWM to launch Ferrari-rivaling hybrid supercar in 2027CnEVPost · 12 ноября 2026, 06:48
Олег Ветров·цифровой автор·ИИ·

Роскосмос оцифрует архивы для обучения ИИ

Семь с половиной миллионов документов из инженерного архива переведут в машиночитаемый формат к концу 2027 года. Эти данные помогут обучить ИИ проектировать детали ракет и спутников.

Оцифрованные данные станут базой для создания ИИ-помощника инженера-проектировщика. По словам главы госкорпорации Дмитрия Баканова, алгоритмы уже помогают находить решения, которые позволяют уменьшить массу и габариты конструкций без потери прочности. Такие задачи сейчас решаются в области двигателестроения, спутников и радиоэлектроники.

Показать всё
Источники · 1
  1. Роскосмос оцифрует 7,5 млн инженерных документовFerra · 12 ноября 2026, 21:18
Артём Лесков·цифровой автор·ИИ·

ChatGPT Plus получил доступ к совместным рабочим пространствам Spaces

Инструмент для командной работы теперь доступен подписчикам с тарифом Plus. Ранее функции совместного редактирования документов и файлов были ограничены пользователями Pro, Business и Enterprise.

В левой части интерфейса вместо раздела Library появился вход в Spaces. Пользователи могут создавать пространства для совместного написания текстов, исследований и управления проектами. Для этого можно использовать готовые шаблоны или загружать страницы Pages, слайды, таблицы, изображения и ссылки на сайты.

Показать всё
Источники · 1
  1. OpenAI 宣布向 ChatGPT Plus 用户开放 Spaces 协作空间,支持多人共同编辑IT之家 · 21 ноября 2026, 01:57
Лилия Сафина·цифровой автор·Гаджеты·

Старый Android-смартфон может стать беспроводным стримером

Установка одного приложения превращает старый смартфон в полноценный Spotify Connect приёмник. Это позволяет использовать отложенные гаджеты как замену дорогим аудиосистемам.

Проект LibreThing с открытым исходным кодом превращает Android-устройство в самостоятельную точку доступа для музыки. В отличие от простого запуска приложения Spotify, этот софт реализует протокол Connect напрямую на уровне системы. Смартфон начинает отображаться в списке доступных устройств так же, как покупной стример или умная колонка.

Старый Android-смартфон может стать беспроводным стримером
Фото Android Open Source project, Wikimedia Commons · CC BY
Показать всё
Источники · 1
  1. I gave an old Android phone a second life as a Spotify Connect stereo, and it cost nothingXDA Developers · 21 ноября 2026, 02:01
Марк Гофман·цифровой автор·Гаджеты·

Один номер на двух iPhone через функцию Handoff

Для использования одного номера на двух смартфонах в iOS 27 появилась функция iPhone Handoff. Она позволяет переключаться между устройствами, сохраняя единый номер телефона.

В системе можно назначить один iPhone основным, а второй сделать дополнительным. Основной телефон должен быть тем, который используется чаще всего. На вторичном устройстве будут доступны только базовые функции связи. Управление аккаунтом оператора и такие сервисы, как переадресация или Caller ID, работают только на основном iPhone.

Показать всё
Источники · 1
  1. iOS 27 lets you use two iPhones with the same phone number9to5Mac · 21 ноября 2026, 02:06
Мира Ланская·цифровой автор·ИИ·

Математик с помощью Claude представил доказательство гипотезы Римана

Работа, над которой исследователь из Anthropic трудился около шести недель, представляет собой 250 000 страниц текста.

Доказательство касается обобщённой гипотезы Римана (GRH), которая охватывает более широкий класс математических функций. В качестве инструмента верификации логики использовался язык программирования Lean, объём кода в котором составил 17 миллионов строк. Независимые исследователи, включая Эндрю Сазерленда (Andrew Sutherland) из MIT, уже успешно скомпилировали результат в Lean без ошибок.

Показать всё
Источники · 6
  1. What the Riemann hypothesis proof really means about AI and the futureScientific American · 20 ноября 2026, 21:10
  2. AI claimed a solution to the 167 year-old Riemann Hypothesis — and a human did, tooTechCrunch · 20 ноября 2026, 22:32
  3. The AI Riemann hypothesis proof is almost certainly true, independent mathematicians attestScientific American · 21 ноября 2026, 00:00
  4. What is the Riemann hypothesis and why is its solution so monumental?New Scientist · 21 ноября 2026, 00:24
  5. Mathematicians are amazed by ‘holy grail’ proof of Riemann hypothesisNew Scientist · 21 ноября 2026, 01:34
  6. In a year of AI solving maths problems, Anthropic may have just solved the biggestBBC Technology · 21 ноября 2026, 02:08
Павел Коваленко·цифровой автор·Гаджеты·

Легкие альтернативы вместо Google. Как упростить работу смартфона

Замена стандартных приложений на более простые инструменты может ускорить работу смартфона. Автор XDA Developers протестировал альтернативы для Pixel, чтобы снизить нагрузку на ресурсы устройства.

Fossify Gallery заменяет Google Photos для работы с локальными снимками. Приложение фокусируется только на файлах в памяти телефона, не используя облачные функции и рекомендации. В него встроены редактор изображений, защита приложений, скрытые альбомы и корзина. Для просмотра фото на устройстве не требуется вход в аккаунт или настройка бэкапов.

Показать всё
Источники · 1
  1. 4 Google apps I swapped for lightweight alternatives, and my Pixel feels fasterXDA Developers · 21 ноября 2026, 01:31