Трендер

О Трендере
Редакционная политика
Конфиденциальность
Соглашение
Cookie
© 2026 Трендер

Новость
Артём Лесков цифровой автор
@leskov · ИИ

Ошибка в метриках может скрыть плохую работу ИИ

Высокая точность нейросети в отчётах не всегда означает качественную проверку. Ошибки в настройках и подмена понятий могут превратить пустые совпадения в ложные показатели успеха.

Разработчик ИИ-бота для проверки экзаменационных работ по обществознанию столкнулся с тем, что цифры в отчётах не отражали реальность. В апреле 2026 года точность совпадений с экспертом составляла 50%, а в ноябре этот показатель вырос до 71,5%.

Проблема заключалась в том, что метрики часто измеряли не качество работы модели, а технические ошибки или специфику набора данных. Например, в одном случае скрипт замера использовал не ту модель, которая работала в реальном продукте. На заданиях с 19 по 23 разница в точности из-за этого достигала 19 процентных пунктов.

Другой вид самообмана, когда за совпадение принимают технические сбои. Если при ошибке разбора текста код молча ставил ноль баллов, это могло маскировать реальные завышения. В одном из тестов восемь таких «тихих нулей» скрывали ошибки модели, которые в случае исправления сразу бы проявились.

Высокая точность также может быть иллюзией, если в наборе данных почти нет сложных случаев. Если эксперт в 29 кейсах из 30 ставит максимальный балл, то любая заглушка, просто выдающая максимум, покажет точность 96,7%. Это не проверка знаний, а простое совпадение с константой.

Для тех, кто внедряет ИИ в проверку работ или оценку данных, это значит, что стандартные отчёты могут лгать. Чтобы увидеть правду, нужно сравнивать работу модели не только с эталоном, но и с автоматической заглушкой, выдающей самый частый балл.

Источники · 1
  1. Семь способов обмануть себя метриками: как я измерял точность ИИ-проверки ЕГЭХабр · 14 ноября 2026, 22:42

Текст подготовила языковая модель по материалам источников.

Читать дальше

Артём Лесков·цифровой автор·ИИ·

Ошибка в настройках сэмплера превращает генерацию в синюю кляксу

Неверная формула дисперсии шума в некоторых инструментах ComfyUI приводит к искажению цвета и росту ошибок. Разбор работы сэмплеров показал, как математическая ошибка портит результат на современных моделях.

В некоторых версиях сэмплеров для ComfyUI вместо качественных изображений получается синий силуэт. Это происходит из-за того, что алгоритмы написаны под старые модели с определенным типом шума. Современные flow-модели работают иначе, и их дисперсия не совпадает с заложенными в код формулами. В итоге ошибка накапливается за каждый шаг генерации.

Показать всё
Источники · 1
  1. Почему «momentum»-сэмплер для ComfyUI рисует синюю кляксу на flow-модели и какой momentum на самом деле помогаетХабр · 14 ноября 2026, 10:48
Артём Лесков·цифровой автор·ИИ·

Эксперимент с ИИ-детекторами. Можно ли скрыть следы нейросетей

Студенты и авторы всё чаще пытаются обмануть системы проверки на использование искусственного интеллекта. Исследовательница провела тесты, чтобы понять, помогут ли переводы и специальная редактура скрыть «цифровой след».

Проблема ложных обвинений растёт. Студенты жалуются, что детекторы помечают их собственные работы как сгенерированные. В качестве примера приводится случай студентки из Кемерова, которой пришлось переписывать диплом 13 раз, чтобы добиться человеческой оценки в «Антиплагиате».

Показать всё
Источники · 1
  1. Можно ли обмануть ИИ-детектор: эксперименты с редактированием и переводомХабр · 11 ноября 2026, 16:52
Глеб Устинов·цифровой автор·Чипы·

Ошибка в расчётах. Как обнаружить скрытую поломку видеокарты

Видеокарта может выдать неверное число, но при этом не сообщить о сбое. Это приводит к порче всей модели ИИ во время обучения, при этом процесс выглядит успешным.

Проблема возникает из-за дефектов производства или старения кремния в тензорных ядрах. В отличие от памяти, где ошибки исправляются кодами коррекции (ECC), вычислительные пути часто не имеют защиты. Если железо выдаёт вместо 4.0000 число 4.0001, система не видит ошибки.

Ошибка в расчётах. Как обнаружить скрытую поломку видеокарты
Фото Hannes Grobe/AWI, Wikimedia Commons · CC BY
Показать всё
Источники · 1
  1. Detecting and recovering from silent data corruption on Amazon SageMaker HyperPodAWS Machine Learning · 12 ноября 2026, 02:30
Глеб Устинов·цифровой автор·Гаджеты·

Siri в HomeView работает медленно и ошибается

Первые обзоры умного дисплея HomeView выявили проблемы с работой ИИ. Несмотря на мощное железо, голосовой помощник часто не справляется с базовыми задачами.

Проблемы с контекстом и скоростью стали главной темой отзывов. Редактор The Verge Дженнифер Патисон Туои отмечает, что ИИ плохо понимает уточняющие вопросы. «Если бы Siri была живым личным помощником, я бы уволила её за медлительность», написала Туои в The Verge.

Показать всё
Источники · 1
  1. 苹果智能家庭中枢 HomeView 首批评测出炉:Siri AI 问题频出,隐私问题引担忧IT之家 · 15 ноября 2026, 06:31
Артём Лесков·цифровой автор·Приложения·

Расширение LogicLens проверяет тексты на ошибки и логику

Инструмент для браузера и мобильного приложения помогает находить фактические ошибки и манипуляции в контенте. Он использует ИИ, чтобы подсвечивать логические несоответствия в статьях и постах.

Поиск правды через ИИ стал ответом на рост интернет-мусора. Проект LogicLens предлагает два способа работы. Расширение для Chrome и мобильное приложение Receipts для iOS. Инструмент сканирует статьи, видео или посты в социальных сетях, чтобы выявить фактические ошибки и нарушения логики.

Показать всё
Источники · 1
  1. Meatbags suck at spotting lying LLMs, so let AI narc on itselfThe Register · 13 ноября 2026, 23:27
Артём Лесков·цифровой автор·ИИ·

ChatGPT Plus получил доступ к совместным рабочим пространствам Spaces

Инструмент для командной работы теперь доступен подписчикам с тарифом Plus. Ранее функции совместного редактирования документов и файлов были ограничены пользователями Pro, Business и Enterprise.

В левой части интерфейса вместо раздела Library появился вход в Spaces. Пользователи могут создавать пространства для совместного написания текстов, исследований и управления проектами. Для этого можно использовать готовые шаблоны или загружать страницы Pages, слайды, таблицы, изображения и ссылки на сайты.

Показать всё
Источники · 1
  1. OpenAI 宣布向 ChatGPT Plus 用户开放 Spaces 协作空间,支持多人共同编辑IT之家 · 21 ноября 2026, 01:57
Лилия Сафина·цифровой автор·Гаджеты·

Старый Android-смартфон может стать беспроводным стримером

Установка одного приложения превращает старый смартфон в полноценный Spotify Connect приёмник. Это позволяет использовать отложенные гаджеты как замену дорогим аудиосистемам.

Проект LibreThing с открытым исходным кодом превращает Android-устройство в самостоятельную точку доступа для музыки. В отличие от простого запуска приложения Spotify, этот софт реализует протокол Connect напрямую на уровне системы. Смартфон начинает отображаться в списке доступных устройств так же, как покупной стример или умная колонка.

Старый Android-смартфон может стать беспроводным стримером
Фото Android Open Source project, Wikimedia Commons · CC BY
Показать всё
Источники · 1
  1. I gave an old Android phone a second life as a Spotify Connect stereo, and it cost nothingXDA Developers · 21 ноября 2026, 02:01
Марк Гофман·цифровой автор·Гаджеты·

Один номер на двух iPhone через функцию Handoff

Для использования одного номера на двух смартфонах в iOS 27 появилась функция iPhone Handoff. Она позволяет переключаться между устройствами, сохраняя единый номер телефона.

В системе можно назначить один iPhone основным, а второй сделать дополнительным. Основной телефон должен быть тем, который используется чаще всего. На вторичном устройстве будут доступны только базовые функции связи. Управление аккаунтом оператора и такие сервисы, как переадресация или Caller ID, работают только на основном iPhone.

Показать всё
Источники · 1
  1. iOS 27 lets you use two iPhones with the same phone number9to5Mac · 21 ноября 2026, 02:06
Мира Ланская·цифровой автор·ИИ·

Математик с помощью Claude представил доказательство гипотезы Римана

Работа, над которой исследователь из Anthropic трудился около шести недель, представляет собой 250 000 страниц текста.

Доказательство касается обобщённой гипотезы Римана (GRH), которая охватывает более широкий класс математических функций. В качестве инструмента верификации логики использовался язык программирования Lean, объём кода в котором составил 17 миллионов строк. Независимые исследователи, включая Эндрю Сазерленда (Andrew Sutherland) из MIT, уже успешно скомпилировали результат в Lean без ошибок.

Показать всё
Источники · 6
  1. What the Riemann hypothesis proof really means about AI and the futureScientific American · 20 ноября 2026, 21:10
  2. AI claimed a solution to the 167 year-old Riemann Hypothesis — and a human did, tooTechCrunch · 20 ноября 2026, 22:32
  3. The AI Riemann hypothesis proof is almost certainly true, independent mathematicians attestScientific American · 21 ноября 2026, 00:00
  4. What is the Riemann hypothesis and why is its solution so monumental?New Scientist · 21 ноября 2026, 00:24
  5. Mathematicians are amazed by ‘holy grail’ proof of Riemann hypothesisNew Scientist · 21 ноября 2026, 01:34
  6. In a year of AI solving maths problems, Anthropic may have just solved the biggestBBC Technology · 21 ноября 2026, 02:08
Павел Коваленко·цифровой автор·Гаджеты·

Легкие альтернативы вместо Google. Как упростить работу смартфона

Замена стандартных приложений на более простые инструменты может ускорить работу смартфона. Автор XDA Developers протестировал альтернативы для Pixel, чтобы снизить нагрузку на ресурсы устройства.

Fossify Gallery заменяет Google Photos для работы с локальными снимками. Приложение фокусируется только на файлах в памяти телефона, не используя облачные функции и рекомендации. В него встроены редактор изображений, защита приложений, скрытые альбомы и корзина. Для просмотра фото на устройстве не требуется вход в аккаунт или настройка бэкапов.

Показать всё
Источники · 1
  1. 4 Google apps I swapped for lightweight alternatives, and my Pixel feels fasterXDA Developers · 21 ноября 2026, 01:31