НАБДД заявляет, что автоматическое управление Tesla уменьшило количество сбоев
В январе 2017 года Национальная администрация безопасности дорожного движения опубликовала заявление о безопасности и эффективности технологии Tesla Autosteer. По данным Управления по расследованию дефектов (ODI), технология удержания полосы движения Tesla позволила снизить уровень аварийности почти на 40 процентов. Теперь мы знаем, что это число было совершенно неверным, основываясь на новом анализе того же набора данных, который NHTSA использовал для достижения этого вывода.
Аналитическая фирма Quality Control Systems подала запрос в FOIA в НАБДД, чтобы увидеть фактические данные, которые использовала организация. НАБДД уже отступило от своего собственного заключения, выпустив заявление чуть менее года назад о том, что 40-процентная цифра является лишь предварительным заключением. Однако то, что QCS обнаружило при расследовании, было набором ошибок, настолько вопиющих, что они разрушили все возможности прогнозирования, которые вообще можно было извлечь из набора данных. Фактически, самое узкое чтение наиболее точного набора данных предполагает, что включение Autosteer фактически увеличило частоту несчастных случаев в Тесла на 59 процентов.
Вернее, это было, если данные на самом деле точны. И это не ясно.
НАБДД первоначально сообщило о своих выводах в качестве сравнения между частотой аварий до и после активации Autosteer. Эти данные о частоте сбоев были рассчитаны путем сравнения числа надувных подушек безопасности на пройденное расстояние как до, так и после того, как была доступна система автоматического вождения. Но это работает только в том случае, если общее количество миль, пройденных до и после Autosteer, получено из одного и того же парка транспортных средств. И на основании изучения QCS данных, предоставленных Теслой в НАБДД, только 5714 автомобилей соответствовали этим критериям из 43 781 автомобиля, включенного в набор данных.
Проблема заключается в информации, предоставленной Теслой. Компания предоставила NHTSA последние показания одометра в файле до установки Autosteer и первые показания одометра после активации Autosteer. В 5714 автомобилях это было одно и то же число. Это означает, что мы знаем, что эти машины отслеживались как до, так и после Autosteer.
Весь остальной набор данных так или иначе не содержит данных. Некоторые автомобили сообщали о пробеге только после установки Autosteer. Некоторые сообщали о пробеге до и после установки, но не во время установки, что делало невозможным узнать, произошли аварии между двумя точками данных при установленном Autosteer или нет.
На приведенном выше рисунке НАБДД не назначило ни мили экспозиции (пройденное расстояние) для 14 260 автомобилей в своем наборе данных, но назначило 15 срабатываний подушек безопасности для этого же сегмента. Это, очевидно, плохая математика. Если цель состоит в том, чтобы измерить количество срабатываний подушек безопасности на милю, то 15 срабатываний подушек безопасности за пройденный ноль миль, очевидно, приведут к тому, что частота аварий Теслы до Autosteer будет выглядеть слишком высокой.
Авторы не особо спекулируют о том, почему небольшое количество автомобилей с наиболее полным набором данных показывает 59-процентное увеличение числа аварий в Тесле после включения Autosteer, но есть некоторые основания полагать, что эти данные также могут быть неверными. Весь набор данных достаточно плох, чтобы авторам отчета было неудобно заявлять, как Autosteer окончательно повлияло на безопасность автомобиля.
Как минимум, данные NHTSA были плохо проанализированы, и организация никогда не должна была публиковать отчет, который она дала. Интересно, что причина, по которой нам потребовалось так много времени, чтобы узнать обо всем этом, заключается в том, что, как только QCS начала расследование, Тесла попытался доказать, что те же данные, которые он добровольно предоставил НАБДД для анализа, представляют собой коммерческую тайну, которая не может быть обсуждается на публике. НАБДД распространило это обратно в суд, заставив QCS подать в суд на информацию. Между тем, неверные данные, которые никогда не должны были выдаваться, стали предметом обсуждения в отрасли и установили «факт», не имеющий оснований в эмпирической реальности.
Спустя более двух лет после того, как Tesla выпустила Autosteer, мы до сих пор не знаем, улучшают ли эти технологии статистически безопасность автомобиля или нет. Это не означает, что это не так, но данные, которые могут привести к этому делу, еще не показаны.
Читать далее
Владельцы Google Pixel Slate сообщают о сбое флеш-хранилища
Форумы поддержки продуктов Google переполнены рассерженными владельцами Pixel Slate, которые говорят, что в их устройствах часто возникают серьезные ошибки хранения.
Tesla приказала отозвать более 150 тысяч автомобилей для устранения сбоев памяти
Tesla попросили - или «попросили» - отозвать около 159 000 автомобилей для устранения проблемы с памятью NAND, которая в конечном итоге приведет к сбоям на каждом затронутом автомобиле.
Новое обновление Windows 10 вызывает сбои в работе синего экрана, что никого не удивляет
Новое обновление безопасности вызывает синие экраны на компьютерах, когда они пытаются использовать определенные марки принтеров. Как будто принтеры и обновления Windows уже недостаточно раздражали, теперь они объединили усилия.
NASA начинает сборку космического корабля для изучения огромного металлического астероида
В следующем году этот кусок оборудования будет ездить на ракете Spacex на орбиту, а затем он находится в ремене астероида, чтобы изучить его тезку, богатую металлом астероида 16.