Een Tesla met Full Self-Driving (Supervised) v14.3.6 reed bijna van een gescheiden snelweg in Quebec af nadat het systeem een afrit probeerde te nemen die het voertuig al had gepasseerd op hoge snelheid.
De bestuurder, die op een zondagavond op Autoroute 55 in de regio Mauricie reed, nam net op tijd de controle over om de berm en een mogelijke sloot te vermijden. De passagier schreeuwde van schrik toen de auto begon met de manoeuvre.
Het voertuig reed met 110 km/u in de rechterrijstrook onder heldere nachtelijke omstandigheden met verse wegmarkeringen en goed verlichte borden. Toen het onder de portal voor afrit 217 reed, ging de rechter richtingaanwijzer aan en begon de auto naar de berm te sturen terwijl het display bleef aangeven dat het systeem actief was.
De afrit was al achter de auto verdwenen. De snelheid daalde geleidelijk tot 102 km/u voordat de bestuurder het stuur overnam en het systeem uitschakelde. De omstandigheden omvatten droge wegen, geen verkeer en reflecterende borden boven de weg die een betrouwbare prestatie hadden moeten bevorderen.
Een gescheiden snelweg, nachtelijke zichtbaarheid met reflectoren en tegemoetkomend licht, geen omringend verkeer en scherpe rijstrooklijnen creëerden wat velen als ideale omstandigheden voor de software zouden beschouwen. De verslaggever noteerde eerdere successen met duizenden kilometers vergelijkbaar snelwegrijden zonder ingreep.
Dat trackrecord wekte vertrouwen dat uiteindelijk misplaatst bleek toen het systeem een onmogelijke late afrit koos.
Dezelfde bestuurder had tweeënhalve maand eerder een artikel gepubliceerd waarin werd gewaarschuwd dat sterke prestaties gebruikers in een lagere waakzaamheid kunnen laten vervallen. Het stuk betoogde dat bijna perfecte werking een gevaarlijke valkuil creëert waarbij bestuurders hun aandacht laten verslappen, terwijl onvoorspelbare fouten mogelijk blijven.
een systeem dat bijna perfect werkt creëert een valkuil — bestuurders vertrouwen het net genoeg om niet meer op te letten, maar het faalt nog steeds onvoorspelbaar en soms kritiek
Tesla beschreef verbeteringen aan reinforcement learning, een snellere AI-compiler en betere afhandeling van systeemproblemen in de v14.3.6-notes. Openbare crashdata die aan toezichthouders zijn verstrekt, toonden een recordaantal Autopilot- en FSD-incidenten in een recente maand, hoewel gedetailleerde beschrijvingen beperkt blijven.
Het bedrijfsleiderschap blijft snelle uitrol van onbegeleide werking voorspellen, terwijl concurrenten de waarde benadrukken van extra sensoren naast alleen camera's.
Eén incident vormt geen statistisch bewijs, maar het dient als herinnering dat aanhoudende aandacht van de bestuurder essentieel blijft. De software biedt indrukwekkende punt-tot-punt-assistentie op snelwegen en in veel routine-scenario's, maar blijft ver onder de onbegeleide autonomie die oorspronkelijk was beloofd.
Uitspraken die bestuurders aanmoedigen om van de weg te kijken, verergeren alleen het probleem van zelfgenoegzaamheid. Naarmate de mogelijkheden toenemen, wordt duidelijker benadrukken van voortdurend toezicht belangrijker, niet minder.