01
Sieht, ohne zu senden.
Die Kamera erfasst das Sichtfeld. Ein FOMO-Netz auf Basis von MobileNetV2 rastert jedes Bild direkt am STM32H747, in Echtzeit. Kein einziges Bild verlässt die Brille; übertragen werden nur Koordinaten.
ASCENTA.
Smart Glasses für sehbeeinträchtigte Menschen
Ascenta erkennt Personen, misst die Distanz auf den Millimeter genau und sagt Ihnen, was vor Ihnen liegt. Alles offline, direkt am Körper.
Das Problem
Der weiße Langstock ertastet Stufen und Kanten. Doch alles auf Kopf- und Rumpfhöhe bleibt stumm: die wartende Person, der entgegenkommende Passant. Genau diese Lücke schließt Ascenta. Eine Kamera auf Augenhöhe, ein neuronales Netz im Rahmen, eine Stimme im Ohr.
Die Technik
01
Die Kamera erfasst das Sichtfeld. Ein FOMO-Netz auf Basis von MobileNetV2 rastert jedes Bild direkt am STM32H747, in Echtzeit. Kein einziges Bild verlässt die Brille; übertragen werden nur Koordinaten.
02
Der Time-of-Flight-Sensor liefert zu jeder Erkennung die exakte Distanz. Die App verbindet Bildkoordinaten und Tiefe zu einer Ansage, der man vertrauen kann.
03
Der Beschleunigungssensor im Rahmen erkennt den Doppeltipp am Bügel über den Ruck Δg. Gehbewegungen fallen durchs Raster, ein bewusstes Tippen nicht. Freihändig, unauffällig, sofort.
04
In jedem Bügel sitzt ein 620-mAh-LiPo, parallel geschaltet hinter der TP4056-Schutzschaltung. Geladen wird über USB-C. Den Ladestand meldet der Fuel-Gauge trotz flacher LiPo-Kurve aufs Prozent genau.
Live-Simulation
Ziehen Sie die Person durchs Sichtfeld, direkt im Bild oder per Regler. Unter einem Meter warnt Ascenta, unter 40 cm überstimmt die Kollisionswarnung jede Sprechpause. lohnt sich.
Interaktion
So startet man an der echten Brille eine Sprachabfrage. Probieren Sie die originale IMU-Logik aus der Firmware, inklusive Zeitfenster und Schwellenwert.
IMU → Vosk → TTS
Der Ablauf
Eine „Split-Brain“-Architektur: Die Brille sieht, misst und filtert, das Smartphone denkt, versteht und spricht. Dazwischen ein TCP-Stream auf Port 5005.
01
Der IMU-Interrupt am Bügel startet die Audioaufnahme. Δg > 1,75 G, freihändig.
02
FOMO rastert das 240×240-Bild direkt am Mikrocontroller und lokalisiert Personen.
03
Koordinaten, Distanz und Audio gehen als Präfix-Pakete in eine einzige Verbindung.
04
Die App verrechnet KI-Koordinaten mit der ToF-Tiefe zu präzisen Raumpunkten.
05
„Befindet sich jemand vor mir?“ wird lokal am Smartphone zu Text. Keine Cloud.
06
„Person in einem Meter Entfernung erkannt.“ Diskret über den Kopfhörer.
Protokoll-Evolution
128.000 Byte Audio, gedrosselt auf 15-ms-Intervalle: mehrere Sekunden Latenz pro Sprachnachricht.
In Bewegung gingen Pakete verloren: korrupte JPEGs, zerrissene Audio-Chunks, keine Fehlerkorrektur.
Verlustfrei dank Prüfsummen und Paketwiederholung. Heartbeat alle 10 s, BLE bleibt nur fürs WLAN-Provisioning.
Fertigung
Jedes Bauteil ist selbst konstruiert und 3D-gedruckt: Rahmen, Bügel, Abdeckungen, Scharniere. Alles lässt sich einzeln tauschen, die Brille klappt beidseitig ein. Was sich nebenan dreht, ist kein Rendering, sondern das echte Fertigungs-STL aus der Produktion.
Bügel_v14.stl · 7.520 Dreiecke · Originaldatei
ziehen zum Drehen
Akkukapazität: 2× 620 mAh parallel
F1-Score: FOMO · MobileNetV2 · int8
Anfragen: alle Kernfunktionen offline
Wettbewerbe
Sieger der Kategorie „Connected Living“, ausgewählt aus 80 eingereichten Abschlussprojekten aus ganz Österreich.
Anerkennungspreis in der Kategorie „ICT & Digital“ beim 39. Bundesfinale von Österreichs größtem Innovationswettbewerb für junge Talente.
Kamera und Mikrofon am Kopf eines Menschen verlangen Zurückhaltung. Ascenta ist deshalb nicht nachträglich abgesichert. Es gibt schlicht keinen Pfad, über den Video oder Audio das lokale System verlassen könnte.
Ausblick
Zero-UI
TalkBack-Integration, auditive Einrichtung, Setup per NFC.
Leitstrahl
Tonhöhe und Taktrate führen den Kopf zum Objekt, in der Demo schon zu hören.
Objektklassen
Treppen, Ampeln, Zebrastreifen, Türen, Fahrzeuge.
Rechenleistung
Größere Netze, mehr Klassen parallel, samt neuem Gehäuse.
Transparenz
Näher an der gewohnten Brille; Elektronik wandert in die Bügel.
Photovoltaik
Lädt den Akku bei Sonnenlicht nach, für mehr Laufzeit draußen.
Hinter Ascenta