Zum Inhalt springen

Sooley

3D-Fußscan App

Service Transformation in der Orthopädie: Medizinische 3D-Fußscans mit dem Smartphone

Med Tech


# Computer Vision

# Machine Learning Operations

# Backend Architecture

sooley App auf Smartphone, daneben die Illustration eines 3D Druckers
RELEVANCE

Orthopädische Einlagen aus einem Smartphone-Scan

Eine maßgefertigte Einlage braucht eine exakte 3D-Geometrie des Fußes. Klassischerweise entsteht sie über Trittschaum, Abdruckset oder einen stationären Scanner im Sanitätshaus. Dafür sind mehrere Vor-Ort-Termine nötig, und die finale Auslieferung dauert 4 bis 16 Wochen. Mit Sooley wird das Smartphone zum Erfassungsgerät für die individuelle Fußgeometrie. Die App nutzt den TrueDepth-Sensor, die Technologie hinter Face ID, und funktioniert deshalb aktuell mit iPhones ab dem iPhone X. Aus dem Scan entsteht ein 3D-Modell des Fußes inklusive Passmaßen. Orthopäd:innen prüfen das Modell, anschließend fließt es direkt in Einlagen-Design und 3D-Druck ein. Die gesamte Versorgung reduziert sich so auf ein bis zwei Wochen. Die Scan-Technologie hat formigas gemeinsam mit dem Gründungsteam von Sooley entwickelt. Heute nutzen die Scan-Technologie auch Orthopäd:innen sowie Hersteller orthopädischer Schuhe und maßgefertigter Skischuhe.

CHALLENGE

Medizinische Präzision aus Consumer-Hardware, ohne manuelle Nachbearbeitung

Apple hat den TrueDepth-Sensor für die Gesichtserkennung auf kurze Distanz entwickelt, nicht für medizinische Anwendungen. Ein einzelner Scan erfasst deshalb nur einen Ausschnitt des Fußes; Sohle, Ferse und Zehenzwischenräume sind besonders schwer zu erfassen. Für ein vollständiges Modell müssen mehrere Ansichten zusammengeführt werden, die sich nur wenig überlappen. Zwischen den Aufnahmen bewegt sich der Fuß: Zehen beugen sich, Gelenke winkeln anders ab, die Belastung verändert sich. Zudem sind die Rohdaten verrauscht, und der Scan muss zu Hause ohne fachliche Anleitung gelingen. Klassische Registrierung sucht markante Merkmale in den einzelnen Punktwolken (FPFH), richtet die Aufnahmen daran aus und verfeinert sie per Iterative Closest Point (ICP). Dieser rein geometrische Ansatz setzt einen stillstehenden Fuß und eine hohe Überlappung voraus. Er hinterlässt Löcher im Modell und ist anfällig für Registrierungsfehler, besonders mit den neueren Face-ID-Sensoren. Das Ergebnis muss trotzdem bei jedem Scan eine anatomisch plausible Geometrie liefern, auch bei stark deformierten Füßen. Außerdem mussten CE-Zertifizierung, Datenschutz (DSGVO) und die Validierung medizinischer Prozesse von Beginn an in die Architektur einfließen.

Mitarbeiter von Sooley arbeitet an einem 3D Drucker
3D Drucker, der eine Einlegesohle von Sooley druckt.
Nahaufnahme vom Einlegesohlen-Druck im 3D Drucker von Sooley
Ein Mitarbeiter von Sooley macht eine Einlegesohle für den Versand bereit
APPROACH

Von der Sensorik bis zur Fertigung: eine digitale Wertschöpfungskette

Wir begleiteten das Projekt über den gesamten Produktentwicklungszyklus, von der technischen Architektur über das UX-Konzept bis zur operativen Umsetzung. Für den Scan steht das iPhone aufrecht an der Wand, das Display zeigt zur scannenden Person. Durch die niedrige Kameraposition erfasst der Sensor das Längsgewölbe und die Zehen mit hoher Punktdichte. Eine Silhouette auf dem Display und ein Machine-Learning-Modell, das die Fußposition in Echtzeit erkennt, führen durch fünf Aufnahmen, rundum in 360 Grad. Der Fuß wird dabei belastet, indem der andere Fuß angehoben wird.

Im Backend passt die Pipeline ein Statistical Shape Model (SSM) direkt an alle Aufnahmen gleichzeitig an. Das Modell wurde auf einem umfangreichen Datensatz trainiert und bringt anatomisches Vorwissen über Füße mit und ergänzt, was die Kamera nicht sieht. So entsteht auch bei geringer Überlappung, Bewegung und Sensorrauschen eine geschlossene, anatomisch plausible Geometrie. 

Die validierten Scans werden in ein parametrisches CAD-Modell überführt, in einem Fach-Dashboard von Orthopäd:innen geprüft und für den 3D-Druck vorbereitet. Die Plattform läuft als Microservice-Architektur auf Azure und Kubernetes. Daten speichert sie DSGVO-konform auf Servern in Deutschland.

Zwei Smartphones auf denen verschiedene Anwendungsschritte in der Sooley App zu sehen sind.
Ein Smartphone auf dem der Fußscan mit der Sooley App dargestellt ist
Screenshot aus der Sooley App vom Abschluss des Prozess
Sooley Einlegesohle in einer Versandbox
COLLABORATION

Von der Tech-Exploration zum Health-Tech-Venture

Sooley ist das Ergebnis einer technologiegetriebenen Exploration innerhalb von formigas. Den Anstoß gab der TrueDepth-Sensor im iPhone. Er erfasst Körpergeometrien millimetergenau und bringt damit eine Messtechnik in die Hosentasche, die bisher stationären Scannern vorbehalten war. Zunächst entstand ShoeFitter, eine Lösung für die Schuhgrößenberatung. Dabei zeigte sich, dass große Shuhhersteller keine Innenmaße ihrer Modelle vorliegen haben, mit denen sich ein Fußscan abgleichen ließe. Gleichzeitig interessierten sich Podolog:innen früh für die Qualität der Scans. Das Team richtete die Technologie daraufhin gezielt auf Orthopädie und 3D-gedruckte Einlagen aus und gründete Sooley.

Das spätere Gründungsteam von Sooley ging direkt aus formigas hervor. Wir verantworteten die Scan-Technologie, die Computer-Vision- und ML-Pipeline, die Cloud-Plattform und das UX-Konzept des Scan-Ablaufs. Feedback von Orthopädietechniker:innen und Mediziner:innen zu deformierten Anatomien und klinischen Anforderungen floss direkt in das Training des Shape Models ein.

Drei Mitarbeiter von Sooley bei der Arbeit, sitzen am Schreibtisch und richten die App auf einem Smartphone ein.
IMPACT

Ein erster Schritt in Richtung digitaler Orthopädietechnik

Die Pipeline liefert bei jedem Scan ein abgeschlossenes, gereinigtes 3D-Mesh, das ohne Nachbearbeitung in CAD und 3D-Druck geht. Durch die additive Fertigung aus TPU sinkt der Materialeinsatz um bis zu 70 Prozent. Fehldrucke werden eingeschmolzen und wiederverwendet. Die durchgängige Digitalisierung dokumentiert alle Schritte lückenlos, von der Anamnese bis zur Auslieferung. 

Weil sich das Shape Model nachtrainieren lässt, kann es auf neue Anwendungsfelder angepasst werden, etwa auf extreme Größen, bestimmte Krankheitsbilder, Prothetik oder Sportschuhtechnik. Auch die Algorithmik entwickelt sich weiter: Neue Modelle zur monokularen Tiefenschätzung wie Apple Depth Pro oder Depth Anything 3 machen es wahrscheinlich, dass der Scan bald mit jeder normalen Smartphone-Kamera funktioniert, ganz ohne Tiefensensor. Wir hoffen, dass sich auch der Markt mit der Technologie weiterentwickelt. Bislang lassen sich Einlagen auf Kassenrezept in Deutschland nicht online bestellen.

Illustration auf der der Ablauf der Sooley Einlegesohlen Versorgung dargestellt ist.

Let’s Co-create the Future, Together!

Du stehst vor einer Herausforderung und möchtest mehr über formigas erfahren? Dann buche jetzt einen unverbindlichen Intro-Call mit unserem Innovation & Strategy Lead Nik Volz.

Nik Volz

Nik Volz, Innovation & Strategy Lead