Erinnerungskuration der nächsten Generation

Objektklassifizierung

Wir trainieren groß angelegte, auf Transformern basierende Bildverarbeitungsmodelle mit Millionen beschrifteter Bilder, um Tausende Alltagsgegenstände, Szenen und Aktivitäten zu klassifizieren. Dadurch ist unsere App in der Lage, den visuellen Kontext jedes Fotos zu verstehen, egal ob es sich um einen Sonnenuntergang, ein gut besuchtes Festival oder den Geburtstag deines Hundes handelt.

Computer Vision

Wir trainieren unsere eigenen faltneuronalen Netze mit Millionen von Bildern, um die Komposition, die Beleuchtung und die Motivbalance zu bewerten. So können wir ästhetische Bewertungen erstellen, die uns dabei helfen, deine schönsten Fotos zu finden.

Standort-Metadaten

Mithilfe unserer globalen Standortdatenbank, großflächiger umgekehrter Geokodierung und räumlicher Indizierung kann unsere App Fotokoordinaten in aussagekräftige Ortsnamen umwandeln. Das reicht von großen Regionen wie Ländern bis hin zu einzelnen Restaurants und Cafés. So können wir einen sinnvollen Kontext zu deinen Fotos schaffen.

Gesichtserkennung

Wir trainieren Deep-Learning-Modelle auf Basis von ResNet, die mit Squeeze-and-Excitation-Layern verbessert wurden. Diese Modelle erkennen Gesichter zuverlässig, unabhängig davon, wie sie aussehen, wie die Beleuchtung ist, wie alt die Person ist oder wie sie sich gerade fühlt. So kannst du Fotos von Personen in deiner Fotobibliothek auch dann genau finden, wenn sich ihr Erscheinungsbild im Laufe der Zeit ändert.

Zeitreihenanalyse

Mithilfe einer räumlich-zeitlichen Variante von DBSCAN gruppieren wir Fotos nach Zeit und Ort und erkennen so natürliche Gruppierungen wie Reisen, Ereignisse und Aktivitäten. Durch die Analyse der Aufnahmeorte und -zeiten leiten wir aussagekräftige Geschichten und Übergänge in deiner Fotobibliothek ab.

Große Sprachmodelle (Large Language Models, LLMs)

Mithilfe unserer multimodalen Sprachmodelle, die visuelle Funktionen mit transformerbasierter Texterstellung kombinieren, können deine Fotos beschrieben, zusammengefasst und begründet werden. Durch diese Verbindung von Vision und Sprache können wir deine Erinnerungen auf einer tieferen Ebene verstehen.

Orchestrator-Agenten

Wir setzen intelligente KI-Agenten ein, die als Koordinatoren fungieren und in der Lage sind, spezialisierte Modelle und Tools selbstständig auszuwählen und zu nutzen. Durch die Analyse deiner Daten und die Verknüpfung mehrerer Systeme automatisieren sie komplexe kreative Arbeitsabläufe, sodass du dich auf die Feinarbeiten konzentrieren kannst.