Das indische Gesundheits- und Wellness-Startup HealthifyMe hat eine KI-gestützte Funktion eingeführt, die indische Lebensmittel anhand von Bildern erkennt und so die Kalorienaufnahme protokolliert, sodass Benutzer ihre Mahlzeiten effizienter verfolgen können.
Indische Lebensmittel anhand von Bildern zu verfolgen, ist eine Herausforderung, da es eine große Vielfalt an Küchen gibt. Außerdem essen viele Menschen auf einem Teller namens Thaali auf Hindi, das verschiedene Portionen verschiedener Lebensmittel enthält. Ein Modell muss all das und die Portionsgrößen erkennen.
Mit der neuesten Funktion von HealthifyMe namens Snap können Benutzer Fotos von ihren Mahlzeiten machen und versuchen, im Bild aufgenommene Lebensmittel zu erkennen. Alternativ können Nutzer auch Zugriff auf ihre Galerie gewähren und die App scannt Essensbilder automatisch. Benutzer können diese Bilder und darin enthaltenen Lebensmittel später überprüfen. Auf diese Weise können Benutzer Bilder von ihren Kameras aufnehmen und sich später um die Kalorienprotokollierung kümmern.
In Bezug auf den Datenschutz gibt das Unternehmen an, dass das Modell auf dem Gerät Lebensmittelbilder erkennt und sie zur Erkennung bestimmter Gerichte an Server sendet. Das Unternehmen erwähnt auch, dass sein galeriebasiertes Modell besser funktioniert, da es mehr Zeit hat, Lebensmittel zu erkennen, als die Option, Fotos von Ihrer Mahlzeit zur Erkennung zu machen.
Bildnachweis: Healthifyme
Wenn das Modell erkennt, dass ein Bild mehrere Elemente enthält, werden Sie von Snap aufgefordert, auf ein Element zu tippen und es zur Kalorienverfolgung hinzuzufügen. Benutzern wird ein anpassbares rechteckiges Feld angezeigt, mit dem sie sich auf verschiedene Elemente konzentrieren können.
Die Snap-Funktion von HealthifyMe versucht, Lebensmittel auf einem Teller zu erkennen Bildnachweis: Screenshot von Tech
Tushar Vashisht, Mitbegründer und CEO von HealthifyMe, sagte gegenüber Tech, dass das Unternehmen vor fast 11 Jahren als Lebensmittel-Tracking-App begann und dies nach wie vor der Hauptanwendungsfall für seine kostenlosen Benutzer sei.
„Manchmal ist es schwierig, sich mit der Lebensmittelverfolgung zu befassen, weil man die Lebensmittel manuell eingeben und daran denken muss, sie zu protokollieren. Deshalb wollten wir mit einer Funktion wie Snap die Bindung und das Engagement steigern“, sagte er.
Vashisht sagte, das Startup habe im Laufe der Jahre versucht, eine bildbasierte Lebensmittelerkennung zu implementieren, aber die Verfügbarkeit besserer generativer KI-Modelle habe die Entwicklung von Snap erleichtert. Das Unternehmen sagte, die Funktion sei derzeit darauf trainiert, 150.000 indische Lebensmittel zu erkennen.
Bildnachweis: HealthifyMe
Healthifyme gibt an, eine Genauigkeit von 60–70 % bei der automatischen Erkennung von Lebensmitteln zu bieten. Selbst wenn das Modell das Lebensmittel nicht richtig erkennt, erhalten Benutzer dennoch Vorschläge, um was es sich möglicherweise handeln könnte, so das Unternehmen. Das Unternehmen verfügt über menschliche Prüfer, die falsche Erkennungen prüfen und korrigieren. Darüber hinaus können Benutzer diese fälschlicherweise erkannten Fotos manuell mit Tags versehen, um das Modell zu verbessern. Vashisht erklärte, er sei zuversichtlich, dass die Genauigkeit des Modells im nächsten Monat mehr als 80 % betragen werde.
Bemerkenswert ist, dass HealthifyMe nicht allein im Rennen ist, da auch andere Unternehmen an der KI-gestützten Lebensmittelerkennung arbeiten. Samsungs Essensplanungsplattform Samsung Food plant, diese Funktion im nächsten Jahr einzuführen. Auch das Startup Snapkalorie des ehemaligen Google-Lens-Ingenieurs Wade Norris arbeitet mit der Unterstützung von Y-Combinator, Index Ventures und Accel an demselben Problem.
In den nächsten Wochen möchte HealthifyMe den Benutzern mehr Möglichkeiten zur Lebensmittelprotokollierung bieten. Mit der Einführung von Snap können Benutzer Bilder an HealthifyMe WhatsApp senden oder sie auf X mit einem Lebensmittelbild markieren. Das Unternehmen arbeitet an einer Spracheingabefunktion und verbessert gleichzeitig seinen bestehenden KI-gestützten Assistenten Ria.
HealthifyMe, das bisher über 130 Millionen US-Dollar an Kapital von Investoren wie LeapFrog Ventures und Khosla Ventures eingesammelt hat, verfügt über einen kostenpflichtigen Basisplan ab 4,80 US-Dollar (399 ₹) pro Monat, der Benutzern Zugang zu einem KI-gestützten Fitness- und Ernährungsassistenten, einer Mahlzeit, bietet Planung und gesunde Rezepte. Das Unternehmen bietet auch kostenpflichtige Pläne ab 48 $ pro Monat (4.000 ₹) mit Funktionen wie einem KI-basierten Essensplaner, Ernährungs- und Fitnesstrainern und einer intelligenten Waage an.
Die höheren Stufen der Pro-Pläne bieten mehr Vorteile wie mehrere Arztkonsultationen, Stoffwechsel-Panel-Tests und Geräte zur kontinuierlichen Glukoseüberwachung (CGM). Das Unternehmen gab an, mehr als 200.000 Nutzer als Abonnenten zu haben, von denen fast 40 % für den Pro-Plan zahlen.
Im Jahr 2020 ging HealthifyMe eine Partnerschaft mit einem indischen Lebensmittellieferdienst ein Swiggy kuratiert gesunde Mahlzeiten und Restaurants. Das Unternehmen führt bereits Gespräche mit mehreren Lebensmittel- und Lebensmitteldienstleistern, die seine Technologie nutzen könnten.