印度健康初创公司 HealthifyMe 推出了一项人工智能功能,可自动从图像中识别印度食物以记录卡路里摄入量,从而使用户能够更有效地跟踪其膳食摄入量。
鉴于印度美食种类繁多,通过图像追踪印度食品具有挑战性。此外,许多人在印地语中称为Thaali 的盘子上吃饭,其中包含不同部分的各种食品。模型必须识别所有这些以及份量大小。
HealthifyMe 的最新功能称为 Snap,让用户可以拍摄自己的膳食照片,并尝试识别画面中捕捉到的食物。或者,用户还可以访问他们的图库,应用程序会自动扫描食物图片。用户可以稍后查看这些图片和其中的食物。这使得用户可以用相机拍照并在稍后处理卡路里记录。
在隐私方面,该公司表示,设备上的模型可以检测食物图片并将其发送到服务器以进行特定菜肴识别。该公司还提到,其基于画廊的模型效果更好,因为它有更多的时间来识别食物,而不是选择拍摄食物的照片进行识别。
如果模型检测到图像中存在多个项目,Snap 会要求您点击一个项目并将其添加到卡路里跟踪中。用户将看到一个可调节的矩形框来关注不同的项目。
HealthifyMe 联合创始人兼首席执行官 Tushar Vashisht 告诉 TechCrunch,该公司大约 11 年前开始作为一款食物追踪应用程序,现在仍然是其免费用户的主要用例。
“有时很难参与食物追踪,因为你必须亲自打字并记住记录食物。因此,我们希望通过 Snap 这样的功能来提高保留率和参与度,”他说。
Vashisht 表示,该初创公司多年来一直尝试实施基于图像的食物识别,但更好的生成人工智能模型的出现使得创建 Snap 变得更加容易。该公司表示,该功能目前经过训练可以识别 150,000 种印度食品。
HealthifyMe 声称在自动识别食物方面可提供 60-70% 的准确度。该公司表示,即使该模型无法正确识别食品,用户仍然可以获得有关该食品可能是什么的建议。该公司有人工审核员来检查错误识别并进行纠正。此外,用户可以手动标记这些错误识别的照片以改进模型。Vashisht断言,他有信心在下个月内,模型的准确率将超过80%。
值得注意的是,HealthifyMe 并不是唯一参与这场竞争的公司,其他公司也在致力于人工智能驱动的食品识别。三星的膳食计划平台Samsung Food计划明年推出此功能。前 Google Lens 工程师 Wade Norris 的初创公司Snapcalorie 也在 Y Combinator、Index Ventures 和 Accel 的支持下致力于解决同样的问题。
在接下来的几周内,HealthifyMe 旨在为用户提供更多食物记录选择。随着 Snap 的推出,用户可以将照片发送到 HealthifyMe WhatsApp 或在 X 上用食物图像标记它们。该公司正在开发语音输入功能,并改进其现有的人工智能助手 Ria。