Ninx

Description

L'application reçoit une image d'un document médical contenant une maladie et/ou un traitement, elle extrait ces informations à l'aide des fonctionnalités de vision de Gemini, puis génère des informations détaillées en termes non médicaux pour fournir, pour la maladie: la cause, les signes et symptômes, le traitement et la prévention, et pour le traitement: le nom générique, les indications, le mécanisme d'action, les effets secondaires et les contre-indications. Ces informations sont ensuite présentées à l'utilisateur.

Nous nous concentrons sur les images pour préserver les informations obtenues auprès du personnel médical et améliorer l'accessibilité pour les personnes qui ne savent pas lire, mais qui peuvent utiliser un smartphone. Notre cible principale est les communautés qui utilisent encore des dossiers médicaux papier, en particulier l'Ouganda, car nous savons qu'il y a un besoin.

Conçu pour être un complément à la consultation d'un médecin, au cas où le patient souhaiterait trouver plus d'informations sur la maladie et/ou le traitement, et n'a pas pour but de remplacer le médecin.

Nous reconnaissons les limites de l'application des LLM dans le secteur de la santé (en particulier les hallucinations dans le texte et le travail d'OCR), et les indiquons clairement sur toutes les pages Web de l'application, à l'exception de la page de destination.

Bien que Gemini 1.5 Pro soit plus précis dans le travail d'OCR, comme nous desservons des zones qui ne peuvent pas payer pour le service, il est plus durable d'utiliser 1.5 Flash, même si sa précision est réduite, comme prévu. Nous sommes optimistes quant à l'amélioration automatique de Ninx si Gemini continue de s'améliorer, comme cela a été le cas jusqu'à présent.