Om nog een beter beeld te geven over de implementatie van de Digital buddy en het logboek, heb ik onderzoek gedaan naar conversational interfaces en Digital humans. De Digitial buddy in de app is een Digital human en geen AI gestuurde chatbot.

Verschil Digital Human en Ai gestuurde chatbot

Een AI-chatbot (kunstmatig) Intelligence chatbot) is een chatbot die wordt aangedreven door kunstmatige intelligentie (AI). In tegenstelling tot reguliere chatbots, zijn AI-chatbots in staat om vragen van gebruikers te begrijpen door middel van natuurlijke taalverwerking (NLP) en kunnen ze intelligente antwoorden hierop geven. Dit helpt de algehele gebruikerservaring te verbeteren. NLP is de API die gebruikt wordt.

bron: https://shanebarker.com/blog/best-ai-chatbot/

Het technische gedeelte van de Digital human en het logboek worden via APIs van Google cloud gerealiseerd.

-Het verwerken van de Digital buddy sessies naar Logboek.

-Het categoriseren van de transcripten: de input van de gebruiker word verwerkt in het logboek tot samengevatte tekst die met toestemming van de gebruiker, gedeeld kan worden met de toekomstige hulpverlener.

-De audio zelf kan niet direct geanalyseerd worden, maar moet eerst getranscribeerd worden. Na dat dit getranscribeerd is, word er een antwoord op gevonden via de API en machine learning.

Architectuur diagram

Google cloud via https://cloud.google.com/architecture/categorizing-audio-files-using-ml?hl=en&bookmark=true

Text-to-Speech

Google API

{
  "audioConfig": {
    "audioEncoding": "LINEAR16",
    "effectsProfileId": [
      "handset-class-device"
    ],
    "pitch": 0,
    "speakingRate": 1
  },
  "input": {
    "text": "Hoe voel je je vandaag?"
  },
  "voice": {
    "languageCode": "nl-NL",
    "name": "nl-NL-Standard-E"
  }
}

Google cloud via https://cloud.google.com/

Digital Human via Uneeq