Presentatie met daarin een overzicht van het gebruik van Taal- en Spraaktechnologie in Customer Contact Centres. Bovendien een overzicht van de laatste inzichten en ontwikkelingen op dit gebied: gebruik van TST in CCC.
1. Arjan van Hessen
Onderzoek naar Mens-Machine Interactie
(Embodied Agents) en de ontsluiting van
gesproken documenten mbv
Taal- en Spraaktechnologie
Selfservice via de telefoon en de
ontsluiting van gesproken documenten mbv
Taal- en Spraaktechnologie
Het standaardiseren (van zowel data als tools om
hiermee om te gaan) van talige, wetenschappelijke
data voor de geesteswetenschappen.
2. HOE KOMT DE BURGER WAT WAAR HALEN
BIJ DE OVERHEID IN 2018?
Volgens het regeerakkoord dienen burgers en bedrijven in 2017 digitaal te
kunnen communiceren met de lagere overheden. Maar hoe gaat die
communicatie er over vijf jaar uit zien? De kans dat het zal gebeuren zoals
we nu denken is relatief klein.
Immers: van veel van de momenteel gebruikte informatie en communicatie
technologie konden vijf jaar geleden zich nog weinig mensen een beeld
vormen.
3. • Inleiding
– Hoe zit het met de menselijke Taal en Spraak?
– Wat is Taal- en Spraaktechnologie (TST)?
• Werkende applicaties
– Klassieke spraakherkenning
– Geavanceerde spraakherkenning
• (Nabije) toekomst
– Technisch/wetenschappelijke ontwikkelingen
4. • De ontwikkeling van de menselijke
taal (of spraak) is waarschijnlijk
100.000 jaar geleden begonnen.
• Daar vóór hadden de menselijke
kaak, de mond en de larynx de
verkeerde vorm om woorden te
vormen.
Iets dat we nu nog bij de apen
zien.
5. • Het pictografische schrift
(3300 AD Sumer, Mesopotamië) is
voor zover bekend, de oudste
geschreven taal.
-3300
schrift
-10.000
landbouw
-100.000
spraak
NU
11. Wat zegt U? Wat bedoelt U?
/A/ /p/ /@/ /l/ /A/ /p/ /@/ /l/ /t/ /j/ /@/
appel appeltje
12. Ik eet een appel
Ik gebruik een appel
Het gebouw waarin appel huist
Ik koop een echte appel
Een appel is mij te modern
13. Spraakherkenning (ook bij mensen) werkt door de
voorspelbaarheid. Hoe hoger die is, hoe beter de herkenning.
Voorspelbaarheid hangt af van
verschillende zaken:
Kennis van de taal
Kennis over het gespreksonderwerp
24. TST bij Organisaties/Bedrijven
Self Service
Assisted
Service
Simpel: Slotfilling
Management
Service
Postcode-huisnr
Aankomst/vertrek
Doorverbinden
Advanced: OSH
How May I Help You?
Human finalisation
Human interaction
Alles herkennen
wat gezegd werd
Topic spotting
Topic clustering
Searching
Emotion detection
Etc.
27. Service niveau op
0900-8844 is bepalend
voor het eindoordeel
0900-88448844
De Politie over spraakherkenning bij 0900-8844:
•Een concept dat schittert in zijn eenvoud
•Een verrassend snelle implementatie
•Een uitkomst die direct al een groot succes is
•Een besparing die oploopt tot acht ton op jaarbasis
•Een mooi succes in tijden waarin we het geld goed kunnen gebruiken (aldus
korpschef politie - Intake en Noodhulp)
•De druk op de centrale van het KLPD is daarmee aanzienlijk – ik zou bijna
zeggen: rigoureus – verminderd.
29. • Waarmee kan ik u helpen?
• Ik wil graag weten of mijn pensioengeld naar mijn
rekening wordt overgemaakt voor einde van het
jaar?
Openvraag spraakherkenning
Eind-van-het-Jaar Pensioengeld
Overgemaakt Rekening
Geef de groep met vragen
die hier het meest op lijkt
Geef het antwoord dat bij
deze groep hoort
31. 053 850 80 35
WELKOM BIJ DE GEMEENTE
zegt u het maar
In de Open vraag spraakherkenning DEMO worden alle vragen waarvoor
burgers bellen naar de gemeente herkend en naar de juiste afdeling worden
doorverbonden. Denkt u daarbij aan onderstaande onderwerpen:
• Adres- en contactgegevens
• Afvalstoffen
• Bestemmingsplan
• Gemeentelijke belastingen
• Hondenbelasting
• Afvalstoffenheffing
• Rioolheffing
• Paspoorten
• Rijbewijzen
• Identiteitskaarten
• Melding openbare ruimte
• Openingstijden
• Persoonsadministratie
• Bouwvergunningen
• Parkeervergunningen
• Kapvergunningen
• Koopzondagen
• WMO
• WOZ
• Inkomen en bijstand
• Ongediertebestrijding
• Schuldhulpverlening
• Verkiezingen
• Woonruimte
33. Self service <-> Assistentie
Vraag Herkenning
Dialoog
Analyse
Self
Service
Stuur info naar
geschikte medewerker
Schakel gesprek door
naar medewerker
Wat nu?
35. Ik heb een vraag
over mijn studie
financiering?
Telefonie
netwerk
Contact center
Centrale ACD
Voice Recorder
1 2
U spreekt met OCW
DUO waarmee kan
ik u helpen?
Datum en
tijd
CLI nummer
vd beller
DDI nummer
gebeld IVR Keuzes
WACHT tijd
Agent tijd
Inhoud TEXT
‘Emotie’
Spraak
Analyse
DB
37. • Voer een natuurlijke conversatie met een
mensachtige “agent”
• Doe dat affectief en sociaal-intelligent
– Herken de emotionele staat
– Pas het gedrag daar op aan
Conversational agents/robots
38. Detection: via low-level acoustic features
F0
intensity
MFCC
phoneme
syllable
word
sentence
LEVELS
Emotion X
44. Het moet
makkelijk zijn
Omnichannel
Webchat wordt
groter dan SM
Smartphones
veranderen
gedrag burgers
Verwacht niveau CC
gaat omhoog
CC gaat de cloud in
CC-agents zijn niet
meer kantoor-
gebonden
Central burger-
repository met alle
contact-info
Service in ‘n app
CC worden
transparant, je ziet je
info, je kiest je agent
Avatars gaan een
grotere rol spelen
Iedereen wordt een
expert en kan
betrokken worden
Spraak-analyse zal
de agents helpen
Biometrie helpt
identificatie/
verificatie
45. • It’s not speech
Recognition
• It’s not searching
• It’s Artificial
Intelligence
46. Begrijpen van Taal
De slang sproeit water op de dure das
van mijn vader die over de ezel hangt
met de mooie tekening van een paard
>77.000
betekenissen
47. Herkennen van Emotie
De computer slaagt
er steeds beter in
om de emotie van
mensen te “lezen”.