Hello Epox (@epoxhun),
I believe that I have found the culprit for unicode characters such as those used in Hungarian.
I used the sample text below for testing.
Tavasz van, és a napfény ragyog az égen. Az emberek sétálnak a városi parkban, élvezve a friss levegőt és a gyönyörű virágok színeit. A gyerekek futnak és játszanak, nevetésük betölti a levegőt. A kávézók teraszai tele vannak emberekkel, akik a kávé vagy tea mellett beszélgetnek.
Egy közeli piacra érve, a látvány és az illatok lenyűgözőek. Friss zöldségek és gyümölcsök, házi készítésű sajtok és péksütemények sorakoznak a standokon. Az eladók kedvesen köszöntenek, és ajánlanak különféle termékeket. Itt mindenki megtalálja a kedvencét, legyen szó friss eperre vagy ropogós kenyérről.
Este felé a város lassan átalakul. Az utcák fényei csillognak, és a város zajai egy különleges dallammá olvadnak össze. A barátok találkoznak a kedvenc éttermeikben, hogy megosszák a nap eseményeit, és élvezzék a finom ételeket. A magyar konyha ízei, mint a gulyásleves, a pörkölt, és a túrós csusza, mindig megnyugtatják az emberek szívét és lelkét.
Ez a nap is véget ér, és az emberek hazaérnek, tele új emlékekkel és élményekkel. Magyarországon minden nap egy új kaland, tele szépséggel, kultúrával, és az élet apró örömeivel.
After running the Knowledge Navigator, I asked:
Milyen ételeket említ a szöveg a magyar konyhából?
The response was as follows:
A szöveg a következő ételeket említi a magyar konyhából:
– Gulyásleves
– Pörkölt
– Túrós csusza
Ezek hagyományos magyar ételek, amelyek jól ismertek és népszerűek mind Magyarországon, mind a nemzetközi közösségekben. A gulyásleves egy ízletes, fűszeres leves, amely marhahúsból, zöldségekből, paprikából és más fűszerekből készül. A pörkölt hasonlóan egy paprikás húsétel, amelyet gyakran készítenek marhából, sertésből vagy bárányból. A túrós csusza pedig egy tésztaétel, amelyet túróval, tejföllel és gyakran szalonnával szoktak tálalni.
The
chatbot’s response in English is:
“The text mentions the following dishes from Hungarian cuisine:
- Gulyásleves (Goulash soup)
- Pörkölt (Stew)
- Túrós csusza (Cottage cheese pasta)
These are traditional Hungarian dishes, well-known and popular both in Hungary and in international communities. Gulyásleves is a delicious, spicy soup made from beef, vegetables, paprika, and other spices. Pörkölt is similarly a paprika-based meat dish, often made with beef, pork, or lamb. Túrós csusza is a pasta dish served with cottage cheese, sour cream, and often bacon.”
I am currently working on how to address non-English stop words for further localization.
I’ve completed testing and will release an update shortly in Ver 1.7.2.
Thank you for taking the time to share your valuable feedback, as it helps me continually improve and provide a better experience for our users.
Stephen