Kubickas E., Kalbančiojo lūpų formos registravimas: Elektronikos inžinerijos magistro darbas/mokslinis vadovas doc. dr. G. Daunys; Šiaulių universitetas, Technologijos fakultetas, Elektronikos katedra, – Šiauliai, 2007. – 67p. Magistro darbo tema yra aktuali, kadangi lūpos yra vienas svarbiausių vizualinės kalbos dalių. Komunikuojant žmonėms svarbiausi informacijos kanalai yra kalbos ir vizualiniai ženklai. Norint suprasti vartotojo instrukcijas triukšmingoje aplinkoje kompiuteris turi pasikliauti vizualiniais vartotojo ženklais. Šiame darbe atliekamas lūpų formos registravimas pasitelkus OpenCV ir Matlab 7.0 paketą. Pagrindinis tikslas yra sudaryti ir išanalizuoti algoritmą tiksliam lūpų formos registravimui. Ištyrinėta 4 žmonių lūpų forma (kontūrai). Remiantis gautais rezultatais matyti, kad lūpų registravimas susijęs su keletu problemų – sudėtingas lūpų registravimas dėl panašios veido spalvos, taip pat sudėtingas vidinių kontūrų radimas dėl matomų artikuliatorių. Tiksliausiai lūpų forma registruojama naudojant žalios spalvos komponentę (G). Gauti rezultatai gali būti panaudoti tolesniems tyrinėjimams, tokiems kaip neuroninių tinklų apmokymas lūpų padėčiai ar raidėms atpažinti. / Kubickas E. Speaker lip shape registration: Master thesis of electronics engineer/research advisor Assoc. Dr. G. Daunys; Šiaulių University, Technological Faculty, Electronics Department. – Šiauliai, 2007. – 67 p. The theme of Master Project of Electronics engineer is actual, because the lip is the one of the principal visual speech part. For better users instruction‘s understanding in the noisy environment, computer must rely on the visual users signs. In the theory section there is described the most important channels for communication - speech and visual signs. There is performing lip shape registration by using OpenCv and Matlab 7.0 package in this work. The approach proposed to make and to analize algorithm for more accurate lip registration. The main task is to investigate how to detect speaker lip shape robustly, when their location is different. There is presented research of four people lip‘s shape (contours). The results showed that there are few problems, related with lip registration – difficult lip extraction because of the similar skin colour, problematic lips inner contours extraction, because of the visible articulators such as teeth, tongue. Above all, that the main task was reached – there was received the robust lip registration by green colours component. Received results can be used for the further investigations such as different expression pictures research, the neural network for lip position or letters recognizing training.
| Identifer | oai:union.ndltd.org:LABT_ETD/oai:elaba.lt:LT-eLABa-0001:E.02~2007~D_20070816_164011-11069 |
| Date | 16 August 2007 |
| Creators | Kubickas, Egidijus |
| Contributors | Daunys, Gintautas, Laurutis, Remigijus, Laurutis, Vincas, Lauruška, Vidas, Dervinis, Donatas, Siauliai University |
| Publisher | Lithuanian Academic Libraries Network (LABT), Siauliai University |
| Source Sets | Lithuanian ETD submission system |
| Language | Lithuanian |
| Detected Language | English |
| Type | Master thesis |
| Format | application/pdf |
| Source | http://vddb.library.lt/obj/LT-eLABa-0001:E.02~2007~D_20070816_164011-11069 |
| Rights | Unrestricted |
Page generated in 0.0018 seconds