DINAMINIU LIETUVIU KALBOS GESTU ATPAZINIMAS /RECOGNITION OF DYNAMIC LITHUANIAN LANGUAGE GESTURES

Ranku gestu kalba yra zmoniu, turinciu klausos negalia, pagrindinis irankis savo mintims bei zinioms perteikti. Retas zmogus, neturintis klausos negalios, supranta gestu kalba, todel ranku gestu atpazinimo sistemu kurimas ir tobulinimas yra aktualus siuolaikinis uzdavinys, leidziantis padidinti zmon...

Ausführliche Beschreibung

Gespeichert in:
Bibliographische Detailangaben
Veröffentlicht in:Science future of Lithuania 2023-01, Vol.15, p.1
Hauptverfasser: Karmonas, Arnas, Katkevicius, Andrius
Format: Artikel
Sprache:eng
Schlagworte:
Online-Zugang:Volltext
Tags: Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
container_end_page
container_issue
container_start_page 1
container_title Science future of Lithuania
container_volume 15
creator Karmonas, Arnas
Katkevicius, Andrius
description Ranku gestu kalba yra zmoniu, turinciu klausos negalia, pagrindinis irankis savo mintims bei zinioms perteikti. Retas zmogus, neturintis klausos negalios, supranta gestu kalba, todel ranku gestu atpazinimo sistemu kurimas ir tobulinimas yra aktualus siuolaikinis uzdavinys, leidziantis padidinti zmoniu su negalia bendravimo galimybes. Ranku gestu atpazinimas taip pat leidzia bekontakciu budu valdyti ivairius irenginius. Straipsnyje nagrinejami gestu atpazinimo metodai ir pasiulytas algoritmas, leidziantis atpazinti dinaminius lietuviu kalbos gestus. Tyrimui buvo sukurtas dinaminiu gestu duomenu rinkinys, sudarytas is vaizdo irasu, kuriu kiekvieno trukme yra 3 sekundes. Is viso buvo surinkta 1100 vaizdo irasu. Duomenu rinkini sudare 10 klasiu. Pozymiams isskirti is vaizdo iraso kadru buvo naudojamas pirminio apmokymo "Inception-v3" konvoliucinis neuronu tinklas. Isskirti pozymiai buvo naudojami LSTM tinklui mokyti. Apmokytas tinklas buvo testuotas su patikros bei testavimo duomenimis ir pasieke 85 % tiksluma. Reiksminiai zodziai: dinaminiu gestu atpazinimas, LSTM, CNN, neuronu tinklai. This paper proposes a method for automated Lithuanian hands gestures data collection and for Lithuanian hands gestures classification. The dataset of 1100 samples was collected for 10 different classes of Lithuanian hands gesture. The features of hands gestures were extracted with CNN network. The classification was made with LSTM network. The trained LSTM network classified the Lithuanian hands gestures with 85% accuracy. Keywords: dynamic Lithuanian hands gesture recognition, LSTM, CNN, neuron networks.
doi_str_mv 10.3846/mla.2023.18834
format Article
fullrecord <record><control><sourceid>gale</sourceid><recordid>TN_cdi_gale_infotracmisc_A807358034</recordid><sourceformat>XML</sourceformat><sourcesystem>PC</sourcesystem><galeid>A807358034</galeid><sourcerecordid>A807358034</sourcerecordid><originalsourceid>FETCH-LOGICAL-g674-ea8fb5aaa12b2325544b8f3547cef27cd20b3c435cfa0f2384aaa7fc10159ccd3</originalsourceid><addsrcrecordid>eNptjz1PwzAQhj2ARFW6MltiTurPxh1NmqYWqYMaBwmW4jhxFZS2EuH_q0ZlYOBuuPfu3uekA-ABo5gKtpgfBxsTRGiMhaDsBkxCs4wIZfgOzMbxE4XgiCDBJ-BjpbTcKq1qWKjM1K9BPMviqaxgnlWmhtK8yPew38oKzndZWuZaGVVqWK7h6u2HTQNpNrXUSmpYSJ3XMs-u9C6r7sGtt8PYzX7rFJh1ZtJNVJS5SmURHRYJizorfMOttZg0hBLOGWuEp5wlrvMkcS1BDXWMcuct8iS8GbyJdxhhvnSupVPweD17sEO370_-_P1l3bEf3V4KlFAuEGXBFf_jCtl2x96dT53vw_wPcAF1cFxx</addsrcrecordid><sourcetype>Aggregation Database</sourcetype><iscdi>true</iscdi><recordtype>article</recordtype></control><display><type>article</type><title>DINAMINIU LIETUVIU KALBOS GESTU ATPAZINIMAS /RECOGNITION OF DYNAMIC LITHUANIAN LANGUAGE GESTURES</title><source>Directory of Open Access Journals</source><creator>Karmonas, Arnas ; Katkevicius, Andrius</creator><creatorcontrib>Karmonas, Arnas ; Katkevicius, Andrius</creatorcontrib><description>Ranku gestu kalba yra zmoniu, turinciu klausos negalia, pagrindinis irankis savo mintims bei zinioms perteikti. Retas zmogus, neturintis klausos negalios, supranta gestu kalba, todel ranku gestu atpazinimo sistemu kurimas ir tobulinimas yra aktualus siuolaikinis uzdavinys, leidziantis padidinti zmoniu su negalia bendravimo galimybes. Ranku gestu atpazinimas taip pat leidzia bekontakciu budu valdyti ivairius irenginius. Straipsnyje nagrinejami gestu atpazinimo metodai ir pasiulytas algoritmas, leidziantis atpazinti dinaminius lietuviu kalbos gestus. Tyrimui buvo sukurtas dinaminiu gestu duomenu rinkinys, sudarytas is vaizdo irasu, kuriu kiekvieno trukme yra 3 sekundes. Is viso buvo surinkta 1100 vaizdo irasu. Duomenu rinkini sudare 10 klasiu. Pozymiams isskirti is vaizdo iraso kadru buvo naudojamas pirminio apmokymo "Inception-v3" konvoliucinis neuronu tinklas. Isskirti pozymiai buvo naudojami LSTM tinklui mokyti. Apmokytas tinklas buvo testuotas su patikros bei testavimo duomenimis ir pasieke 85 % tiksluma. Reiksminiai zodziai: dinaminiu gestu atpazinimas, LSTM, CNN, neuronu tinklai. This paper proposes a method for automated Lithuanian hands gestures data collection and for Lithuanian hands gestures classification. The dataset of 1100 samples was collected for 10 different classes of Lithuanian hands gesture. The features of hands gestures were extracted with CNN network. The classification was made with LSTM network. The trained LSTM network classified the Lithuanian hands gestures with 85% accuracy. Keywords: dynamic Lithuanian hands gesture recognition, LSTM, CNN, neuron networks.</description><identifier>ISSN: 2029-2341</identifier><identifier>DOI: 10.3846/mla.2023.18834</identifier><language>eng</language><publisher>Vilnius Gediminas Technical University</publisher><subject>Human-computer interaction</subject><ispartof>Science future of Lithuania, 2023-01, Vol.15, p.1</ispartof><rights>COPYRIGHT 2023 Vilnius Gediminas Technical University</rights><lds50>peer_reviewed</lds50><woscitedreferencessubscribed>false</woscitedreferencessubscribed></display><links><openurl>$$Topenurl_article</openurl><openurlfulltext>$$Topenurlfull_article</openurlfulltext><thumbnail>$$Tsyndetics_thumb_exl</thumbnail><link.rule.ids>314,780,784,864,27924,27925</link.rule.ids></links><search><creatorcontrib>Karmonas, Arnas</creatorcontrib><creatorcontrib>Katkevicius, Andrius</creatorcontrib><title>DINAMINIU LIETUVIU KALBOS GESTU ATPAZINIMAS /RECOGNITION OF DYNAMIC LITHUANIAN LANGUAGE GESTURES</title><title>Science future of Lithuania</title><description>Ranku gestu kalba yra zmoniu, turinciu klausos negalia, pagrindinis irankis savo mintims bei zinioms perteikti. Retas zmogus, neturintis klausos negalios, supranta gestu kalba, todel ranku gestu atpazinimo sistemu kurimas ir tobulinimas yra aktualus siuolaikinis uzdavinys, leidziantis padidinti zmoniu su negalia bendravimo galimybes. Ranku gestu atpazinimas taip pat leidzia bekontakciu budu valdyti ivairius irenginius. Straipsnyje nagrinejami gestu atpazinimo metodai ir pasiulytas algoritmas, leidziantis atpazinti dinaminius lietuviu kalbos gestus. Tyrimui buvo sukurtas dinaminiu gestu duomenu rinkinys, sudarytas is vaizdo irasu, kuriu kiekvieno trukme yra 3 sekundes. Is viso buvo surinkta 1100 vaizdo irasu. Duomenu rinkini sudare 10 klasiu. Pozymiams isskirti is vaizdo iraso kadru buvo naudojamas pirminio apmokymo "Inception-v3" konvoliucinis neuronu tinklas. Isskirti pozymiai buvo naudojami LSTM tinklui mokyti. Apmokytas tinklas buvo testuotas su patikros bei testavimo duomenimis ir pasieke 85 % tiksluma. Reiksminiai zodziai: dinaminiu gestu atpazinimas, LSTM, CNN, neuronu tinklai. This paper proposes a method for automated Lithuanian hands gestures data collection and for Lithuanian hands gestures classification. The dataset of 1100 samples was collected for 10 different classes of Lithuanian hands gesture. The features of hands gestures were extracted with CNN network. The classification was made with LSTM network. The trained LSTM network classified the Lithuanian hands gestures with 85% accuracy. Keywords: dynamic Lithuanian hands gesture recognition, LSTM, CNN, neuron networks.</description><subject>Human-computer interaction</subject><issn>2029-2341</issn><fulltext>true</fulltext><rsrctype>article</rsrctype><creationdate>2023</creationdate><recordtype>article</recordtype><sourceid/><recordid>eNptjz1PwzAQhj2ARFW6MltiTurPxh1NmqYWqYMaBwmW4jhxFZS2EuH_q0ZlYOBuuPfu3uekA-ABo5gKtpgfBxsTRGiMhaDsBkxCs4wIZfgOzMbxE4XgiCDBJ-BjpbTcKq1qWKjM1K9BPMviqaxgnlWmhtK8yPew38oKzndZWuZaGVVqWK7h6u2HTQNpNrXUSmpYSJ3XMs-u9C6r7sGtt8PYzX7rFJh1ZtJNVJS5SmURHRYJizorfMOttZg0hBLOGWuEp5wlrvMkcS1BDXWMcuct8iS8GbyJdxhhvnSupVPweD17sEO370_-_P1l3bEf3V4KlFAuEGXBFf_jCtl2x96dT53vw_wPcAF1cFxx</recordid><startdate>20230101</startdate><enddate>20230101</enddate><creator>Karmonas, Arnas</creator><creator>Katkevicius, Andrius</creator><general>Vilnius Gediminas Technical University</general><scope/></search><sort><creationdate>20230101</creationdate><title>DINAMINIU LIETUVIU KALBOS GESTU ATPAZINIMAS /RECOGNITION OF DYNAMIC LITHUANIAN LANGUAGE GESTURES</title><author>Karmonas, Arnas ; Katkevicius, Andrius</author></sort><facets><frbrtype>5</frbrtype><frbrgroupid>cdi_FETCH-LOGICAL-g674-ea8fb5aaa12b2325544b8f3547cef27cd20b3c435cfa0f2384aaa7fc10159ccd3</frbrgroupid><rsrctype>articles</rsrctype><prefilter>articles</prefilter><language>eng</language><creationdate>2023</creationdate><topic>Human-computer interaction</topic><toplevel>peer_reviewed</toplevel><toplevel>online_resources</toplevel><creatorcontrib>Karmonas, Arnas</creatorcontrib><creatorcontrib>Katkevicius, Andrius</creatorcontrib><jtitle>Science future of Lithuania</jtitle></facets><delivery><delcategory>Remote Search Resource</delcategory><fulltext>fulltext</fulltext></delivery><addata><au>Karmonas, Arnas</au><au>Katkevicius, Andrius</au><format>journal</format><genre>article</genre><ristype>JOUR</ristype><atitle>DINAMINIU LIETUVIU KALBOS GESTU ATPAZINIMAS /RECOGNITION OF DYNAMIC LITHUANIAN LANGUAGE GESTURES</atitle><jtitle>Science future of Lithuania</jtitle><date>2023-01-01</date><risdate>2023</risdate><volume>15</volume><spage>1</spage><pages>1-</pages><issn>2029-2341</issn><abstract>Ranku gestu kalba yra zmoniu, turinciu klausos negalia, pagrindinis irankis savo mintims bei zinioms perteikti. Retas zmogus, neturintis klausos negalios, supranta gestu kalba, todel ranku gestu atpazinimo sistemu kurimas ir tobulinimas yra aktualus siuolaikinis uzdavinys, leidziantis padidinti zmoniu su negalia bendravimo galimybes. Ranku gestu atpazinimas taip pat leidzia bekontakciu budu valdyti ivairius irenginius. Straipsnyje nagrinejami gestu atpazinimo metodai ir pasiulytas algoritmas, leidziantis atpazinti dinaminius lietuviu kalbos gestus. Tyrimui buvo sukurtas dinaminiu gestu duomenu rinkinys, sudarytas is vaizdo irasu, kuriu kiekvieno trukme yra 3 sekundes. Is viso buvo surinkta 1100 vaizdo irasu. Duomenu rinkini sudare 10 klasiu. Pozymiams isskirti is vaizdo iraso kadru buvo naudojamas pirminio apmokymo "Inception-v3" konvoliucinis neuronu tinklas. Isskirti pozymiai buvo naudojami LSTM tinklui mokyti. Apmokytas tinklas buvo testuotas su patikros bei testavimo duomenimis ir pasieke 85 % tiksluma. Reiksminiai zodziai: dinaminiu gestu atpazinimas, LSTM, CNN, neuronu tinklai. This paper proposes a method for automated Lithuanian hands gestures data collection and for Lithuanian hands gestures classification. The dataset of 1100 samples was collected for 10 different classes of Lithuanian hands gesture. The features of hands gestures were extracted with CNN network. The classification was made with LSTM network. The trained LSTM network classified the Lithuanian hands gestures with 85% accuracy. Keywords: dynamic Lithuanian hands gesture recognition, LSTM, CNN, neuron networks.</abstract><pub>Vilnius Gediminas Technical University</pub><doi>10.3846/mla.2023.18834</doi></addata></record>
fulltext fulltext
identifier ISSN: 2029-2341
ispartof Science future of Lithuania, 2023-01, Vol.15, p.1
issn 2029-2341
language eng
recordid cdi_gale_infotracmisc_A807358034
source Directory of Open Access Journals
subjects Human-computer interaction
title DINAMINIU LIETUVIU KALBOS GESTU ATPAZINIMAS /RECOGNITION OF DYNAMIC LITHUANIAN LANGUAGE GESTURES
url https://sfx.bib-bvb.de/sfx_tum?ctx_ver=Z39.88-2004&ctx_enc=info:ofi/enc:UTF-8&ctx_tim=2024-12-25T09%3A22%3A45IST&url_ver=Z39.88-2004&url_ctx_fmt=infofi/fmt:kev:mtx:ctx&rfr_id=info:sid/primo.exlibrisgroup.com:primo3-Article-gale&rft_val_fmt=info:ofi/fmt:kev:mtx:journal&rft.genre=article&rft.atitle=DINAMINIU%20LIETUVIU%20KALBOS%20GESTU%20ATPAZINIMAS%20/RECOGNITION%20OF%20DYNAMIC%20LITHUANIAN%20LANGUAGE%20GESTURES&rft.jtitle=Science%20future%20of%20Lithuania&rft.au=Karmonas,%20Arnas&rft.date=2023-01-01&rft.volume=15&rft.spage=1&rft.pages=1-&rft.issn=2029-2341&rft_id=info:doi/10.3846/mla.2023.18834&rft_dat=%3Cgale%3EA807358034%3C/gale%3E%3Curl%3E%3C/url%3E&disable_directlink=true&sfx.directlink=off&sfx.report_link=0&rft_id=info:oai/&rft_id=info:pmid/&rft_galeid=A807358034&rfr_iscdi=true