{"id":69001,"date":"2021-08-27T21:32:00","date_gmt":"2021-08-27T18:32:00","guid":{"rendered":"http:\/\/life.karpat.in.ua\/?p=69001"},"modified":"2021-08-26T23:36:10","modified_gmt":"2021-08-26T20:36:10","slug":"magyar-siker-a-beszelt-es-irott-nyelv-informatikai-feldolgozasaban","status":"publish","type":"post","link":"https:\/\/life.karpat.in.ua\/?p=69001&lang=hu","title":{"rendered":"Magyar siker a besz\u00e9lt \u00e9s \u00edrott nyelv informatikai feldolgoz\u00e1s\u00e1ban"},"content":{"rendered":"\n

A besz\u00e9lt \u00e9s \u00edrott magyar sz\u00f6veg feldolgoz\u00e1s\u00e1t lehet\u0151v\u00e9 tev\u0151 \u2013 informatik\u00e1ban haszn\u00e1latos \u2013 nyelvi modellt hoztak l\u00e9tre a P\u00e9csi Tudom\u00e1nyegyetemen (PTE) a Microsoft technol\u00f3gi\u00e1j\u00e1nak seg\u00edts\u00e9g\u00e9vel \u2013 k\u00f6z\u00f6lte a Microsoft Magyarorsz\u00e1g cs\u00fct\u00f6rt\u00f6k\u00f6n az MTI-vel.<\/strong><\/p>\n\n\n\n

A k\u00f6zlem\u00e9nyben a fejleszt\u00e9s indokai k\u00f6z\u00f6tt azt \u00edrt\u00e1k: mindenki sz\u00edvesebben haszn\u00e1lja az anyanyelv\u00e9t chat \u00e9s m\u00e1s automatiz\u00e1lt alkalmaz\u00e1sokban, mivel azonban a magyar nyelvet viszonylag kevesen besz\u00e9lik, a c\u00e9gek sz\u00e1m\u00e1ra gyakran nem \u00e9ri meg kifejleszteni a feldolgoz\u00e1s\u00e1hoz sz\u00fcks\u00e9ges szoftvereket. A PTE Alkalmazott Adattudom\u00e1nyi \u00e9s Mesters\u00e9ges Intelligencia csapata felismerte ezt a probl\u00e9m\u00e1t, \u00e9s a nagy mennyis\u00e9g\u0171 magyar nyelv\u0171 adat kezel\u00e9s\u00e9t megk\u00f6nny\u00edtend\u0151 term\u00e9szetes nyelvfeldolgoz\u00e1si m\u00f3dszerek kutat\u00e1s\u00e1ba fogott. A megold\u00e1st egy magyar nyelv\u0171, \u00fagynevezett \u201eBERT\u201d modell l\u00e9trehoz\u00e1sa jelentette.<\/p>\n\n\n\n

\"\"<\/figure><\/div>\n\n\n\n

A BERT a Google \u00f3r\u00e1sv\u00e1llalat egyik ny\u00edlt forr\u00e1sk\u00f3d\u00fa technol\u00f3gi\u00e1ja, amely a term\u00e9szetes nyelvfeldolgoz\u00e1s\u00e1t hivatott seg\u00edteni.<\/p>\n\n\n\n

Az \u00faj modell \u2013 amelyet a PTE munkat\u00e1rsai kevesebb mint 200 munka\u00f3ra \u00e9s 1000 eur\u00f3 befektet\u00e9ssel hoztak l\u00e9tre \u2013 seg\u00edti a sz\u00e1m\u00edt\u00f3g\u00e9pet a t\u00f6bbf\u00e9lek\u00e9ppen \u00e9rtelmezhet\u0151 sz\u00f6vegr\u00e9szek meg\u00e9rt\u00e9s\u00e9ben oly m\u00f3don, hogy a sz\u00f6vegk\u00f6rnyezetb\u0151l kontextust \u00e9p\u00edt.<\/p>\n\n\n\n

A modell m\u0171k\u00f6d\u00e9s\u00e9hez legal\u00e1bb 3,5 milli\u00e1rd sz\u00f3t tartalmaz\u00f3 foly\u00f3sz\u00f6veg sz\u00fcks\u00e9ges. Ezt az adatb\u00e1zist a Nyelvtudom\u00e1nyi Kutat\u00f3k\u00f6zpont, a projekt m\u00e1sik r\u00e9sztvev\u0151je t\u00f6bbek k\u00f6z\u00f6tt a Magyar Nemzeti Sz\u00f3t\u00e1rb\u00f3l, online m\u00e9diat\u00e1rakb\u00f3l \u00e9s az opensubtitles.org ingyenesen hozz\u00e1f\u00e9rhet\u0151 filmfelirat-adatb\u00e1zis magyar nyelv\u0171 anyagai k\u00f6z\u00fcl gy\u0171jt\u00f6tte.<\/p>\n\n\n\n

Megjegyezt\u00e9k, hogy a csapat a v\u00e1llalat \u00e1ltal fejlesztett Microsoft Azure mesters\u00e9ges intelligenci\u00e1j\u00e1t \u00e9s a ONNX Runtime g\u00e9pi tanul\u00e1si modellekhez k\u00e9sz\u00fclt, nagy teljes\u00edtm\u00e9ny\u0171 k\u00f6vetkeztet\u0151 motort haszn\u00e1lta. K\u00f6z\u00f6lt\u00e9k: a PTE sz\u00e1m\u00e1ra kulcsfontoss\u00e1g\u00fa ter\u00fclet lett a mesters\u00e9ges intelligencia \u00e9s a felh\u0151alap\u00fa oktat\u00e1s, ami\u00f3ta a Microsoft Mesters\u00e9ges Intelligencia Tud\u00e1sk\u00f6zpont program keretein bel\u00fcl partnerkapcsolatot \u00e9p\u00edtett ki az int\u00e9zm\u00e9ny az informatikai v\u00e1llalattal 2019-ben.<\/p>\n\n\n\n

(origo.hu)<\/a><\/strong><\/p>\n","protected":false},"excerpt":{"rendered":"

A besz\u00e9lt \u00e9s \u00edrott magyar sz\u00f6veg feldolgoz\u00e1s\u00e1t lehet\u0151v\u00e9 tev\u0151 \u2013 informatik\u00e1ban haszn\u00e1latos \u2013 nyelvi modellt hoztak l\u00e9tre a P\u00e9csi Tudom\u00e1nyegyetemen (PTE) a Microsoft technol\u00f3gi\u00e1j\u00e1nak seg\u00edts\u00e9g\u00e9vel \u2013 k\u00f6z\u00f6lte a Microsoft Magyarorsz\u00e1g cs\u00fct\u00f6rt\u00f6k\u00f6n az MTI-vel.<\/p>\n","protected":false},"author":12,"featured_media":69002,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[41,596,49,590,598,39],"tags":[64066,64064,64065],"class_list":["post-69001","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-cikkek","category-erdekes","category-hirek","category-it-hu","category-tudomany","category-vilag","tag-bert","tag-fordito","tag-magyar-nyelv"],"_links":{"self":[{"href":"https:\/\/life.karpat.in.ua\/index.php?rest_route=\/wp\/v2\/posts\/69001","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/life.karpat.in.ua\/index.php?rest_route=\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/life.karpat.in.ua\/index.php?rest_route=\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/life.karpat.in.ua\/index.php?rest_route=\/wp\/v2\/users\/12"}],"replies":[{"embeddable":true,"href":"https:\/\/life.karpat.in.ua\/index.php?rest_route=%2Fwp%2Fv2%2Fcomments&post=69001"}],"version-history":[{"count":0,"href":"https:\/\/life.karpat.in.ua\/index.php?rest_route=\/wp\/v2\/posts\/69001\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/life.karpat.in.ua\/index.php?rest_route=\/wp\/v2\/media\/69002"}],"wp:attachment":[{"href":"https:\/\/life.karpat.in.ua\/index.php?rest_route=%2Fwp%2Fv2%2Fmedia&parent=69001"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/life.karpat.in.ua\/index.php?rest_route=%2Fwp%2Fv2%2Fcategories&post=69001"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/life.karpat.in.ua\/index.php?rest_route=%2Fwp%2Fv2%2Ftags&post=69001"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}