- Kauno.diena.lt inf.
- Teksto dydis:
- Spausdinti
-
Vaizdas: išradimas pritaikomas ne vien futbolui, bet ir kitoms sporto šakoms.
-
Dirbtinis intelektas – futbolo varžybų transliacijose
-
Dirbtinis intelektas – futbolo varžybų transliacijose
-
Dirbtinis intelektas – futbolo varžybų transliacijose
-
Dirbtinis intelektas – futbolo varžybų transliacijose
-
Dirbtinis intelektas – futbolo varžybų transliacijose
-
Dirbtinis intelektas – futbolo varžybų transliacijose
Nors UEFA Europos futbolo čempionatas eina į pabaigą, laukia pačios svarbiausios finalinės varžybos, per kurias paaiškės, kuri šalis iškovos čempionų titulą. Kol laukiama rezultatų, Kauno technologijos universiteto (KTU) mokslininkai siūlo tiesiogines futbolo varžybų transliacijas tobulinantį metodą – kompleksinę sistemą, kuri, pašalindama dėl persidengiančių kamerų kampų atsirandančius vizualinius trukdžius, pagerintų žiūrovų patirtį.
Specialus algoritmas
Viena iš galimų per tiesiogines transliacijas atsirandančių problemų – atsitiktinis operatorių pasirodymas vienas kito kadruose. Tokie atvejai ne tik atitraukia dėmesį nuo svarbiausių rungtynių momentų – dėl žiūrovų nepasitenkinimo transliuotojai gali prarasti dalį pajamų.
„Mūsų naujasis išradimas – tai vaizdo operatoriams aptikti pritaikytas algoritmas“, – patikslino vienas iš inovacijos sumanytojų KTU profesorius Rytis Maskeliūnas.
Kaip pabrėžia kitas tyrėjų komandos narys, šiais metais KTU pabaigęs magistro studijas Serhii Postupaievas, operatorių buvimas kadre – dažna futbolo transliacijų problema. Tai lemia sudėtingas tiesioginių sporto transliacijų pobūdis ir daugybė kamerų, išdėstytų aplink stadioną.
KTU nuotr.
„Prestižinius turnyrus filmuoja daugiau nei devynios kameros, todėl persidengiantys vaizdai ir yra pagrindinė problema, smarkiai varžanti operatorių komandą. Vengdami užfiksuoti vieni kitus, jie praleidžia kritinius varžybų momentus, taip prarandamas kontekstas, transliacija tampa mažiau dinamiška ir neįtraukianti“, – aiškina S. Postupaievas.
S. Postupaievas. KTU nuotr.
Vizualiniai trukdžiai
Naujajai sistemai kurti buvo panaudotas YOLOv8 modelis – moderniausia objektų aptikimo sistema, žinoma dėl savo greičio ir tikslumo. YOLOv8, kuris yra žodžių junginio „Tu žiūri tik vieną kartą“ (angl. You only look once) santrumpa, gali aptikti ir suklasifikuoti objektus vaizduose vienu metu, todėl idealiai tinka realaus laiko renginiams, šiuo atveju – tiesioginėms futbolo transliacijoms.
Transliacija atrodys tobulesnė ir profesionalesnė, be trikdžių, kuriuos sukelia operatoriai, pasirodantys ten, kur neturėtų.
„Jis veikia padalydamas vaizdą į tinklelį ir numatydamas kiekvieno tinklelio langelio ribinius laukus, klasių tikimybes ir segmentavimo poligonus. Tai leidžia nustatyti ir segmentuoti pasirodžiusius operatorius vaizdo kadruose“, – sako S. Postupaiev, neseniai baigęs KTU Dirbtinio intelekto informatikos studijas ir su šiuo projektu įgijęs magistro laipsnį.
Norint išmokyti YOLOv8 modelį tiksliai atlikti šį darbą, mokslininkams reikėjo sukurti duomenų rinkinį.
„Šį duomenų rinkinį sukūriau taip, kad į jį patektų įvairių dydžių, formų ir tipų įrangą turintys operatoriai, užfiksuoti įvairiomis sąlygomis ir skirtingais rungtynių momentais. Dabar YOLOv8 modelis naudoja šiuos duomenis, kad nustatytų, kur vaizdo įrašuose yra operatoriai“, – pridūrė jaunasis tyrėjas S. Postupaievas.
Kaip aiškina išradėjas, šie žingsniai – tik pasiruošimas technologijai, vadinamai objektų pašalinimu iš vaizdo įrašo arba dažymo modeliu (angl. inpainting).
KTU nuotr.
„Šis terminas giliojo mokymosi srityje reiškia prarastų ar sugadintų vaizdų ir vaizdo įrašų dalių atkūrimo procesą. Konkrečiai šiuo atveju jis naudojamas operatoriams pašalinti iš futbolo transliacijų“, – sakė S. Postupaievas.
Aiškindamas jos veikimą KTU alumnas iš Ukrainos sako, kad tai – technologija, pagrįsta dirbtiniu intelektu (DI) ir kompiuterine rega, analizuojanti vaizdo įrašų kadrus nepageidaujamiems objektams aptikti, o pašalintas vietas užpildanti atitinkamomis fono detalėmis. Pakeisti kadrai tada transliuojami žiūrovams, užtikrinant įtaigesnę ir profesionalesnę transliaciją.
„Tinklas numato trūkstamas arba užtušuotas vaizdo dalis, naudodamasis aplinkinių pikselių kontekstu. Dažymo modelis sukuria tikėtiną ir vizualiai nuoseklų trūkstamos srities foną, užtikrindamas, kad tekstūros, raštai ir spalvos vientisai susilietų su likusia vaizdo dalimi“, – pabrėžė prof. R. Maskeliūnas.
Rytis Maskeliūnas. KTU nuotr.
Sutelktas dėmesys
Naudojant šią naująją technologiją, futbolo rungtynių transliacija gerokai patobulės, o vienas iš pranašumų – sklandesnė žiūrėjimo patirtis.
„Transliacija atrodys tobulesnė ir profesionalesnė, be trikdžių, kuriuos sukelia operatoriai, pasirodantys ten, kur neturėtų. Šis patobulinimas sumažins atvejus, kai dėl blaškančių kadrų praleidžiami svarbūs rungtynių momentai“, – pabrėžia S. Postupaievas.
KTU nuotr.
Televizijos serveriuose šis algoritmas galėtų apdoroti vaizdą prieš jį transliuojant į eterį su kelių sekundžių vėlavimu nuo tikrojo užfiksuoto momento, kuris vis tiek laikomas tiesiogine transliacija. KTU mokslininkas R. Maskeliūnas mano, kad tobulėjant įrangai DI puikiai užpildys šį laiko tarpą.
Pasak S. Postupaievo, tolesni tyrimai šioje srityje galėtų pradėti naują sporto transliacijų erą, kurioje dėmesys būtų sutelktas ne tik į veiksmo fiksavimą, bet ir į visapusiškai įtraukiančio ir nepertraukiamo žiūrėjimo patirties kūrimą.
Be to, objektų pašalinimo iš vaizdo įrašų technologija gali neapsiriboti vien tiesioginėmis transliacijomis, bet ir pagerinti prieš ir po rungtynių atliekamą analizę ar atkurti archyvinę medžiagą.
KTU nuotr.
Be to, išradimas pritaikomas ne vien futbolui, bet ir kitoms sporto šakoms, pavyzdžiui, salės futbolui ar krepšiniui, kuriose susiduriama su panašiais transliavimo iššūkiais.
„Tai dar viena iliustracija, ką gali šiuolaikinės DI programos. Dažnai girdime apie pritaikymą medicinoje, o čia turime į vartotojus orientuotą požiūrį – redaguoti nepatinkančius, kadrus gadinančius vaizdus. Ateityje tokios technologijos galės pašalinti, pavyzdžiui, reklamas arba pakeisti jas kitomis, taip nuolat atnaujindamos turinį tokiu tikslumu, kurio žmogaus akis nepastebės“, – panaudojimo galimybes apsvarstė R. Maskeliūnas.
SUSIJĘ STRAIPSNIAI
-
Nobelio chemijos premiją pasidalijo JAV ir JK mokslininkai1
Šių metų Nobelio chemijos premija paskirta Davidui Bakeriui iš JAV už kompiuterinį baltymų projektavimą bei Jungtinės Karalystėje dirbantiems Demisui Hassabi ir Johnui M. Jumperiui už baltymų struktūros nuspėjimą, trečiadienį paske...
-
Rusija uždraudė susirašinėjimo platformą „Discord“2
Rusijos telekomunikacijų priežiūros institucija antradienį paskelbė, kad uždraudžia platformą „Discord“ už šalies įstatymų pažeidimus. ...
-
Keliolika JAV valstijų kreipėsi į teismą dėl „TikTok“ poveikio jaunimo psichikos sveikatai
Keliolika JAV valstijų ir Kolumbijos apygarda antradienį pateikė ieškinius „TikTok“ atžvilgiu, teigdamos, kad ši populiari trumpo formato vaizdo įrašų programėlė kenkia jaunimo psichikos sveikatai, nes jos platforma suk...
-
Nobelio fizikos premija skirta mokslininkams už atradimus, įgalinančius mašininį mokymąsi1
Šių metų Nobelio fizikos premija paskirta JAV mokslininkui Johnui J. Hopfieldui ir Geoffrey E. Hintonui iš Kanados už atradimus ir išradimus, įgalinančius mašininį mokymąsi naudojant dirbtinius neuronų tinklus, antradienį p...
-
Nobelio medicinos premija paskirta amerikiečiams už mikro-RNR atradimą
Šių metų Nobelio premija už pasiekimus medicinos srityje paskirta amerikiečiams Victorui Ambrosui ir Gary Ruvkunui už mikro-RNR atradimą ir jos vaidmenį potranskripciniame genų reguliavime, pirmadienį paskelbė Nobelio komitetas Stokholme veiki...
-
DI medžiotojai mokslo darbuose: VU viešasis pirkimas prieštarauja Lietuvos interesams
Dirbtinį intelektą (DI) ir kopijuotus darbus Lietuvoje atpažįstančią platformą „Identific“ sukūrę lietuviai praeitą savaitę atviru laišku kreipėsi į Lietuvos Respublikos švietimo, mokslo ir sporto ministeriją bei Seimo n...
-
Kosmose – įtampos akimirkos: vykdoma gelbėjimo operacija14
Į tarptautinę kosminę stotį atvyko kompanijos „SpaceX“ erdvėlaivis, į stotį atskraidinęs vieną astronautą iš Jungtinių Valstijų ir vieną – iš Rusijos. ...
-
Ar dirbtinis intelektas kada nors laimės Nobelio premiją?10
Dirbtinis intelektas (DI) jau dabar keičia įvairias pramonės šakas – nuo bankininkystės ir finansų iki kino ir žurnalistikos, o mokslininkai tyrinėja, kaip DI gali sukelti revoliuciją jų srityse ar net laimėti Nobelio premiją. ...
-
ES aiškinasi, kaip skaitmeninės platformos rekomenduoja turinį vartotojams1
Europos Sąjunga (ES) išreiškė susirūpinimą dėl „Snapchat“, „TikTok“ ir „YouTube“ skelbiamo žalingu laikomo turinio ir trečiadienį paprašė šių skaitmeninių platformų pateikti daugiau in...
-
Sąmokslas: „Epic Games“ padavė į teismą „Google“ ir „Samsung“
Kompiuterinio žaidimo „Fortnite“ kūrėja „Epic Games“ pirmadienį paskelbė padavusi į teismą technologijų milžines „Google“ ir „Samsung“, kaltindama jas neteisėtu sąmokslu blokuojant konkurenciją &bdquo...