https://bodybydarwin.com
Slider Image

A szoftver azonosítja otthoni videó legizgalmasabb részeit, szerkeszti az unalmas pillanatokat

2020

Akárhogy is látnia kell két teljes percet, amikor gyerek játszik egy iPad-szel? Bin Zhao számítástechnika doktori hallgató azt állítja, hogy még a saját felvételeit sem nézi. "Nagyon sok videóm van a telefonomban, de a valóság az, hogy szinte soha nem nézek vissza ezekre a videókra, amelyeket a Popular Science tudósít ." A fő ok az, hogy a videó maga is öt vagy 10 perc hosszú lehet. "

Zhao és tanácsadója, Eric P. Xing, a Carnegie Mellon Egyetem érdekes megoldást találtak erre a problémára. Kialakítottak egy algoritmust, amely felismeri a videók unalmas részeit és szerkeszti azokat. A végtermék olyan, mint egy kis kiemelő orsó. A felhasználók meg is adhatják a kívánt tárcsa hosszát - mondjuk, 30 másodperc. Sokkal emészthetőbb. "Motivációnk az, hogy az emberek nem akarják megnézni az eredeti videót, amelyet Zhao mond.

Zhao és Xing nem az első számítógépes tudósok, akik megpróbálják automatikusan felismerni a videó érdekes vagy fontos részeit. Sok kutató és cég azon dolgozik, hogy olyan szoftvert hozzon létre, amely szokatlan tevékenységeket észlel a megfigyelési videókban, amíg ez történik. Legalább egy cég azt állítja, hogy elad egy rendszert, amely képes ezt megtenni, de a kutatás folyamatban van. Egy fontos jelenet-felismerő program a közösségi média társaságok számára is jótékonysági hatás lehet: Képzelje el, hogy képes összeállított, pillanatnyi videókat készíteni, hogy megosszák az internetes barátaiddal.

Az új algoritmus úgy működik, hogy létrehoz egy "szótárt", hogy megmagyarázza, mit lát a videó feldolgozásakor. Ezután minden pillanatban felteszi a kérdést. Meg tudom magyarázni, hogy mi történik most a szótármal? "Ha nem, akkor a videóban valami új és izgalmas történik, tehát az algoritmus ezt észreveszi. Az algoritmus ezt nem teszi meg. Nem kell látnia az egész videót, mielőtt elkezdi összeállítani a kiemelt orsót. Ez a Zhao és Xing kódolási technikákkal együtt segíti az algoritmus gyorsabb működését.

Zhao szerint az új algoritmusa szokatlanul gyors és emberszerû, a jelenetekben úgy dönt, hogy kivonja. Egy órás videofelvételt dolgoz fel egy-két órán belül, szemben a tudományos irodalomban közzétett hasonló algoritmusokkal, amelyek 10-20 órát igényelnek. Annak tesztelésére, hogy az algoritmus úgy válasszon-e "érdekes" jeleneteket, mint egy ember, Zhao és Xing három embert kért videóinak megtekintésére, és válassza ki a szegmenseket, amelyeket ki szeretne emelni a videók közül. A számítógépes tudósok ezután megvizsgálták, hogy az emberi és az algoritmikus döntések milyen szorosan illeszkednek egymáshoz. A 20 személyes videó közül 18-ban Zhao és Xing algoritmusa inkább emberszerű döntéseket hozott, mint a másik három versengő algoritmus. A pár öt biztonsági típusú videót is ellenőrzött, amelyek olyan helyzeteket mutatnak be, mint például a metróállomásokba belépő emberek. Megállapították, hogy algoritmusuk, és egyebek mellett, felülmúlta a többit. Zhao ezen a héten az elektromos és elektronikai mérnökök intézete által rendezett konferencián mutatja be eredményeit.

Zhao most egy indítópanel, a PanOptus elindítását tervezi, hogy szoftverét értékesítse. A PanOptus iPhone alkalmazás és API működik.

Nézze meg az algoritmust a munka során egy videón, amelyben Xing fia található:

"promo_image": {// s1.dmcdn.net/TqCJd/x240-OWi.jpg címsorok ": {Egy szökőkútdal, teljes videó forgalmazó": promo_image ": {// s2.dmcdn.net/TqCAE/x240-5SG .jpg címsorok: "{Egy szökőkútdal, kiemelt disztribútor": {}
A legjobb kerti szerszámok az udvar buja tartásához hulladék nélkül

A legjobb kerti szerszámok az udvar buja tartásához hulladék nélkül

Az allergia továbbra is növekszik, de a szülőknek végre lehetnek módjai a leküzdésre

Az allergia továbbra is növekszik, de a szülőknek végre lehetnek módjai a leküzdésre

Hogyan modellezték a tudósok egy halálos tornádót egy őrülten nagy teljesítményű számítógéppel

Hogyan modellezték a tudósok egy halálos tornádót egy őrülten nagy teljesítményű számítógéppel