Synopse videa - Video synopsis

Obr. 1: Snímky obrazovky: Před a po přehledu videa. 9 hodin aktivity shrnuté do 20sekundové simultánní prezentace více objektů a aktivit, ke kterým došlo v různých časech.
Obr. 2: Balení zkumavek - Schematický příklad: Vytvoření souhrnu videa změnou časování časoprostorových zkumavek (X = 2-rozměrná osa XY každého snímku).

Video Synopsis® je simultánní prezentace událostí, která umožňuje prohlížení hodin videozáznamu během několika minut. Tato technologie sleduje a analyzuje pohybující se objekty (nazývané také události) a převádí je video streamy do databáze objektů a činností.[1] Video Synopse má specifické aplikace v oblasti videoanalýza a video dohled kde i přes technologický pokrok a zvýšený růst v zavádění kamer CCTV (uzavřený televizní okruh),[2] prohlížení a analýza zaznamenaných záběrů je stále nákladný a pracný a časově náročný úkol.

Přehled technologií

Synopse videa kombinuje vizuální shrnutí uloženého videa společně s indexovacím mechanismem.

Když je vyžadován souhrn, všechny objekty z cílového období jsou shromážděny a posunuty v čase, aby se vytvořilo mnohem kratší souhrnné video zobrazující maximální aktivitu. Synopse videoklip je generován v reálném čase, ve kterém jsou současně zobrazeny objekty a aktivity, ke kterým původně došlo v různých časech.[3] (Viz obrázek 1 - Snímky obrazovky: Před a po souhrnu videa).

Proces začíná detekování a sledování předměty zájmu. Každý objekt je reprezentován jako trubice v časoprostoru všech video snímků. Objekty jsou detekovány a uloženy v databázi přibližně v reálném čase.

Na základě žádosti o shrnutí časového období jsou všechny objekty z požadovaného času extrahovány z databáze a indexovány, aby se vytvořilo mnohem kratší souhrnné video obsahující maximální aktivitu. (Viz obrázek 2 - Balení zkumavek).

Vykreslování v reálném čase se používá ke generování souhrnného videa po opětovném načasování objektu. To dovoluje koncový uživatel kontrola nad hustotou objektu / události.

Technologie video synopse byla vynalezena profesorem Shmuelem Pelegem[4] z Hebrejská univerzita z Jeruzalém, Izrael, a je vyvíjen na základě komerční licence společností BriefCam, Ltd.[5]BriefCam obdržela licenci na používání této technologie od Yissum který je vlastníkem patentů registrovaných pro tuto technologii. V květnu 2018 společnost BriefCam získala japonský gigant pro digitální zobrazování, Canon Inc., za odhadovaných 90 milionů dolarů.[6] Mezi investory společnosti patří Motorola Solutions Venture Capital, Aviv Venture Capital a OurCrowd.[7]

Souhrn videa před + po (vodorovně) .jpg

Nedávné pokroky

Nedávné pokroky v oblasti Video Synopsis vedly k metodám, které se zaměřují na shromažďování klíčových bodů (nebo snímků) z dlouhého nesestříhaného videa a jejich prezentaci jako řetězec klíčových událostí, které shrnují video. Jak je uvedeno v[8] toto je jen jedna z mnoha metod používaných v moderní literatuře k provedení tohoto úkolu. V poslední době se tyto metody založené na událostech zaměřily na korelaci objektů v rámečcích, ale více sémanticky příbuzným způsobem, který se nazývá příběhová metoda shrnutí videa. Ukázalo se, že tyto metody fungují dobře egocentrický[9]nastavení, kde je video v zásadě perspektivou pohledu jedné osoby nebo skupiny lidí.

Viz také

Reference

  1. ^ Y. Pritch, S. Ratovitch, A. Hendel a S. Peleg, Shlukovaný přehled přehledového videa, 6. IEEE Int. Konf. o pokročilém sledování na základě videa a signálu (AVSS'09), Janov, Itálie, 2. - 4. září 2009
  2. ^ Y. Pritch, A. Rav-Acha, A. Gutman a S. Peleg, Synopse webové kamery: Peeking po celém světě, ICCV'07, říjen 2007. 8s.
  3. ^ Y. Pritch, A. Rav-Acha a S. Peleg, Synopse a indexování nechronologického videa, IEEE Trans. PAMI, sv. 30, č. 11, listopad 2008, s. 1971-1984.
  4. ^ A. Rav-Acha, Y. Pritch a S. Peleg, Zkrácení dlouhého videa: Synopse dynamického videa, CVPR'06, červen 2006, s. 435-441.
  5. ^ S. Peleg, Y. Caspi, Bílá kniha BriefCam
  6. ^ Yablonko, Yasmin (9. května 2018). „Canon kupuje izraelské video řešení od společnosti BriefCam za 90 milionů dolarů“. Globusy (v hebrejštině). Citováno 2018-12-05.
  7. ^ CB Insights. „BriefCam financování a investoři - CB Insights“. www.cbinsights.com. Citováno 2018-12-05.
  8. ^ Muhammad Ajmal, Muhammad Husnain Ashraf, Muhammad Shakir, Yasir Abbas, Faiz Ali Shah, shrnutí videa: techniky a klasifikace [1]
  9. ^ Zheng Lu, Kristen Grauman [2] Shrnutí příběhu pro egocentrické video. In Proceedings of the IEEE Conference on Computer Vision and Pattern Recognition - 2013.

Patenty

externí odkazy