Systém lineárních páskových systémů - Linear Tape File System

The Systém lineárních páskových systémů (LTFS) je souborový systém , který umožňuje soubory uložené na magnetická páska k nim přistupujete podobným způsobem jako na discích nebo vyměnitelných jednotkách flash. Vyžaduje jak specifický formát dat na páskovém médiu, tak software k zajištění rozhraní systému souborů s daty.

Tato technologie založená na samopopisném formátu pásky vyvinutém společností IBM, bylo přijato Konsorcium LTO v roce 2010.

Dějiny

Ukládání dat na magnetickou pásku se používá již více než 50 let, ale obvykle nedrží metadata souboru ve formě snadno přístupné nebo upravitelné nezávisle na datech obsahu souboru. K uchování těchto dat se často používaly externí databáze (názvy souborů, časová razítka, hierarchie adresářů), ale tyto externí databáze obecně nebyly určeny pro interoperabilita a pásky mohou nebo nemusí obsahovat index jejich obsahu. v Unixový systémy, tam je dehet interoperabilní standard, ale není vhodný k tomu, aby umožňoval modifikaci metadat souboru nezávisle na úpravě dat obsahu souboru - a neudržuje centrální index souborů ani neposkytuje rozhraní nebo vlastnosti souborového systému.

Technologie LTFS byla poprvé implementována společností IBM jako prototyp běžící na systémech Linux a Mac OS X v letech 2008/2009. Tento prototyp byl představen na NAB 2009. Na základě zpětné vazby z této počáteční demonstrace a zkušeností v rámci IBM byl souborový systém přepracován v rámci přípravy na vydání jako produkt. Vývojový tým LTFS spolupracoval s prodejci páskových produktů LTO (HP a Quantum) na vybudování podpory a porozumění formátu LTFS a implementaci souborového systému vedoucí k veřejnému vydání.

Specifikace formátu LTFS a implementace souborového systému byly vydány 12. dubna 2010 s podporou IBM, HP, Quantum a LTO Consortium.[1]

LTFS v2.0.0 byl vydán v březnu 2011 a vylepšil text tak, aby vyjasnil a odstranil nejednoznačnost. Přidala také podporu pro řídké soubory; trvalé identifikátory souborů; virtuální rozšířené atributy pro metadata a řízení souborového systému - a definované minimální a doporučené hodnoty blockize pro svazky LTFS pro kompatibilitu s různými hardwarovými implementacemi HBA.

Specifikace formátu

The ISO / IEC 20919: 2016 Standard definuje požadavky na formát LTFS pro zaměňovaná média, která požadují shodu s LTFS. Definuje datový formát, nezávisle na fyzickém úložném médiu a formátu softwarových příkazů, aby byla data skutečně zaměnitelná. Norma ISO byla připravena SNIA. Je založen na LTFS v2.2 a byl přijat do ISO společnou technickou komisí ISO / IEC JTC 1 Informační technologie.

Pracovní skupina SNIA nadále vyvíjí LTFS a vydává aktualizace. Verze 2.0.0 definuje pravidla pro to, jak se číslo verze může v budoucnu změnit, a jak je udržována kompatibilita napříč různými implementacemi. Všechny implementace musí:

  • správně číst média, která byla kompatibilní s jakoukoli předchozí verzí
  • zapisovat média, která vyhovují verzi, o které se shodují
Historie specifikace formátu LTFS
VerzePublikovánoOdpovídající software
1.0Duben 2010IBM Long Term File System (LTFS) v1.0.0, v1.0.1
Systém lineárních pásků HP (LTFS) v1.0.0, v1.1.0
2.0.0Březen 2011IBM Linear Tape File System - Single Drive Edition (LTFS-SDE) v1.2.0,
Systém lineárních pásků Oracle StorageTek, otevřené vydání v1.0.0
2.1.0Říjen 2012IBM: Specifikace formátu Linear Tape File System (LTFS)
2.2.0prosinec 2013Linear Tape File System (LTFS) Format Specification v2.2.0 SNIA Technical Position
2.3.0Březen 2014Specifikace formátu systému lineárních páskových systémů (LTFS) v2.3.0 Revize 4
2.4.0Prosinec 2017Specifikace formátu systému lineárních páskových systémů (LTFS) v2.4.0
2.5.0Květen 2019Specifikace formátu systému lineárních páskových systémů (LTFS) v2.5.0

Technická pracovní skupina SNIA

V srpnu 2012 SNIA oznámil[2] že formuje TWG (Technical Work Group), aby pokračovala v technickém vývoji specifikace. Specifikace formátu LTFS v 2.1 je základem procesu akreditace technických prací a norem; Mezi členy SNIA LTFS TWG patří HP, IBM, Věštec a Kvantové.

Příroda

Zatímco LTFS může způsobit, že se páska bude chovat jako disk, nezmění to zásadně sekvenční povahu pásky. Soubory jsou vždy připojeny na konec pásky. Pokud je soubor změněn a přepsán nebo odstraněn ze svazku, použité pásové bloky se neuvolní, jednoduše se označí jako nedostupné a využitá kapacita svazku se neobnoví. Data budou odstraněna a obnovena kapacita pouze v případě, že bude přeformátována celá páska.[Citace je zapotřebí ]

Navzdory těmto nevýhodám existuje několik případů použití, kdy je páska formátovaná LTFS lepší než disk a jiné technologie pro ukládání dat. Zatímco časy vyhledávání LTO se mohou pohybovat od 10 do 100 sekund, rychlost přenosu datových proudů se může shodovat nebo překročit rychlost přenosu dat na disku. Kromě toho jsou kazety LTO snadno přenosné a pojmou mnohem více dat než jakýkoli jiný vyměnitelný formát pro ukládání dat. Možnost zkopírovat velký soubor nebo velký výběr souborů (až 1,5 TB pro LTO-5 nebo 2,5 TB pro LTO_6) na pásku ve formátu LTFS umožňuje snadnou výměnu dat spolupracovníkovi nebo uložení archivní kopie .

Protože LTFS je otevřený standard, pásky formátované LTFS jsou použitelné v široké škále výpočetních systémů.

Implementace

IBM Linear Tape File System - Single Drive Edition

IBM Linear Tape File System - Single Drive Edition
VývojářiIBM
První vydáníDuben 2010
Stabilní uvolnění
2.2.2.0 (9802) / 28. října 2016; Před 4 lety (2016-10-28)
NapsánoC
Operační systémLinux, Operační Systém Mac, Microsoft Windows
Plošinax64, Intel x86 - 32bitový
K dispozici vAngličtina
TypSoftware pro ukládání dat
LicenceGNU Lesser General Public License
webová stránkaibm.com/ systémy/úložný prostor/páska/ ltfs/

The IBM Linear Tape File System - Single Drive Edition, (původně vydaný jako „IBM Long Term File System“), umožňuje formátování pásek jako svazku LTFS a pro připojení těchto svazků - a uživatelé a aplikace mají přístup k souborům a adresářům uloženým na pásku přímo, včetně drag-and-drop souborů.

Operační systémy podporované produktem IBM LTFS-SDE

IBM Linear Tape File System - Library Edition

IBM Linear Tape File System - Library Edition
VývojářiIBM
První vydáníČerven 2011
Stabilní uvolnění
2.0.0 / 28. března 2011; Před 9 lety (2011-03-28)
NapsánoC
Operační systémLinux
Plošinax64, Intel x86 - 32bitový
K dispozici vAngličtina
TypSoftware pro ukládání dat
LicenceProprietární komerční software
webová stránkaibm.com/ systémy/úložný prostor/páska/ ltfs/

The IBM Produkt Linear Tape File System - Library Edition (LTFS-LE) umožňuje použití svazků LTFS v a pásková knihovna. Každá kazeta s páskou ve formátu LTFS v knihovně se zobrazí jako samostatná složka pod bodem připojení souborového systému a uživatel nebo aplikace může přejít do každé z těchto složek a získat přístup k souborům uloženým na každé kazetě. Software LTFS-LE automaticky ovládá robotiku páskové knihovny, aby načítal a uvolňoval potřebné svazky LTFS.

Operační systémy podporované produktem IBM LTFS-LE

Systém lineárních páskových souborů Oracle StorageTek, otevřené vydání

Systém lineárních páskových souborů Oracle StorageTek, otevřené vydání
VývojářiVĚŠTEC
První vydání2011
Stabilní uvolnění
1.2.6
NapsánoC
Operační systémLinux
Plošinax64, Intel x86 - 32bitový
K dispozici vAngličtina
TypSoftware pro ukládání dat
LicenceLGPL-2.1, BSD
webová stránkawww.věštec.com/nás/produkty/ servery-úložiště/úložný prostor/ páskové úložiště/ ltfs/ a oss.věštec.com/ projekty/ ltfs/

Věštec bezplatný otevřený zdrojový systém StorageTek Linear Tape File System (LTFS), software Open Edition[3] se tvrdí, že je první, kdo uloží 8,5 TB (nativní kapacita) na jednu kazetu. Podporuje páskové jednotky Oracle StorageTek LTO 5 a LTO 6 od společností HP a IBM, stejně jako páskové jednotky Oracle StorageTek T10000C a T10000D.[4][5]

Systém lineárních páskových systémů Oracle StorageTek, edice Library

Nabídka softwaru Oracle StorageTek LTFS-LE podporuje modulární knihovní systém StorageTek SL8500, modulární knihovní systém StorageTek SL3000 a modulární pásku StorageTek SL150.[6]

Systém lineárních pásků HP

Systém lineárních pásků HP
VývojářiHP
Stabilní uvolnění
1.1.0 / 29 listopadu 2010; před 10ti lety (2010-11-29)
NapsánoC
Operační systémLinux, Mac OS X
Plošinax64, Intel x86 - 32bitový
LicenceGNU Lesser General Public License
webová stránkahpe.com/úložný prostor/ storeopen

The HP Implementací společnosti HP je Linear Tape File System (HP LTFS). Je to bezplatná softwarová aplikace s otevřeným zdrojovým kódem.

Operační systémy podporované systémem HP LTFS

Systém kvantových lineárních pásků

Kvantové LTFS
VývojářiQuantum Corporation
Operační systémOkna, Linux, Mac OS X
LicenceGNU Lesser General Public License
webová stránkawww.kvantum.com/produkty/ podlepené disky/ ltoultrium/ lto-5/ ltfs/index.aspx

Quantum Corporation poskytuje produkt LTFS s podporou Windows, Linux a Mac OS X.

Scalar LTFS Appliance je souborový systém, který představuje páskovou knihovnu Quantum jako sdílenou složku NAS. Toto zařízení umožňuje prohlížení souborů, jako by se nacházely na místním disku, a umožňuje uživatelům přetahovat soubory přímo do az páskové kazety.

Produkty kompatibilní s LTFS

Enterprise disky

  • Pásková jednotka IBM TS1140
Nativní kapacitní pásková jednotka IBM 4 TB [7]
  • Pásková jednotka Oracle StorageTek T10000C
Nativní kapacitní pásková jednotka Oracle 5 TB [8]

Pohony LTO

  • HP StorageWorks LTO-5 Ultrium 3000
Externí pásková jednotka HP LTO5 poloviční výšky, SAS 6 Gbit / s
  • HP StorageWorks LTO-5 Ultrium 3280
Pásková jednotka HP LTO5 s plnou výškou, 6 Gbit / s SAS
  • Pásková jednotka IBM System Storage TS2250
Samostatná externí pásková jednotka IBM LTO5 poloviční výšky, rozhraní SAS 6 Gbit / s[9]
  • Pásková jednotka IBM System Storage TS2350
Externí samostatná pásková jednotka IBM LTO5 s plnou výškou, rozhraní SAS 6 Gbit / s[10]
  • Pásková jednotka IBM LTO5 FH FC
IBM LTO5 interní pásková jednotka s plnou výškou, rozhraní Fibre Channel 8 Gbit / s[11]
  • Pásková jednotka IBM LTO5 FH SAS
Interní pásková jednotka IBM LTO5 s plnou výškou, rozhraní SAS 6 Gbit / s[11]
  • Pásková jednotka IBM LTO5 HH FC
Interní pásková jednotka IBM LTO5 poloviční výšky, rozhraní Fibre Channel 8 Gbit / s[11]
  • Pásková jednotka IBM LTO5 HH SAS
Interní pásková jednotka IBM LTO5 poloviční výšky, rozhraní SAS 6 Gbit / s[11]
  • Pásková jednotka Quantum LTO5 HH SAS
Kvantová externí pásková jednotka LTO5 poloviční výšky, rozhraní SAS 6 Gbit / s[12]
  • Pásková jednotka Quantum LTO5 FH SAS
Kvantová interní pásková jednotka LTO5 poloviční výšky, rozhraní SAS 6 Gbit / s[12]

Spotřebiče

  • Úložiště Heaven TapeMaster LTFS | Klonovací zařízení LTO Ultrium Tape
The TapeMaster [13] LTFS | Systém migrace a duplikace pásky LTO Ultrium je vybaven vysokorychlostním klonováním pásky bez potřeby počítače nebo aplikačního softwaru. Klonovací systém TapeMaster LTO je dodáván v manuální nebo plně automatizované konfiguraci, zahrnuje podporu čárových kódů, šifrovaných pásek a podporuje všechny generace pásek LTO Ultrium.
  • 1 Stanice vykládky za Wrangler LTO-5
The 1 Beyond[14] Stanice Wrangler LTO-5 Offload Stations je zařízení pro ukládání vysílaného obsahu přímo na pásku přes LTFS.
  • Produkty založené na LTO-5 společnosti Cache-A
Cache-A Corporation[15] demonstroval jednu z raných integrací formátu LTFS na LTO Gen5 pomocí IBM LTFS codebase[16] v NAB 2010. Cache-A pokračuje v tomto vývoji s kódovou základnou HP[17] poskytovat archivní zařízení založená na LTFS, která poskytují přístup k této technologii bez nutnosti jakéhokoli softwaru na straně klienta.
  • Pásový archiv StrongBox LTFS
Data StrongBoxu[18] dříve známý jako Crossroads[19] oznámeno 11. dubna 2011,[20] zavést nový archivní produkt na bázi pásků, který využívá technologii Linear Tape File System (LTFS). Toto řešení[módní slovo ] bude sloužit jako online archiv pro úroveň 3 (Terciární úložiště) data, která se prezentují jako diskové úložiště, ale obsahují jak disk pro rychlé ukládání a načítání souborů, tak fyzické LTO páska pro nákladově efektivní a dlouhodobé skladování kapacity. Dostupné produkty jsou StrongBOX T1 a StrongBOX T3.
  • Videorekordér FOR-A LTR-110HS / 120HS
FOR-A[21] Digitální videorekordér LTR-100HS používá páskové kazety formátované IBM LTFS. To bylo představeno na NAB 2010 a získalo IBC 2010 Pick Hit Awards od Broadcast Engineering. Jeho nástupcem je FOR-A LTR-120HS [model AVC-Intra / DVCPRO], který podporuje další formát MXF
  • Zařízení Nodeum LTFS
Uzel[22] je Software definován založené řešení. Jedná se o řešení kompatibilní s LTFS.[23] Řešení je založeno na Linuxu, instalaci lze provést pomocí Možné playbook do libovolného komoditního hardwaru x86. Zařízení poskytuje virtualizovaný souborový systém přístupný pomocí protokolů NAS; architekturu tvoří disk - flash pro ukládání do mezipaměti a správce páskové knihovny pro rozšíření kapacity na LTO pásky. Virtualizované úložiště Appliance lze také prezentovat jako koncový bod S3, což umožňuje S3 přístup k datům uloženým na páskách.
  • Spectra Logic BlackPearl
Černá perla[24] Zařízení je brána hlubokého úložiště, která umožňuje čtení a zápis kazet ve formátu LTFS prostřednictvím rozhraní S3.

Nezávislí dodavatelé softwaru podporující LTFS

  • BRU PE
Skupina TOLIS[25] Verze BRU Producer Edition 2.3.0 poskytuje uživatelům OS X nativní LTFS (Linear Tape Filesystem Support).[26]
  • FlashNet
SGL[27] (Software Generation Limited) britská softwarová řešení pro archivaci vysílání[módní slovo ] společnost, byla první Nezávislý prodejce softwaru (ISV), který oznámil[28] jejich podpora LTFS s jejich produktem FlashNet.
  • Masstech Group Inc.
Masstech Group Inc.,[29] kanadský vývojář řešení správy médií, archivace, automatizace pracovních postupů a překódování[módní slovo ] pro mediální a zábavní průmysl ohlásila podporu LTFS napříč řešením společnosti[módní slovo ] portfolio v roce 2012.[30]
  • Open Source Storage Inc.
Open Source Storage Inc.,[31] a Colorado Corporation, vyvíjí, instaluje a podporuje implementaci LTFS s otevřeným zdrojovým kódem s příponami pro podporu páskových knihoven tak, aby jedna nebo více celých páskových knihoven vypadalo jako jediný prostor názvů souborového systému s automatickým kopírováním a načítáním souborů ze svazků LTFS . Dva produkty, OSVault a Wellspring, jsou založeny na základní linii IBM LTFS SE, média jsou zaměnitelná s jakoukoli jinou implementací LTFS. Poprvé nasazeno v roce 2006, podpora souborového systému LTFS a podpora automatického podavače LTFS byla přidána v roce 2012 a první produkční systém byl spuštěn v lednu 2013 a dnes je v provozu více než 100 produkčních míst v Broadcast / Entertainment a Medical Applications.[Citace je zapotřebí ]
  • PreRollPost
PreRollPost[32] lze použít s jakoukoli páskovou jednotkou kompatibilní s LTFS v systému Macintosh OSX 10.9 a vyšším nebo Windows 10, 8 nebo 7. Zálohování, plánování a načítání je možné pomocí PreRollPost, který také používá kontrolní součet technologie zajišťující 100% shodu všech archivů. Není vyžadováno žádné formátování, software ani jiný hardware. K instalaci všeho pro LTFS je potřeba jediné kliknutí. Zálohu lze použít s libovolnými soubory, tj. Soubory projektu NLE nebo celými pevnými disky. PreRollPost také podporuje zálohování originálů fotoaparátů pomocí indexu uloženého na místním pevném disku nebo na pásku LTO. Kompatibilní s Sony Archiv optických disků, mlogic mTape, MagStor od MagNext a LT60 od společnosti Unitex.
  • Správce archivů QStar s LTFS Volume Spanning
QStar[33] oznámeno dne 19. července 2012,[34] QStar představuje první softwarovou technologii LTFS pro objemové a souborové rozložení pro páskové knihovny. S využitím technologie LTFS od společnosti QStar pro objemové zpracování lze na všechna média v páskové knihovně pohlížet jako na jednu nebo více stále rostoucích síťových sdílených složek. Jakmile se předchozí médium zaplní, automaticky se přidá nové médium LTFS. Tento přístup eliminuje neustálé zastavování a ruční rekonfiguraci vyžadovanou standardními metodami LTFS, protože páska dosáhne kapacity.
  • XenData
Celá řada produktů digitálního videoarchivu XenData podporuje LTFS,[35] nabízí řadu výhod ve srovnání s jinými řešeními LTFS.[módní slovo ][36]
  • YoYotta
YoYotta vytváří produkční a post-pracovní software pro archivaci, zálohování a obnovu pomocí LTFS na páskách LTO-7, LTO-6 nebo LTO-5. YoYottaID LTFS ovládá dva samostatné disky LTO. YoYottaID Automation řídí LTO knihovnu a umožňuje automatizované vytváření vícepásmových archivů LTFS.[37]

Projekty LTFS

Uznání odvětví

  • Technologie IBM LTFS získala na veletrhu NAB 2011 cenu Pick Hit od Broadcast Engineering.[40]
  • Společnosti IBM a FOX Networks získaly v roce 2011 cenu Engineering Emmy Award za projekt, který používá LTFS k ukládání, výměně a archivaci video obsahu.[41]
  • IBM obdržela v roce 2011 Hollywood Post-Alliance (HPA ) Award Engineering Excellence Award.[42]

Reference

  1. ^ NAB-2010 Archivováno 04.09.2012 v Archiv. Dnes
  2. ^ „SNIA oznamuje technickou pracovní skupinu pro systém lineárních páskových systémů“
  3. ^ Systém lineárních pásků Oracle StorageTek, webová stránka Open Edition
  4. ^ Tisková zpráva k páskové jednotce Oracle StorageTek T10000C
  5. ^ Společnost Oracle představuje páskovou jednotku StorageTek T10000D
  6. ^ Oracle StorageTek LTFS, tisková zpráva z edice Library
  7. ^ „Pásková jednotka IBM System Storage TS1140 Model E07 přináší vyšší výkon, spolehlivost a kapacitu“. IBM. Citováno 4. října 2012.
  8. ^ Webová stránka páskové jednotky Oracle StorageTek T10000C
  9. ^ Webová stránka IBM TS2250
  10. ^ Webová stránka IBM TS2350
  11. ^ A b C d Páskové jednotky, knihovny a automatické zavaděče IBM Ultrium
  12. ^ A b Kvantová webová stránka LTO-5
  13. ^ „TapeMaster LTO Data Tape Duplicator and Migration System“. www.storageheaven.com. Citováno 21. května 2017.
  14. ^ 1 Beyond - Domovská stránka
  15. ^ Cache-A - domovská stránka
  16. ^ IBM LFTS Linux Codebase
  17. ^ „Linuxová kódová základna HP LTFS“. Archivovány od originál dne 28. září 2011. Citováno 24. ledna 2011.
  18. ^ StrongBox Data - domovská stránka
  19. ^ Křižovatka - domovská stránka
  20. ^ Crossroads - Tisková zpráva, Austin, TX, 11. dubna 2011: Plány na spuštění archivního produktu, který se objevuje v nové éře pro pásky Archivováno 28. února 2014 v Archiv. Dnes
  21. ^ FOR-A - Domovská stránka
  22. ^ „Zařízení Nodeum LTFS“. Uzel.
  23. ^ „Ověření souladu s LTFS“. Konsorcium LTO.
  24. ^ Spectra Logic BlackPearl
  25. ^ Tolisgroup - domovská stránka
  26. ^ TOLIS Group - Tisková zpráva, Las Vegas, NV - 11. dubna 2011: EDICE VÝROBCE BRU (BRU PE) PODPORUJE LTFS
  27. ^ SGL - domovská stránka
  28. ^ SGL - Tisková zpráva, Fareham, Velká Británie - 9. února 2011: SGL ohlašuje implementaci LTFS, která transformuje pracovní postupy digitálních médií Archivováno 9. července 2011 v Wayback Machine
  29. ^ Domovská stránka společnosti Masstech Group Inc.
  30. ^ Společnost Masstech poskytuje archivační podporu pro průkopnickou tiskovou zprávu systému Linear Tape File System společnosti IBM
  31. ^ „Back to the Future - Open Source Storage (Re) launches“ „27. ledna 2014, Ben Kepes, Forbes
  32. ^ Imagine Products Inc.-Homepage
  33. ^ QStar - Domovská stránka
  34. ^ QStar - tisková zpráva, Navarra, Florida:
  35. ^ XenData - produkty
  36. ^ XenData jako první spouští archivy videí LTO s podporou souborového systému s více formáty, včetně LTFS a tar
  37. ^ YoYotta - domovská stránka
  38. ^ Thought Equity Motion - domovská stránka
  39. ^ Thought Equity Motion - tisková zpráva: Projekt digitalizace a uchování filmového archivu pro EYE Film Institute Nizozemsko
  40. ^ Oznámení o výběru hitů NAB 2011
  41. ^ „IBM Almaden Blog“. Archivovány od originál dne 25. dubna 2012. Citováno 26. října 2011.
  42. ^ Vyhlášení ceny HPA

externí odkazy

Implementace: