Pegasus (správa pracovního toku) - Pegasus (workflow management)

Pegas
VývojářiUniversity of Southern California, Information Sciences Institute,University of Wisconsin-Madison
Stabilní uvolnění
5.0 Beta1 / 27. července 2020; před 3 měsíci (2020-07-27)
Napsáno Jáva, Krajta, C
Operační systémOperační Systém Mac, Linux
K dispozici v Jáva, Krajta, C
TypSystém řízení pracovního toku
LicenceLicence Apache 2.0
webová stránkapegasus.isi.edu

Pegas je open-source systém řízení pracovního toku.[1][2][3] Poskytuje vědcům nezbytné abstrakce k vytváření vědeckých pracovních toků[4] a umožňuje transparentní provádění těchto pracovních toků na řadě výpočetních platforem, včetně vysoce výkonných výpočtů shluky, mraky, a národní kybernetická infrastruktura.[5][6] V Pegasu jsou pracovní postupy abstraktně popsány jako přímé acyklické grafy (DAG) pomocí poskytovaného API pro Notebooky Jupyter, Krajta, R nebo Jáva.[7] Během provádění Pegasus převádí vytvořený abstraktní pracovní tok na spustitelný pracovní tok[8][9] který provádí a spravuje HTCondor.[10][11]

Pegasus se používá v mnoha různých oborech včetně astronomie, fyzika gravitačních vln, bioinformatika, zemětřesení a helioseismologie.[12] Zejména, vědecká spolupráce LIGO použil ji k přímé detekci gravitační vlny poprvé.[8][13][14]

Oblast použití

Příklady použití:[5][6]

  • Gravitační vlnová fyzika
  • Věda o zemětřesení
  • Bioinformatika
  • Pracovní postupy pro sopečné hromadné toky
  • Zpracování a analýza difúzního obrazu
  • Spallation Neutron Source (SNS)

Dějiny

Vývoj Pegasu byl zahájen v roce 2001.

Viz také

Reference

  1. ^ E. Deelman K. K. Vahi, G. Juve, M. Rynge, S. Callaghan, P. J. Maechling, R. Mayani, W. Chen, R. Ferreira da Silva, M. Livny a K. Wenger, „Počítačové systémy budoucí generace“, Elsevier; 46, s. 17-35 (2015)
  2. ^ E.A. Huerta, R. Haas, E. Fajardo, D.S. Katz, S. Anderson, P. Couvares, J. Willis, T. Bouvet, J. Enos, W.T.C. Kramer, H.W. Leong a D. Wheeler, „BOSS-LDG: Nový výpočetní rámec, který spojuje Blue Waters, Open Science Grid, Shifter a datovou mřížku LIGO pro urychlení objevování gravitačních vln“, 13. mezinárodní konference IEEE 2017 o e-vědě (e-Science); 335-344 (2017)
  3. ^ B. Riedel, B. Bauermeister, L. Bryant, J. Conrad, P. de Perio, R. W. Gardner, L. Grandi, F. Lombardi, A. Rizzo, G. Sartorelli, M. Selvi, E. Shockley, J. Stephen, S. Thapa a C. Tunnell „Distribuovaná data a správa úloh pro experiment XENON1T“, PEARC '18: Proceedings of the Practice and Experience on Advanced Research Computing; 9, s. 1-8 (2018)
  4. ^ G. Amalarethinam, T. Lucia, A. Beena, „Rámec plánování pro pravidelné vědecké pracovní postupy v cloudu“, International Journal of Applied Engineering Research; 10, č. 82 (2015)
  5. ^ A b E. Deelman, G. Singh, M. Su, J. Blythe, Y. Gil, C. Kesselman G. Mehta, K. Vahi, B. G. Berriman, J. Good, A. Laity, J. C. Jacob a D. S. Katz, „Pegasus: rámec pro mapování složitých vědeckých pracovních toků na distribuované systémy“, Vědecké programování; 13, s. 19 (2005)
  6. ^ A b Integrita vědeckého pracovního postupu s programem Pegasus (SWIP) tím, že Centrum aplikovaného výzkumu kybernetické bezpečnosti; zveřejněno 16. září 2016; vyvoláno 1. května 2020
  7. ^ D. Weitzel, B. Bockelman, D. Brown, P. Couvares, F. Würthwein a E.F. Hernandez, „Přístup k datům pro LIGO v OSG“, Postup z praxe a zkušenosti z pokročilého výzkumu v oblasti výpočetní techniky 2017 o udržitelnosti, úspěchu a dopadu - PEARC17; 24, č. 1-6 (2017)
  8. ^ A b „Testování citlivosti LIGO“. Research.gov. 1. září 2007. Citováno 30. dubna 2020.
  9. ^ Duncan Brown a Ewa Deelman, „Hledáme gravitační vlny: výpočetní perspektiva“, na Science Node; zveřejněno 8. června 2011; vyvoláno 30. dubna 2020
  10. ^ Ocenění NSF v hodnotě 1 milion $ jde na projekt integrity dat vedený IU tím, že Indiana University; zveřejněno 16. září 2016; vyvoláno 1. května 2020
  11. ^ Brian Mattmiller, „High Throughput Computing pomáhá LIGO potvrdit Einsteinovu poslední neprokázanou teorii“, na Morgridge Institute for Research; zveřejněno 7. března 2016; vyvoláno 1. května 2020
  12. ^ Sanden Totten, „Caltech nebyla jediná škola SoCal, která pomáhala objevovat gravitační vlny“, na KPCC; zveřejněno 11. února 2016; vyvoláno 1. května 2020
  13. ^ D.A. Brown, P.R. Brady, A. Dietz, J. Cao, B. Johnson, J. McNabb, „Případová studie o využití technologií pracovních toků pro vědeckou analýzu: Analýza dat gravitační vlny. In: I.J Taylor, E. Deelman, D.B. Gannon, M. Shields (eds) Workflows for e-Science “, Springer, Londýn; 13, s. 39-59 (2007)
  14. ^ D. Davis, T. Massinger, A. Lundgren, J.C. Driggers, A.L. Urban a L. Nuttall, „Zlepšení citlivosti Advanced LIGO pomocí odčítání šumu“, Klasická a kvantová gravitace; 36, č. 5 (2019)