Condor

Condor dabar įtakoja tiek technologinių ir sociologinių iššūkių tokio kompiuterio aplinkoje,
Condor Komanda buvo pastato nuostabų įrankių, kurie leidžia mokslininkams ir inžinieriams padidinti jų skaičiavimo pralaidumą

Kas naujo , šioje laidoje:.

< li> 7.6.X yra nauja stabili Condor serijos.
• Daug naujų funkcijų buvo pridėta, nes 7.4.X.

Kas naujo versijos 7.3.2:

• Laidos pastabos:
• iš condor_status su -grid galimybe formatą buvo pakeistas suteikti daugiau naudingos informacijos.
• Panaikintas ženklas naujos eilutės pridedamos prie condor_status -format produkcijos pabaigoje. Todėl kodas, kuris suvokia, kad šią komandą išėjimą dabar turėtų būti atsargūs, kai kirpimas paskutinę eilutę.
• Naujos funkcijos: "
• condor_fetchlog dabar gali atnešti istorija failus iš condor_schedd demonas. Ir istorija failas saugomas condor_schedd demonas dabar gali būti pasuktas kasdien ar kas mėnesį.
• condor_ckpt_server automatiškai išvalyti pasenusi Checkpoint failus. Konfigūracijos kintamieji, kurie kontroliuoja šią problemą yra aprašytos žemiau.
• condor_ckpt_server (arba 32 bitų ar 64 bitų) vykdomąjį dabar bendrauti teisingai tarp 32 bitų ir 64 bitų pateikti mazgai. Jei kyla kokiu nors šansas šiek tiek plotis klausimai Checkpoint protokolo (pavyzdžiui, failo dydis), aiškios klaidos pranešimai yra registruojami į Checkpoint serverio žurnaluose.
• Naujas condor_ssh_to_job įrankis leidžia interaktyvios derinimo vykdomų darbų. Žr vadovo puslapį į [*] detales.
• condor_status komanda dabar yra žymiai greitesnis, ypač su -format variantą.
• Tinklelis visata tinklelis tipas GT5 buvo pridėta pateikimo į naują Globus GRAM5 paslauga. Kai GRAM paslauga identifikuoti kaip GT5, jobmanager pristabdyta ir Grid Monitor yra nenaudojamas. Žr 5.3.2 skyrių detales.
• Tinklelis visata tinklelis tipas kremas buvo pridėta pateikimo KREMAS darbo įteikimo gLite. Žr 5.3.8 skyrių detales.
• Kai mažai failų deskriptorių kurti naujų tinklo lizdus, ​​condor_schedd demonas dabar vengia neribotas krovimas iki pranešimų, kad ji siunčia periodiškai į condor_negotiator ir condor_startd.
• našumą ir gedimo tvarkymas Tinklelis monitorius buvo pagerintos.
• Jei tinklelis tipo nordugrid į tinklelį visatoje, darbo statusas informacija dabar gauti naudojant Nordugrid ARC anketa LDAP serverį, kuris turėtų žymiai pagerinti našumą. Be to, Condor, dabar gali pasakyti, kada šie darbai yra veikia.
• Naujas -valgrind galimybė condor_submit_dag priežastys condor_submit_dag generuoti pateikti aprašymas failą, kuris naudoja Valgrind ant condor_dagman, vietoj condor_dagman binary kaip jos vykdomąjį.
• condor_dagman dabar tingiai įvertina ir atveria mazgas darbas failus. Vietoj apdorojant visų pateiktų aprašymas failus ir iš karto atverti nustatytąsias failus paleidžiant condor_dagman dabar suvokia pateikti aprašymas failus tik prieš pateikiamas kiekvieno darbo, ir turi kiekvieną failą atidaryti tik tada, kai atitinkamos darbo vietų eilėje arba vykdyti POST scenarijus , Be to, condor_dagman dabar automatiškai generuoja numatytąjį vartotojo žurnalo failą bet mazgas darbą, nenurodyta vieną.
• Abu parama ir dokumentacija MPI visatoje buvo ištrintas. MPI programos yra remiamos per lygiagrečios visatos naudojimui.
• Kai condor_startd Demonas išbandymas virtualios mašinos programinė įranga nepavyksta (mašinų sukonfigūruotas kaip gali veikti virtualios mašinos), condor_startd periodiškai pakartoti testą, kol pavyks.
• nordugrid_gahp dabar riboja jungtis prie kiekvieno NorduGrid ARC serverio numerį ir panaudoja jungtis, kai įmanoma.
• Pridėta ClassAd funkcija eval (), kuriame atsižvelgiama string argumentą ir vertina eilutę kaip ClassAd raiškos turinį. Politika pavyzdys, kai tai yra naudinga, aprašytas 3.5.9 skirsnyje apie darbo sustabdymo.
• Naujas condor_q galimybė -attributes riboja atributus, kurie yra rodomas, kai naudojamas -xml arba -long galimybes. Ribinis atributų skaičius taip pat padidina užklausą efektyvumą.
• Condor maitinimo valdymo pajėgumus dabar įgyvendinama kaip plug-in. Visų pirma, condor_startd dabar veikia išorinį programą, kaip nurodyta konfigūracijos kintamojo HIBERNATION_PLUGIN, atlikti turimų mažos galios būsenos aptikimo ir prie šių mažos galios valstybių perjungimas.
• Naujas Condor demonas condor_rooster buvo įtraukta į pabusti žiemojančių mašinos, kai išraiška apibrėžia konfigūracijos kintamasis UNHIBERNATE tampa tiesa. Konfigūracijos Kintamieji, susiję su condor_rooster aprašyti 3.3.35 skirsnyje.
• Pridėta galimybė išgauti informaciją iš vartotojo Įvykių skaitytojo valstybės buferio vartotojo žurnalo skaitytojas. Tai įgyvendinama per naują ReadUserLogStateAccess C ++ klasei, kaip apibrėžta read_user_log.h.
• Pokyčiai konfigūracijos kintamojo CERTIFICATE_MAPFILE vertės arba failo turinį, kurią ji nurodo nebereikia visą iš naujo paleisti Condor. Vietoj to, komanda condor_reconfig sukels pakeitimai turi būti panaudoti.
• dabar condor_master demonas bus išspausdinti kelią ir argumentus, bet demonų jis pradeda jei D_FULLDEBUG yra įjungtas. Anksčiau ten buvo ne būdas gauti jį rodyti argumentus, su kuriais jis buvo pradedant demonas.
• condor_had demonas dabar turi galimybę kontroliuoti kitą nei condor_negotiator demonus. Tai valdomas HAD_CONTROLLEE makro.
• Condor dabar pripažįsta VOMS plėtinius X.509 proxy. Į VOMS atributai užkoduota darbo ClassAd atributas X509UserProxySubject.
• condor_startd dabar gali išvalyti dideles virtualias mašinas, po to, Condor ar jo kompiuterio operacinei sistemai avariją.
• Po avarijos, condor_gridmanager nebėra paleidžiamas visi už GT2 darbo jobmanagers. Tai turėtų pagerinti išieškojimo laiką.
• Condor veikia geriau su ClassAds priskirtinų bendriniais pavadinimais condor_collector demonas. Įvairūs demonai, kurios prisiregistruoja prie generinių ClassAds dabar gali turėti priemones, kurios naudoja -subsystem galimybę manipuliuoti savo ClassAds tinkamai.
• Condor dabar suteikia mechanizmą, vykdyti griežtą išteklių ribojimo kai kurioms veikia darbo visatose.
• Sąrankos Kintamosios papildymus ir pakeitimus:
• Naujoji konfigūracija kintamasis EMAIL_SIGNATURE nurodo užsakymą parašas bus pridėtas prie e-mail atsiųstą Condor sistema. Jei apibrėžta, tada šis paprotys parašas pakeičia numatytąjį vieną nurodytą viduje. Nėra Numatytoji šio kintamojo.
• Naujoji konfigūracija kintamasis CKPT_SERVER_CLIENT_TIMEOUT informuoja condor_schedd kiek laiko sekundėmis ji nori laukti išbandyti ir pasikalbėti su condor_ckpt_server procesą prieš deklaruodami condor_ckpt_server žemyn. Žr 3.3.11 skyrių išsamaus aprašymo.
• Naujoji konfigūracija kintamasis CKPT_SERVER_CLIENT_TIMEOUT_RETRY informuoja condor_schedd kad kai condor_ckpt_server yra pažymėta kaip žemyn, kaip sekundes gali turi praeiti, kol condor_schedd bandys bendrauti su condor_ckpt_server dar kartą. Žr 3.3.11 skyrių išsamaus aprašymo.
• Naujoji konfigūracija kintamasis CKPT_SERVER_REMOVE_STALE_CKPT_INTERVAL informuoja condor_ckpt_server pradėti pašalinti pasenusi kontrolės punktuose nurodytu intervalu sekundžių. Žr 3.3.8 skyrių išsamaus aprašymo.
• Naujoji konfigūracija kintamasis CKPT_SERVER_STALE_CKPT_AGE_CUTOFF informuoja condor_ckpt_server kaip senas Checkpoint failo prieigos laikas turi būti tam, kad būtų laikoma pasenusi. Šis laikas, palyginti su dabartine sąvoka dabar, kai kontrolinis serveris tikrina kontroliniame punkte vaizdo failą. Žr 3.3.8 skyrių išsamaus aprašymo.
• Naujoji konfigūracija kintamasis SlotWeight gali būti naudojamas suteikti lizdą didesnį svorį apskaičiuojant naudojimo, apskaičiuojant teisingos akcijų ir vykdymo grupės kvotų. Žr 3.3.10 išsamaus aprašymo.
• Naujoji konfigūracija kintamasis MAX_PERIODIC_EXPR_INTERVAL įgyvendina apie tarp vertinimo periodinių posakių, laiko ribą, dėl to, prisitaikanti laiko numanomu konfigūravimo kintamojo PERIODIC_EXPR_TIMESLICE. Žr 3.3.11 išsamaus aprašymo.
• Naujoji konfigūracija kintamasis GRIDMANAGER_SELECTION_EXPR gali būti naudojami siekiant kontroliuoti, kiek condor_gridmanager procesai bus pagimdė valdyti tinklų visatos darbo vietų. Dėl šio pakeitimo dalis, pašalinti konfigūravimo kintamasis ir patvirtinamuosius kodą GRIDMANAGER_PER_JOB nes nauja konfigūracija kintamasis pakeičia ją. Žr 3.3.11 išsamaus aprašymo.
• konfigūracija kintamasis GRIDMANAGER_MAX_PENDING_SUBMITS_PER_RESOURCE ir atitinkami droselio GRIDMANAGER_MAX_PENDING_SUBMITS buvo pašalintas.
• naujos konfigūracijos kintamasis GRID_MONITOR_DISABLE_TIME kontrolė, kaip ilgai condor_gridmanager lauks po pakliūti klaidą prieš bandant iš naujo paleisti Tinklelis Monitor darbą. Žr 3.3.23 išsamaus aprašymo.
• Naujas teminės konfigūracija makro DETECTED_MEMORY rodo fizinės atminties (RAM) kiekį aptiktas Condor. Vertė yra pateiktas Mb.
• Naujos teminės konfigūracijos makro DETECTED_CORES rodo procesoriaus branduolių aptiktos Condor skaičių.
• naujos konfigūracijos kintamųjų DELEGATE_FULL_JOB_GSI_CREDENTIALS kontrolė ar visiškai arba ribotos X.509 proxy deleguotus už tinklelio tipo GT2 tinklelis visatos vietų. Žr 3.3.26 išsamaus aprašymo.
• Naujoji konfigūracija kintamasis UNHIBERNATE naudoja condor_startd reklamuoti savo ClassAd Būlio išraiška, nurodanti, kai mašina turi būti atsibudę, pavyzdžiui, condor_rooster. Žr 3.3.10 išsamaus aprašymo.
• Naujoji konfigūracija kintamasis HIBERNATION_PLUGIN nurodo į plug-in, kuris condor_startd naudoja tiek aptikti Mažos galios būsena galimybes mašiną ir įjungti įrenginį į mažos galios būsenos kelią. Žr 3.3.10 išsamaus aprašymo.
• Naujoji konfigūracija kintamasis HIBERNATION_PLUGIN_ARGS nurodo papildomų komandų eilutės argumentus, kuriais condor_startd bus perduoti į plug-in, kada kviesdavosi jį įjunkite mašiną mažos galios būsenos. Žr 3.3.10 išsamaus aprašymo.
• Naujoji konfigūracija kintamasis HIBERNATION_OVERRIDE_WOL gali būti naudojami nukreipti condor_startd ignoruoti Wake LAN (WOL) pajėgumus aparato tinklo sąsajos, ir pereiti prie mažos galios būsenos, net jei sąsajos nepalaiko WOL, arba jei WOL yra išjungtas ant jo. Žr 3.3.10 išsamaus aprašymo.
• naujos konfigūracijos kintamųjų DAGMAN_USER_LOG_SCAN_INTERVAL kontrolė, kaip ilgai condor_dagman laukia tarp tikrinti darbo failus būsenos atnaujinimus. Žr 3.3.25 išsamaus aprašymo.
• Naujoji konfigūracija kintamasis DAGMAN_DEFAULT_NODE_LOG nustato numatytąjį žurnalo failo pavadinimą naujam condor_dagman numatytąją mazgas žurnalo failo funkcija. Žr 3.3.25 išsamaus aprašymo.
• Pašalinta konfigūracijos kintamųjų DAGMAN_DELETE_OLD_LOGS; Naujas žurnalo failas skaitymo kodas tampa nebereikalingos.
• Naujoji konfigūracija kintamasis HAD_CONTROLLEE yra naudojamas nurodyti, kad demonas, kurių atliekų condor_had kontrolės vardą. Šis pavadinimas turi sutapti demonas vardas condor_master anketa DAEMON_LIST.
• Klaidos Fiksuotas:
• Fiksuotas į ClassAd funkcijų klaidą kur argumentai, kurie turėjo būti teisingai verčiami stygos, o vertinami prie KLAIDA.
• Fiksuotas paini diagnostikos žinutė su JobRouter, kuris įvyko, kai darbas buvo pašalintas per 5 minutes nuo jų pateikimo.
• Fiksuotas klaidą kuriame dinaminių laiko tarpsnių naudojimo (žr 3.13.7 skirsnį), kurį sukelia aparatas ClassAd atributas SLOT_STARTD_ATTRS išnykti iš ClassAd kai lizdus.
• Fixed "Windows platforma klaidą kuriame langas priklausymo Condor darbą negauna dažų pranešimą.
• Ištaisyta klaida sukelia condor_q -analyze į avariją, kai nebuvo condor_schedd demonas ClassAd failą.
• Fiksuotas condor_procd avariją sukėlė kai iš stebimo proceso aplinką viršijo 1MByte į / proc.
• Ištaisyta Windows platformos klaidą, kuri galėtų sukelti condor_credd į avariją, jei prašoma Kvalifikacija nėra slaptažodžio parduotuvėje.
• Fiksuotas klaidą, kuri buvo sukelia darbo Įvykių sukimosi užraktas būti sukurtos su neteisingais teises.
• Fiksuotas į darbo įvykių žurnale sukimosi klaidą, kuri gali sukelti ji niekada būti pasukti į "Windows uosto Condor.
• Ištaisyta potencialų lenktynių būklė į darbą įvykių žurnalo iniciacijos.
• Fiksuotas lenktynių sąlyga, kuri gali sukelti iš condor_collector ir condor_schedd apie uždarymo avariją.
• Fiksuotas klaidą kuriame condor_master Kartais mirti ir gaminti dprintf_failure.MASTER failą, kai arba iš naujo paleisti dėl naujų dvejetainiai laiko žymes arba kai prasidėjo iš pradžių.
• Ištaisyta atminties nutekėjimas, susijusią su MUILAS konfigūracijos kintamųjų, kurie įvyko, kai Condor buvo pertvarkoma.
• Fiksuotas klaidą kuriame pateikti aprašymas failą komanda cron_day_of_week buvo klaidingai ignoruojamas.
• Ištaisyta klaida, kurioje konfigūracijos kintamieji MAX_JOB_QUEUE_LOG_ROTATIONS ir GRIDMANAGER_SELECTION_EXPR būtų tinkamai neveikti paleidimo metu; jie tik dirbo po condor_reconfig.
• Ištaisyta klaida, kurioje MUILAS operacijos metu buvo neteisingai įstatinį su tarpusavio TL.
• Fixed "Windows platforma klaidą kuriame ne visi Condor demonai buvo pasitiki" Windows Firewall (anksčiau žinomas kaip interneto ryšio užkarda arba ICF).
• Fiksuotas išjungimas lenktynių sąlyga, kad condor_master susijusius su didelio prieinamumo demonų.
• Fiksuotas klaidą kuriame Condor demonas neteisingai nustatė ji paleisti iš lizdo aprašais.
• Fiksuotas klaidą kur condor_schedd būtų blokuoti labai ilgą laiką, o bando prisijungti prie žemyn Checkpoint serveryje. Dabar condor_schedd darys blokavimas prisijungti su pauzės į kontrolės punkto serveryje konfigūruojama skaičių sekundžių. Jei prijungti nepavyksta, condor_schedd įdėsiu moratoriumą jungiantis prie kontrolės punkto serverio, kol konfigūruojama moratoriumas laikotarpis praeina. Konfigūracijos failas kintamieji, kurie apibūdina šią problemą yra aprašyta aukščiau.
• Pasikeitė patikrinkite, condor_dagman daro kitiems condor_dagman atvejais veikia tos pačios dag, jei ji nustato užrakto failas paleidžiant. Dabar, jei condor_dagman nėra tikras, ar kitą DAGMan yra gyvas, jis ir toliau, o ne išeinant.
• Ištaisyta didžiąją failo deskriptorius nutekėjimas į gandro demonas.
• Fiksuotas klaidą kuriame sėkmingai Stork pervedimai buvo pažymėtas kaip nepavyko.
• Fiksuotas skaitant blogai suformatuotas renginius neįprasta atminties nutekėjimas vartotojo renginio žurnalo failas skaitymo kodą.
• Fiksuotas klaidą kuriame keli mašina ClassAds į condor_collector su tuo pačiu pavadinimu, tačiau skirtingų StartdIPAddr požymių reikšmės, sukeltų condor_negotiator norite išeiti su klaida. Tai neįprasta, ir neturėtų atsitikti tipiškas Condor montavimas. Labiausiai tikėtina priežastis yra naudojant condor_advertise reklamuoti užsakymą ClassAds už tinklo piršlybos.
• Ištaisyta klaida, kuri sukėlė condor_dagman pagrindiniam sąvartyną, jeigu visi pateikti bandymai nepavyko dėl DAG mazgas, kurio POST scenarijų. Ši klaida gyvuoja nuo Condor versija 7.1.4.
• Fiksuotas Atminties nutekėjimas į condor_schedd, kuris įvyko, kai buvo naudojama konfigūracija kintamasis NEGOTIATOR_MATCH_EXPRS.
• Fiksuotas Windows platformos kodą, kuris gydo scenarijus, kaip vykdomąjį klaidą. Nežinomas failo plėtiniai buvo traktuojamas kaip klaida, o ne kaip "Windows vykdomąjį.
• condor_job_router dabar teisingai nustato ClassAd atributas EnteredCurrentStatus į dabartinį laiką kurdami naują nukreipiami darbą. Anksčiau ji nukopijuoti šį atributą iš originalaus darbo.
• condor_job_router skleidžia palankesnę žurnalo pranešimą, kai ji pastebi, kad nukreipiamas užduoties kopija buvo pašalintas.
• nustatyti buvo numatyti problema vertinama 7.3.1, kurioje Condor demonai naudojant PKV prijungti prie kitų Condor demonais būtų kartais vartoja daug procesoriaus laiko be priežasties.
• Fiksuotas retas sugedus klaidą kuriame bando prisijungti per CCB į laukimo būsenos gali likti neribotą laiką.
• Unix tik klaidą sukelia Condor demonai nesugeba pradėti, jei MAX_FILE_DESCRIPTORS buvo sukonfigūruotas didesnis nei dabartinis sunkaus ribos paveldėjo Condor. Jei Condor veikia kaip root, tai nebėra atveju.
• condor_gridmanager dabar reklamuoja tinklų ClassAds tinkamai, kai yra keli condor_collector demonai.
• Naudodami condor_q -xml ir -format kartu apriboti ir ClassAd skaičius atributus grįžo į užklausą, XML konteineris žyma nebuvo sukurtas.
Tai yra fiksuotas, bet dabar pageidaujamą būdas apriboti grįžo atributus yra naudoti condor_q pasirinkimo -attributes.
• Fiksuotas klaidą kuriame Unix condor_master nepavyko bandant iš naujo save, jei konfigūracija kintamasis MASTER_LOCK buvo apibrėžta, arba jei condor_master buvo remiamasi su -t variantą. Ši klaida gyvuoja nuo 7,0 serijos, ir tikėtina, gyvuoja daug ilgiau, nei nurodyta.
• Fiksuotas reikšmingas Atminties nutekėjimas į gahp_server. Tai nuotėkio buvo pateikti ankstesniuose Condor 7.3.x spaudai tik.
• Ištaisyta klaida, kuri gali sukelti pašalintas darbą, kuris vyko ir vėliau paleidžiami į tuščiosios eigos būseną.
• Globus jar failus platinami su x86-64 RHEL 5 RPM buvo sugadintas, todėl GT4 tinklelis tipo darbo žlugti. Tai buvo fiksuotas.

Kas naujo versijos 7.2.2:

• Pridėta visą uosto Condor į Debian 5.0 nuo x86 platforma.
• Pridėta nukirpti uosto Condor į Debian 5.0 remiantis x86_64 platforma.
• Pridėta -DumpRescue komandų eilutės vėliava condor_dagman ir condor_submit_dag. Ši vėliava yra skirti daugiausia bandymų.
• Pridėta parama -debug galimybe į condor_qedit.
• Darbo Router dabar naudoja laiko gabalas laikmatis periodiškai raiškos vertinimo, panašus į condor_schedd demonas. Vertinimo intervalas yra kontroliuojama konfigūracijos kintamojo PERIODIC_EXPR_INTERVAL ir pagal nutylėjimą 60 sekundžių, tuo pačiu numatytąją vertę, kurią naudoja condor_schedd demonas.
• Darbo Router dabar iš naujo šaltinio darbą, jei sugenda, kai atnaujinimo condor_schedd demonas periodiškai išraiška, įvertinta, kad Tiesa. Darbo periodinės išraiškas reikėtų vėl įvertinta šiek tiek laiko, kad ateityje su sėkmingo atnaujinimo.

Kas naujo versijos 7.2.0:.

• pagrindinis bruožas patobulinimai

Kas naujo versijos 7.0.5:

• Ši laida yra daug bugfixes ir kai tobulinti klaidą tvarkymas vietinės visatos vietų.
• Atkreipkite dėmesį, kad kai kurie iš pataisymų yra saugumas susijusių; todėl vietos turėtų arba atnaujinti ar apriboti leidimus, kas yra leidžiama pateikti Condor darbo vietų patikimų vartotojų.