{"id":8657,"date":"2021-03-26T12:27:43","date_gmt":"2021-03-26T11:27:43","guid":{"rendered":"https:\/\/blog.rwth-aachen.de\/itc\/?p=8657"},"modified":"2023-05-17T11:50:44","modified_gmt":"2023-05-17T09:50:44","slug":"archivmigration-der-grosse-umzug-archivierter-daten","status":"publish","type":"post","link":"https:\/\/blog.rwth-aachen.de\/itc\/2021\/03\/26\/archivmigration-der-grosse-umzug-archivierter-daten\/","title":{"rendered":"Archivmigration \u2013 der gro\u00dfe Umzug archivierter Daten"},"content":{"rendered":"<div class=\"twoclick_social_bookmarks_post_8657 social_share_privacy clearfix 1.6.4 locale-de_DE sprite-de_DE\"><\/div><div class=\"twoclick-js\"><script type=\"text\/javascript\">\/* <![CDATA[ *\/\njQuery(document).ready(function($){if($('.twoclick_social_bookmarks_post_8657')){$('.twoclick_social_bookmarks_post_8657').socialSharePrivacy({\"txt_help\":\"Wenn Sie diese Felder durch einen Klick aktivieren, werden Informationen an Facebook, Twitter, Flattr, Xing, t3n, LinkedIn, Pinterest oder Google eventuell ins Ausland \\u00fcbertragen und unter Umst\\u00e4nden auch dort gespeichert. N\\u00e4heres erfahren Sie durch einen Klick auf das <em>i<\\\/em>.\",\"settings_perma\":\"Dauerhaft aktivieren und Daten\\u00fcber-tragung zustimmen:\",\"info_link\":\"http:\\\/\\\/www.heise.de\\\/ct\\\/artikel\\\/2-Klicks-fuer-mehr-Datenschutz-1333879.html\",\"uri\":\"https:\\\/\\\/blog.rwth-aachen.de\\\/itc\\\/2021\\\/03\\\/26\\\/archivmigration-der-grosse-umzug-archivierter-daten\\\/\",\"post_id\":8657,\"post_title_referrer_track\":\"Archivmigration+%E2%80%93+der+gro%C3%9Fe+Umzug+archivierter+Daten\",\"display_infobox\":\"on\"});}});\n\/* ]]> *\/<\/script><\/div><p><div id=\"attachment_8663\" style=\"width: 310px\" class=\"wp-caption alignright\"><img loading=\"lazy\" decoding=\"async\" aria-describedby=\"caption-attachment-8663\" class=\"wp-image-8663 size-medium\" src=\"https:\/\/blog.rwth-aachen.de\/itc\/files\/2021\/03\/Archiv-300x191.jpg\" alt=\"\" width=\"300\" height=\"191\" srcset=\"https:\/\/blog.rwth-aachen.de\/itc\/files\/2021\/03\/Archiv-300x191.jpg 300w, https:\/\/blog.rwth-aachen.de\/itc\/files\/2021\/03\/Archiv-1024x653.jpg 1024w, https:\/\/blog.rwth-aachen.de\/itc\/files\/2021\/03\/Archiv-768x490.jpg 768w, https:\/\/blog.rwth-aachen.de\/itc\/files\/2021\/03\/Archiv-1536x980.jpg 1536w, https:\/\/blog.rwth-aachen.de\/itc\/files\/2021\/03\/Archiv-2048x1307.jpg 2048w\" sizes=\"auto, (max-width: 300px) 100vw, 300px\" \/><p id=\"caption-attachment-8663\" class=\"wp-caption-text\">Quelle: <a href=\" https:\/\/unsplash.com\/de\/fotos\/IEiAmhXehwE\">Unsplash<\/a><\/p><\/div><\/p>\n<p>Der <a href=\"https:\/\/help.itc.rwth-aachen.de\/service\/1hrjq9zv52gqa\">Service Archiv<\/a> erm\u00f6glicht RWTH-Mitarbeitenden Datenbest\u00e4nde auf einem Bandrobotersystem langfristig abzulegen. Das Archivieren von Daten auf diese Art und Weise dient dabei vor allem der Aufbewahrung von Datenbest\u00e4nden, die einmal abgelegt, auch in dieser Form langfristig gespeichert werden sollen.<br \/>\nIn der Vergangenheit wurden hier Datenbest\u00e4nde abgelegt, die vor allem Messergebnisse, abgeschlossene Projekte oder Projektschriften dokumentieren. Mit den <a href=\"https:\/\/blog.rwth-aachen.de\/itc\/2020\/03\/13\/verteilte-speicherinfrastruktur-fds\/\">Ver\u00e4nderungen in der F\u00f6rderlandschaft,<\/a> die u. a. auch das Nachhalten von Forschungsdaten neu denken und fordern, wird auch der Service Archiv neu gedacht. Dies liegt zum einen daran, dass das aktuelle Bestandsystem im Sommer 2022 au\u00dfer Betrieb genommen wird und zum anderen, dass die Notwendigkeit besteht, Daten zuk\u00fcnftig strukturiert vorzuhalten. Es ist also Zeit f\u00fcr eine Umstellung.<\/p>\n<p><!--more-->Aber keine Sorge, die Daten gehen nicht verloren: Alle Daten im bisherigen Archivsystem werden migriert, sodass auch zuk\u00fcnftig darauf zugegriffen werden kann. Was es mit dieser Archivmigration auf sich hat und was euch erwartet, erkl\u00e4ren wir euch in diesem Beitrag.<\/p>\n<h2>Technologiewechsel \u2013 von Band zum Objektspeicher<\/h2>\n<p>Aufgrund der <a href=\"https:\/\/blog.rwth-aachen.de\/itc\/2019\/12\/18\/stay-with-me-neue-konzepte-fuer-die-datensicherung\/\">Ver\u00e4nderungen in Technologie<\/a> und F\u00f6rderlandschaft werden die Archivdaten ab Sommer 2021 auf eine S3 Objektspeicherinfrastruktur migriert. Die Vorteile dieser Speicherinfrastruktur gegen\u00fcber dem bisher genutzten Bandrobotersystem sind nicht nur das einfache und schnelle Einliefern von Daten \u00fcber das S3-Protokoll, sondern auch der Zugriff auf die archivierten Daten. W\u00e4hrend der Retrieve \u2013 also das Einholen der archivierten Daten \u2013 bisher recht aufw\u00e4ndig war, wird dies k\u00fcnftig bequemer und effizienter. Dar\u00fcber hinaus wird die Sicherheit gegen\u00fcber Datenverlust deutlich erh\u00f6ht, aufgrund der geografischen Verteilung der Speicherorte (Stichwort Georedundanz).<\/p>\n<h2>Archiv \u2013 eine Speicherst\u00e4tte vielf\u00e4ltiger Daten<\/h2>\n<p>Mit der fortschreitenden Digitalisierung und der stetig steigenden Vielfalt von Daten, wachsen nicht nur Datenmengen, sondern auch die Anforderungen an das langzeitige Vorhalten ebenjener. Wir alle kennen es: Wenn wir keine Struktur auf unseren speichernden Medien oder Ger\u00e4ten h\u00e4tten, w\u00fcrde sich das Wiederfinden wesentlich schwieriger gestalten, ganz zu schweigen vom<\/p>\n<p>Bearbeiten, Teilen und Sichten der Daten. Das Archiv, wie wir es kennen, beinhaltet auf den vielen Archivknoten Daten aus Forschung, Lehre und Verwaltung ohne \u00fcbergeordnete Sortierkriterien und ohne Qualifizierung bzw. Klassifizierung. Dies soll sich mit der Migration \u00e4ndern, die diese Gelegenheit bietet.<\/p>\n<p>Einzig und allein die Person, die die Daten archiviert hat, wei\u00df im besten Falle noch, worum es sich dabei handelte. Dies setzt auf Seiten der Nutzenden voraus, dass sie selbst eine \u00dcbersicht pflegen, die Aufschluss \u00fcber archivierte Daten liefert oder den \u00dcberblick behalten. Mit der Migration\u00a0 werden diese wichtigen Informationen in Form von Metadaten direkt mit dem zu archivierenden Bestand abgelegt.<\/p>\n<div id=\"attachment_8659\" style=\"width: 736px\" class=\"wp-caption aligncenter\"><img loading=\"lazy\" decoding=\"async\" aria-describedby=\"caption-attachment-8659\" class=\"wp-image-8659\" src=\"https:\/\/blog.rwth-aachen.de\/itc\/files\/2021\/03\/Technische-Planung.png\" alt=\"\" width=\"726\" height=\"342\" srcset=\"https:\/\/blog.rwth-aachen.de\/itc\/files\/2021\/03\/Technische-Planung.png 992w, https:\/\/blog.rwth-aachen.de\/itc\/files\/2021\/03\/Technische-Planung-300x141.png 300w, https:\/\/blog.rwth-aachen.de\/itc\/files\/2021\/03\/Technische-Planung-768x362.png 768w\" sizes=\"auto, (max-width: 726px) 100vw, 726px\" \/><p id=\"caption-attachment-8659\" class=\"wp-caption-text\">\u00dcbersicht der technischen Planung des Migrationsprozesses von Archivdaten bis zu den Zielorten Coscine und Digitalarchiv <br \/>Quelle: Eigene Darstellung<\/p><\/div>\n<h2>Wohin werden die Daten migriert?<\/h2>\n<p>Hier kommen die dedizierten Speicher <a href=\"https:\/\/blog.rwth-aachen.de\/itc\/2021\/02\/24\/der-neue-forschungsdaten-storage-ist-in-betrieb\/\">Coscine<\/a> und Digitalarchiv ins Spiel sowie die Eingabe von Metadaten. Mit dem Migrationsvorhaben werden die aktuellen Archivknotenbesitzenden dazu aufgerufen f\u00fcr die zu migrierenden Archivknoten Metadaten einzugeben: Anhand der Metadaten werden die bestehenden Archivknoten klassifiziert. Die Nutzenden entscheiden somit, ob es sich um Forschungsdaten handelt, die nach Coscine mit dem entsprechenden Metadatensatz migriert werden, oder ob das Digitalarchiv f\u00fcr sonstige Daten z.B. aus Lehre und Verwaltung der richtige Speicherort ist. Sind die Metadaten einmal erfasst, werden Sie zun\u00e4chst zwischengespeichert und im Migrationsprozess mit den zu migrierenden Daten in einem sogenannten Bucket im Zielsystem zusammengef\u00fchrt und abgelegt.<\/p>\n<h2>Migrationsprojekt mit Beteiligungsstruktur<\/h2>\n<p>Diese umfangreiche Umstellung bedarf einer gut strukturierten Organisation \u2013 sowohl innerhalb der RWTH Aachen als auch im IT Center. Aus diesem Grund wurde das Projekt \u201eArchivmigration\u201c ins Leben gerufen. Das gesamte Projekt wurde auf f\u00fcnf Teilprojekte verteilt, bei denen vor allem die Abteilungen <a href=\"https:\/\/www.itc.rwth-aachen.de\/cms\/it-center\/IT-Center\/Profil\/Organisationsstruktur\/~stymr\/Abteilungen\/#pit\">IT-Prozessunterst\u00fctzung Forschung &amp; Lehre (IT-PFL)<\/a> und <a href=\"https:\/\/www.itc.rwth-aachen.de\/cms\/IT-Center\/IT-Center\/Profil\/Organisation\/~esvd\/Abteilungen\/#sub\">Systeme &amp; Betrieb (SuB)<\/a> beteiligt sind.<\/p>\n<p>Neben der technischen Migration der Archivknoten, vom Archivsystem auf die neue Infrastruktur, wird auch flei\u00dfig im Bereich Software entwickelt. Zum einen wird <a href=\"https:\/\/blog.rwth-aachen.de\/itc\/2020\/06\/10\/sevire_kommt\/\">SeViRe<\/a> um die Funktionen rund um das Digitalarchiv erweitert, w\u00e4hrend zeitgleich die Entwicklung zur Metadatenprozessierung vorangetrieben wird. Mit <a href=\"https:\/\/help.itc.rwth-aachen.de\/service\/b2b7729fd93f4c7080b475776f6b5d87\/\">Coscine<\/a> konnten die Kolleginnen und Kollegen bereits f\u00fcr die Archivierung von Forschungsdaten ma\u00dfgebliche Vorbereitungen treffen.<\/p>\n<p>Die technisch-prozessualen Teilprojekte werden durch ein dediziertes Kommunikationsteilprojekt erg\u00e4nzt. Hier liegt der Fokus auf der Bereitstellung von Informationen an Nutzende und Supportleistende. Im Zuge dessen wurden bereits <a href=\"https:\/\/www.itc.rwth-aachen.de\/cms\/IT-Center\/IT-Center\/Veranstaltungen\/RWTH-Admin-Runde\/~lqnzo\/2021\/\">Informationsveranstaltungen<\/a> organisiert, um Administrierende und Power User umfassend zu informieren. Erg\u00e4nzend wurde auch eine Interessenvertretung initiiert, in der sowohl Erfahrungswerte von Archivnutzenden Eingang finden, als auch Anforderungen, Erwartungen und W\u00fcnschen Geh\u00f6r geschenkt wird, um diese ber\u00fccksichtigen zu k\u00f6nnen.<\/p>\n<p>Wie ihr sicher vermutet, war dieser Beitrag also nur der Startschuss zur Archivmigration. Wenn ihr auf dem Laufenden bleiben wollt, folgt unserem Hashtag #ArMiRWTH. Wir informieren euch, sobald wir Neuigkeiten haben.<\/p>\n<p>&nbsp;<\/p>\n<p>Verantwortlich f\u00fcr die Inhalte dieses Beitrags sind <a href=\"https:\/\/www.itc.rwth-aachen.de\/cms\/IT-Center\/IT-Center\/Team\/~epvp\/Mitarbeiter-CAMPUS-\/?gguid=0x741F3A251551044BB9047AF649DED3B4&amp;allou=1\">Lukas C. Bossert<\/a> und <a href=\"https:\/\/www.itc.rwth-aachen.de\/cms\/IT-Center\/IT-Center\/Team\/~epvp\/Mitarbeiter-CAMPUS-\/?gguid=0x076EFD6C62ADCF4D868FB7134A14B07C&amp;allou=1&amp;lidx=1\">Nicole Filla<\/a>.<\/p>\n<p>&nbsp;<\/p>","protected":false},"excerpt":{"rendered":"<p>Der Service Archiv erm\u00f6glicht RWTH-Mitarbeitenden Datenbest\u00e4nde auf einem Bandrobotersystem langfristig abzulegen. Das Archivieren von Daten auf diese Art und Weise dient dabei vor allem der Aufbewahrung von Datenbest\u00e4nden, die einmal [&hellip;]<\/p>\n","protected":false},"author":2177,"featured_media":8663,"comment_status":"open","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"c2c_always_allow_admin_comments":false,"footnotes":""},"categories":[306,316,315],"tags":[42,43,48,46,44,47,45],"class_list":["post-8657","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-ankuendigungen","category-projekte-kooperationen","category-services-support","tag-archiv","tag-archivmigration","tag-armirwth","tag-coscine","tag-daten","tag-sevire","tag-speicher"],"aioseo_notices":[],"_links":{"self":[{"href":"https:\/\/blog.rwth-aachen.de\/itc\/wp-json\/wp\/v2\/posts\/8657","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/blog.rwth-aachen.de\/itc\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/blog.rwth-aachen.de\/itc\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/blog.rwth-aachen.de\/itc\/wp-json\/wp\/v2\/users\/2177"}],"replies":[{"embeddable":true,"href":"https:\/\/blog.rwth-aachen.de\/itc\/wp-json\/wp\/v2\/comments?post=8657"}],"version-history":[{"count":19,"href":"https:\/\/blog.rwth-aachen.de\/itc\/wp-json\/wp\/v2\/posts\/8657\/revisions"}],"predecessor-version":[{"id":15633,"href":"https:\/\/blog.rwth-aachen.de\/itc\/wp-json\/wp\/v2\/posts\/8657\/revisions\/15633"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/blog.rwth-aachen.de\/itc\/wp-json\/wp\/v2\/media\/8663"}],"wp:attachment":[{"href":"https:\/\/blog.rwth-aachen.de\/itc\/wp-json\/wp\/v2\/media?parent=8657"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/blog.rwth-aachen.de\/itc\/wp-json\/wp\/v2\/categories?post=8657"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/blog.rwth-aachen.de\/itc\/wp-json\/wp\/v2\/tags?post=8657"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}