Differences between revisions 8 and 9
Revision 8 as of 2018-08-27 14:46:39
Size: 1334
Comment:
Revision 9 as of 2018-08-28 07:32:54
Size: 1336
Comment:
Deletions are marked like this. Additions are marked like this.
Line 7: Line 7:
Es wurde analysiert welche Daten gelöscht werden können ohne das die Statistiken von [macbat|https://www-zeuthen.desy.de/macbat/mon/] beeinträchtigt wird. Es wurde analysiert welche Daten gelöscht werden können ohne das die Statistiken von [[macbat|https://www-zeuthen.desy.de/macbat/mon/]] beeinträchtigt wird.

PAX und UGE Cleanup

Ziel

Beim Umzug der Datenbank von Venus aus Pluto sollen die Datenbanken von PAX und UGE verkleintert werden.

Vorgehen

Es wurde analysiert welche Daten gelöscht werden können ohne das die Statistiken von https://www-zeuthen.desy.de/macbat/mon/ beeinträchtigt wird. Dabei wurden festgestellt das die Daten aus den Tabellen uge_accounting.accounting und pax_accounting.accounting die meisten Daten enthalten aber nicht für die Analyse von macbat benötigt werden. Deshalb werden maximal 1 Jahr der Daten aufgehoben. Ältere Daten werden exportiert und können bei bedarf wieder eingespielt werden.

Ergebnis

  • uge_accounting.accounting 28531 MB von 7172 MB auf geschrumpft.
  • pax_accounting.accounting von 1054 MB auf 42 MB geschrumpft.
  • sge_accounting 24915 MB von 5309 MB auf geschrumpft.
  • pax82_accounting 322 MB von 202 MB auf geschrumpft.

Der Export dauert rund 5 Minuten das Löschen rund 30 Minuten.

Alle SQLs, Dashboards-UGE, Dashboards-Mysql und Ansible Scripte liege im GIT

UGE_PAX_cleanup (last edited 2018-08-28 07:32:54 by JanPhilippBolle)