Differences between revisions 1 and 9 (spanning 8 versions)
Revision 1 as of 2018-08-27 08:54:44
Size: 1209
Comment:
Revision 9 as of 2018-08-28 07:32:54
Size: 1336
Comment:
Deletions are marked like this. Additions are marked like this.
Line 7: Line 7:
Es wurde analysiert welche Daten gelöscht werden können ohne das die Statistiken von [macbat|https://www-zeuthen.desy.de/macbat/mon/] beeinträchtigt wird. Es wurde analysiert welche Daten gelöscht werden können ohne das die Statistiken von [[macbat|https://www-zeuthen.desy.de/macbat/mon/]] beeinträchtigt wird.
Line 12: Line 12:
uge_accounting.accounting 28531 MB von 9366 MB auf geschrumpft.
pax_accounting.accounting von 1054 MB auf 42 MB geschrumpft.
 * uge_accounting.accounting 28531 MB von 7172 MB auf geschrumpft.
 * pax_accounting.accounting von 1054 MB auf 42 MB geschrumpft.
 * sge_accounting 24915 MB von 5309 MB auf geschrumpft.
 * pax82_accounting 322 MB von 202 MB auf geschrumpft.
Line 16: Line 18:
== weiterführende Links == 
Alle SQLs, [Dashboards UGE|http://dasher.ifh.de:3001/d/v2CYmPpmz/uge-auslastung?orgId=1&from=now-6M&to=now],[Dashboards Mysql|http://dasher.ifh.de:3001/d/giGgrTimx/mysql-innodb-metrics-fixed?refresh=1m&orgId=1] und Ansible Scripte liege im [GIT|https://stash.desy.de/projects/ZNMON/repos/sge-statistic/browse]
== weiterführende Links ==
Alle SQLs, [[http://dasher.ifh.de:3001/d/v2CYmPpmz/uge-auslastung?orgId=1&from=now-6M&to=now|Dashboards-UGE]], [[http://dasher.ifh.de:3001/d/giGgrTimx/mysql-innodb-metrics-fixed?refresh=1m&orgId=1|Dashboards-Mysql]] und Ansible Scripte liege im [[https://stash.desy.de/projects/ZNMON/repos/sge-statistic/browse|GIT]]

PAX und UGE Cleanup

Ziel

Beim Umzug der Datenbank von Venus aus Pluto sollen die Datenbanken von PAX und UGE verkleintert werden.

Vorgehen

Es wurde analysiert welche Daten gelöscht werden können ohne das die Statistiken von https://www-zeuthen.desy.de/macbat/mon/ beeinträchtigt wird. Dabei wurden festgestellt das die Daten aus den Tabellen uge_accounting.accounting und pax_accounting.accounting die meisten Daten enthalten aber nicht für die Analyse von macbat benötigt werden. Deshalb werden maximal 1 Jahr der Daten aufgehoben. Ältere Daten werden exportiert und können bei bedarf wieder eingespielt werden.

Ergebnis

  • uge_accounting.accounting 28531 MB von 7172 MB auf geschrumpft.
  • pax_accounting.accounting von 1054 MB auf 42 MB geschrumpft.
  • sge_accounting 24915 MB von 5309 MB auf geschrumpft.
  • pax82_accounting 322 MB von 202 MB auf geschrumpft.

Der Export dauert rund 5 Minuten das Löschen rund 30 Minuten.

Alle SQLs, Dashboards-UGE, Dashboards-Mysql und Ansible Scripte liege im GIT

UGE_PAX_cleanup (last edited 2018-08-28 07:32:54 by JanPhilippBolle)