Wie geht ihr mit den Datenmengen um

Bei mir läuft der Volkszähler jetzt 8 Monate inzwischen sind ca. 2GB Daten zusammengekommen.
Das Anzeigen der Daten für Tag, Woche funktioniert gut aber Monat und Jahr dauert schon arg lange manchmal geht bei Jahr auch gar nix.
Den Artikel zum Umgang mit den Datenmengen auf der Volkszähler Seite habe ich gelesen
und erstmal nur die Aggregation der Mittelware am Laufen.

Ich würde gerne eure Meinungen / Erfahrungen zum Umgang mit den Daten hören
wie macht ihr das so
welche Mechanismen setzt ihr ein
behaltet ihr alle Daten oder löscht komprimiert ihr sie

bin gespannt auf eure Antworten

Ja wie gesagt ich habe auch nach der Anleitung http://wiki.volkszaehler.org/howto/datenmengen die Datenaggregation aktiviert.

ich habe 2 Kanäle aktiv,
Kanal 1 = Hager EHz (sendet sml Protokoll)
Kanal 2 = 1-wire Temperatur Sensor, hier erfasse ich alle 1 Minute einen Messwert. Das werde ich aber noch auf 5 min. ändern.

@ Stefan nur 500MB über 1 Jahr und mit 17 Kanälen erstaunlich, was für Stromzähler hast du?

Saftwerk CPU Last liegt normal zwischen 5 und 10% wenn aber die (Raspberry Modell B übertatet auf 950Mhz)
Daten aus der SQL geladen werden geht es schon auf 90% hoch.
Was die Messwerte angeht kann ich dir nicht sagen das hängt
ja hauptsächlich vom Zähler ab, habe mal gelesen das bei
EHz Zählern alle 4 Sekunden der Zählerstand ausgegeben wird (Angabe ohne Gewähr).

Hier nochmal die Frage an die anderen User im Forum wie sind eure Erfahrungen welche Methoden setzt ihr ein, Datenaggregation, Daten Löschen Hart, Weich oder was es sonst noch so gibt, können evtl. Methoden kombiniert werden.
Wenn hier erfahrene Leute etwas beitragen können wäre das eine große Hilfe für andere die sich neu mit der Thematik beschäftigen.
Oder seid ihr der Meinung dass mit der Anleitung http://wiki.volkszaehler.org/howto/datenmengen schon alles gesagt ist?

Hallo JAU mich würde interessieren welche Hardware du einsetzt welche Zähler verbaut
wie groß die Datenbank ist und der Aufzeichnungszeitraum um mal ein paar Anhaltspunkte zu bekommen

Ich nutze einen schnellen USB-Stick satt der SD
Parallel zum Rpi habe ich das Frontend noch auf einem Webhoster laufen (Bplaced).

Die Anzeige der Daten auf dem Rpi für Stunde Tag Woch funktioniert ja gut aber Monat und Jahr dauert.
Über den Webhoster funktioniert das deutlich schneller aber die Jahresübersicht geht nicht da kommt immer ein Network Error.

Ich bin jetzt etwas Ratlos wie ich weiter vorgehen soll denn in Zukunft sollen ja noch mindestens 2 Stromzähler und vielleicht der Gaszähler dazu kommen.
Da sehe ich dann schwarz für den Rpi, alles auf den Webhoster gefällt mir auch nicht habe das nur zum Testen eingerichtet und jetzt extra einen PC mit genug Leistung ist auch nicht das Gelbe.

mfg Esd30

Zitat von LumpiStefan

Überträgst du auch die Aggregate-Tabellen oder versucht du auf dem Hoster zu Aggregieren?

Aggregieren auf dem Hoster geht leider nicht der Hoster ünterstützt keine Cronjobs.
Aggregate-Tabellen übertragen wüsste nicht wie das geht.

Zitat von LumpiStefan

Wenn du keinen speziellen Stick genommen hast bleibt die Ausfallwahrscheinlichkeit sehr hoch!

ja ich weiß, habe noch irgendwo eine 128GB Festplatte aus einem alten Laptop rumliegen wenn der Stick versagt werde ich es mit der ausprobieren.

ich kenn die emh Zähler nicht bei mir ist ein Hager verbaut der schickt mir ca. alle 4 Sekunden einen Messwert, glaube das ist mein Problem
ich habe in den Tabellen
Data = ca. 30 Mio.
Entities = 12
Entities_in_aggregator = 0
Proberties = 85
Aggregate = 654729 Datensätze

Die Datenbank ist aktuell 2,4 Gb groß

Zitat von LumpiStefan

3 Zählerstände im Minutentakt seit Anfang 2013

die emh Zähler auch ?
ich nehme an du hast in der vzlogger.conf für die emh Zähler dann aggtime aktiviert ?