Store daily, weekly, monthly and yearly statistics about dsmr-reader HOT 9 CLOSED

Original comment by Dennis Siemensma (Bitbucket: dennissiemensma, GitHub: dennissiemensma):

@JeroenPeters ook deze change is klaar en voegt eindelijk heel wat visuele dingen toe!

• Dagstatistieken (totalen)
• Trends, voorlopig nog op uur basis. (dus in welke uren je gemiddelde verbruik zit)
• ChartJS update, waardoor een hoop issues gefixt zijn. Zoals tooltips op data en een responsive design (volledige breedte nu + resize)

Voor het uitrollen is het wel handig om even je compactor/backend proces uit te zetten. Statistieken over alle gemeten dagen worden namelijk herberekend in de migratie (duurde bij mij ongeveer een minuut).
Een database dump is niet perse nodig, maar wel aan te raden. Als eerdergenoemde misgaat door contraints of iets, kun je het makkelijker terugzetten dan zelf graven in alle data.

Check ook even of je management commands in supervisnor nog bijgewerkt moeten worden (qua config). Dit is bij de vorige grote refactoreslag ook veranderd, maar ze zijn deprecated (nog) compatible. Deze processen zijn alleen nodig:

• dsmr_backend (ipv dsmr_stats_compactor, blijft los proces maar verplaatst naar eigen app)
• dsmr_datalogger (ipv dsmr_stats_datalogger, vervangt alle backend zooi)
• dsmr_webinterface (naam maakt niet zoveel uit, is toch gunicorn entrypoint en daarmee onveranderd)

from dsmr-reader.

Original comment by Dennis Siemensma (Bitbucket: dennissiemensma, GitHub: dennissiemensma):

Merged into default! Rolling to production here before marking stable.

from dsmr-reader.

Original comment by Dennis Siemensma (Bitbucket: dennissiemensma, GitHub: dennissiemensma):

Made quite some progress, tomorrow GUI I hope.

from dsmr-reader.

Original comment by Dennis Siemensma (Bitbucket: dennissiemensma, GitHub: dennissiemensma):

Django 1.9 seems to run fine, but I do not want to switch yet, as 1.8 is LTS.

from dsmr-reader.

Original comment by Dennis Siemensma (Bitbucket: dennissiemensma, GitHub: dennissiemensma):

Hmm I want this but only since Django 1.9: https://docs.djangoproject.com/en/dev/ref/models/querysets/#date

from dsmr-reader.

Original comment by Dennis Siemensma (Bitbucket: dennissiemensma, GitHub: dennissiemensma):

This will also greatly speed up the rendering of the history page.

from dsmr-reader.

Original comment by Dennis Siemensma (Bitbucket: dennissiemensma, GitHub: dennissiemensma):

ElectricityStatistics should focus on usage only. Other data, such as long_power_failure_count, should be read from the last telegram reading anyway. ElectricityStatistics is just an expensive caching mechanism, now.

from dsmr-reader.

Original comment by Dennis Siemensma (Bitbucket: dennissiemensma, GitHub: dennissiemensma):

The source data should just be the daily consumption, stored in the database, while having trends plot out of them.

from dsmr-reader.

Original comment by Dennis Siemensma (Bitbucket: dennissiemensma, GitHub: dennissiemensma):

Ik heb het compacten in ieder geval, voor electriciteit, nu op minuut-basis ipv seconde-basis. Hiervoor mag een extra argument meegegeven worden aan het compacter-command + een (handmatige) call met --purge.

Dit is in ieder geval al een voorzet voor bovenstaande, diepgaandere statistieken.

from dsmr-reader.