Re: [vz-users] MQTT -> vzlogger -> volkszaehler
;,
"to": "b442f280-201e-11e9-82db-ab2edac365b6",
"tot": "str"
},
{
"t": "set",
"p": "timestamp",
"pt": "msg",
"to": "",
"tot": "date"
}
],
"action": "",
"property": "",
"from": "",
"to": "",
"reg": false,
"x": 540,
"y": 120,
"wires": [
[
"477fcd31.ba8ce4"
]
]
},
{
"id": "eb1003e5.ac1e5",
"type": "delay",
"z": "e6aac129.31a968",
"name": "Random delay",
"pauseType": "random",
"timeout": "5",
"timeoutUnits": "seconds",
"rate": "1",
"nbRateUnits": "",
"rateUnits": "second",
"randomFirst": "20",
"randomLast": "30",
"randomUnits": "seconds",
"drop": false,
"x": 340,
"y": 120,
"wires": [
[
"9bdf4d43.50b848"
]
]
},
{
"id": "6fa22a4c.f248ec",
"type": "debug",
"z": "e6aac129.31a968",
"name": "Debug Orginal Message",
"active": false,
"tosidebar": true,
"console": false,
"tostatus": false,
"complete": "payload",
"targetType": "msg",
"x": 370,
"y": 60,
"wires": []
},
{
"id": "32034671.9b75ea",
"type": "mqtt-broker",
"z": "",
"name": "Test Raspi4",
"broker": "192.168.1.62",
"port": "1883",
"clientid": "",
"usetls": false,
"compatmode": false,
"keepalive": "60",
"cleansession": true,
"birthTopic": "",
"birthQos": "0",
"birthPayload": "",
"closeTopic": "",
"closeQos": "0",
"closePayload": "",
"willTopic": "",
"willQos": "0",
"willPayload": ""
}
]
--
Thomas Besse
57250 Netphen e-mail: tho...@fambesse.de
--
-Ursprüngliche Nachricht-
Von: volkszaehler-users Im
Auftrag von joekok...@epios.eu
Gesendet: Donnerstag, 9. Januar 2020 22:26
An: volkszaehler-users@demo.volkszaehler.org
Betreff: Re: [vz-users] MQTT -> vzlogger -> volkszaehler
Hallo Thomas,
das klingt sehr interessant. Ich bin zum Schluss gekommen, dass es keinen Sinn
macht einen Wrapper um mosquitto_sub zu schreiben. Da ist die Zeit dann doch
besser mit Red-Node oder etwas ähnlichen investiert.
Da ich komplett neu bei Red-Node bin, wäre ich um deine Beispielkonfiguration
sehr dankbar.
Liebe Grüße
Joe
On 06.01.2020 10:45, tho...@fambesse.de wrote:
> Hi Joe,
> ich hab das bei mir umgesetzt mit folgender Config:
> ESP8266-01(MQTT)--> Mosquitto-->Node-RED Node-Red ist so konfiguriert
> das er MM2 und Volkszähler und Grafana/Influx befüllt bzw befüttert.
>
> Ich kann dir wenn du Interesse hast das etwas detaillierter aufdröseln bzw
> dir meine Node-Red config geben. Die Transferleistung ESP8266 nach Tasamoa
> müsstest du ggf. selbst lösen.
> Diese steht bei mir erst noch an da ich nicht tasamoa sondern Shelly nutze
> aber noch keine Zeit für die MQTT Einbindung hatte.
>
> Beste Grüße
> Thomas
>
> -Ursprüngliche Nachricht-
> Von: volkszaehler-users
> Im Auftrag von
> Andreas Goetz
> Gesendet: Sonntag, 5. Januar 2020 21:44
> An: volkszaehler.org - users
>
> Betreff: Re: [vz-users] MQTT -> vzlogger -> volkszaehler
>
> Naja... wenn Du exec nutzen willst, warum nicht irgendwas in Verbindung mit
> mosquitto_sub? Sonst mal schnell selbst was coden, mqtt subscriber der in
> eine Datei schreibt, dann file Protokoll. Irgendsowas, wäre zu probieren...
>
> Viele Grüße, Andreas
>
>> Am 05.01.2020 um 21:14 schrieb joekok...@epios.eu:
>>
>> Vielen Dank für die schnelle Antwort! Es war mir klar, dass es keine
>> direkte Anbindung gibt.
>>
>> Mich würde interessieren, ob jemand schon irgendwas ähnliches gemacht
>> hat. Mosquitto -> X -> vzlogger -> volkszaehler
>>
>> Und welches Programm sich am ehesten dazu eignen würde.
>>
>> Ich denke an eine Art REST API, an welcher vzlogger mit exec Protokoll die
>> Daten dann einliest.
>>
>> Node-Red erscheint mir bei oberflächlicher Betrachtung eine etwas hohe
>> Einstiegshürde und vielleicht etwas zu umfangreich für die Problemstellung.
>> Aber diese Einschätzung kann auch falsch sein.
>>
>> Liebe Grüße,
>> Joe
>>
>>> On 1/5/20 8:57 PM, Andreas Goetz wrote:
>>> Die Funktion gibts nicht und ist aktuell nicht geplant. Ohne vzlogger wäre
>>> node-red Dein Freund.
>>> Viele Grüße, Andreas
>>>>> Am 05.01.2020 um 20:54 schrieb joekok...@epios.eu:
>>>>
>>>> Hallo,
>>>>
>>>> ich habe einige Sonoff Devices mit der open-source firmware tasmota
>>>> (https://github.com/arendst/Tasmota) geflashed und über Weihnachten
>>>> ausprobiert. Sie funktionieren bisher zuverlässig.
>>>>
>>>> Nun möchte ich die Sensordaten in Volkzaehler integrieren. Die beste Art
>>>> an die Senordaten (zum Beispiel der Last beim Sonoff POW) ist anscheinend
>>>> MQTT. Deshalb habe ich erstmals mit mosquitto rumprobiert.
>>>>
>>>> Hat jemand Erfahrung damit Daten aus MQTT topics durch vzlogger in die
>>>> Volkszaehler Datenbank zu bringen? (Tasmota -> Mosquitto -> X -> vzlogger
>>>> -> volkszaehler) Ist ein MQTT Client dafür am Besten geeignet? Macht das
>>>> bereits jemand?
>>>>
>>>> Für mich ist der "Umweg" über vzlogger wichtig, da ich die Buffer Funktion
>>>> von vzlogger bei Netzwerkausfällen nutzen möchte.
>>>>
>>>> Beste Grüße
>>>> Joe
>
Re: [vz-users] MQTT -> vzlogger -> volkszaehler
Hallo Thomas, > Am 09.01.2020 um 22:26 schrieb joekok...@epios.eu: > > [...] > Da ich komplett neu bei Red-Node bin, wäre ich um deine Beispielkonfiguration > sehr dankbar. > Mich würde die Konfiguration ebenfalls sehr interessieren. Vielen Dank und Gruß, Olli
Re: [vz-users] MQTT -> vzlogger -> volkszaehler
Hallo Thomas, das klingt sehr interessant. Ich bin zum Schluss gekommen, dass es keinen Sinn macht einen Wrapper um mosquitto_sub zu schreiben. Da ist die Zeit dann doch besser mit Red-Node oder etwas ähnlichen investiert. Da ich komplett neu bei Red-Node bin, wäre ich um deine Beispielkonfiguration sehr dankbar. Liebe Grüße Joe On 06.01.2020 10:45, tho...@fambesse.de wrote: Hi Joe, ich hab das bei mir umgesetzt mit folgender Config: ESP8266-01(MQTT)--> Mosquitto-->Node-RED Node-Red ist so konfiguriert das er MM2 und Volkszähler und Grafana/Influx befüllt bzw befüttert. Ich kann dir wenn du Interesse hast das etwas detaillierter aufdröseln bzw dir meine Node-Red config geben. Die Transferleistung ESP8266 nach Tasamoa müsstest du ggf. selbst lösen. Diese steht bei mir erst noch an da ich nicht tasamoa sondern Shelly nutze aber noch keine Zeit für die MQTT Einbindung hatte. Beste Grüße Thomas -Ursprüngliche Nachricht- Von: volkszaehler-users Im Auftrag von Andreas Goetz Gesendet: Sonntag, 5. Januar 2020 21:44 An: volkszaehler.org - users Betreff: Re: [vz-users] MQTT -> vzlogger -> volkszaehler Naja... wenn Du exec nutzen willst, warum nicht irgendwas in Verbindung mit mosquitto_sub? Sonst mal schnell selbst was coden, mqtt subscriber der in eine Datei schreibt, dann file Protokoll. Irgendsowas, wäre zu probieren... Viele Grüße, Andreas Am 05.01.2020 um 21:14 schrieb joekok...@epios.eu: Vielen Dank für die schnelle Antwort! Es war mir klar, dass es keine direkte Anbindung gibt. Mich würde interessieren, ob jemand schon irgendwas ähnliches gemacht hat. Mosquitto -> X -> vzlogger -> volkszaehler Und welches Programm sich am ehesten dazu eignen würde. Ich denke an eine Art REST API, an welcher vzlogger mit exec Protokoll die Daten dann einliest. Node-Red erscheint mir bei oberflächlicher Betrachtung eine etwas hohe Einstiegshürde und vielleicht etwas zu umfangreich für die Problemstellung. Aber diese Einschätzung kann auch falsch sein. Liebe Grüße, Joe On 1/5/20 8:57 PM, Andreas Goetz wrote: Die Funktion gibts nicht und ist aktuell nicht geplant. Ohne vzlogger wäre node-red Dein Freund. Viele Grüße, Andreas Am 05.01.2020 um 20:54 schrieb joekok...@epios.eu: Hallo, ich habe einige Sonoff Devices mit der open-source firmware tasmota (https://github.com/arendst/Tasmota) geflashed und über Weihnachten ausprobiert. Sie funktionieren bisher zuverlässig. Nun möchte ich die Sensordaten in Volkzaehler integrieren. Die beste Art an die Senordaten (zum Beispiel der Last beim Sonoff POW) ist anscheinend MQTT. Deshalb habe ich erstmals mit mosquitto rumprobiert. Hat jemand Erfahrung damit Daten aus MQTT topics durch vzlogger in die Volkszaehler Datenbank zu bringen? (Tasmota -> Mosquitto -> X -> vzlogger -> volkszaehler) Ist ein MQTT Client dafür am Besten geeignet? Macht das bereits jemand? Für mich ist der "Umweg" über vzlogger wichtig, da ich die Buffer Funktion von vzlogger bei Netzwerkausfällen nutzen möchte. Beste Grüße Joe
Re: [vz-users] MQTT -> vzlogger -> volkszaehler
Hi Claas, > On 7. Jan 2020, at 10:33, Claas H. Köhler wrote: > > Hallo Andreas, > > Ich wusste, dass es wenig Entwickler gibt, aber nicht, dass es im > Wesentlichen eine one man show ist. Respekt. Dafür hast Du ganz schön was > auf die Beine gestellt. Das zeichnet ein falsches Bild. VZ ist das Werk von Vielen und nicht nur Entwicklern. Ich bin erst seit 2012 dabei und v.a. bei Frontend/Middleware tätig und kümmere mich ein wenig um die Infrastruktur. > Verstehe ich Dich richtig, dass Du Dich in Zukunft eher auf die Kernkompetenz > „Messgeräte auslesen“ konzentrieren möchtest und die Datenbankfunktionalität > und Visualisierung eher mit Hilfe externer Lösungen wie Influx oder Grafana > anbieten möchtest ? Als wir anfingen gab es weder Grafana noch Influx. Heute würde ich gut überlegen ob ich ein Frontend nochmal entwickeln würde oder nicht vielleicht vorkonfigurierte Grafana Dashboards ausliefere. > Ich könnte mir schon vorstellen, das Projekt punktuell zu unterstützen, > soweit es meine momentan begrenzte Freizeit zulässt. In Anbetracht der > geringen Ressourcen, ist Dein Ansatz, sich auf das Kerngeschäft zu > konzentrieren, wahrscheinlich schlau. Gerne, schau worauf Du Lust hast: - CPP? Vzlogger, offene Issues gibts genug - Go? MBMD, Ingress, EVCC wären mögliche Hobbies (letzteres mein neues Projekt) - JS/UX? Frontent. Der Code ist grauenhaftes JQuery, da gibts heute mit vuejs etc viel schönere und wartbarere Lösungen Wenn Du irgendwo eine Einführung brauchst- gerne! Wenn Du eine neues Thema unter VZ starten möchtest- lass es uns hier diskutieren. > Kennst Du kotori (https://getkotori.org/docs/index.html > <https://getkotori.org/docs/index.html>) ? Sieht auf den ersten Blick vom > Konzept her ähnlich wie VZ aus. Trotz mondänem Web Auftritt anscheinend auch > nur ein Entwickler. Vielleicht ließe sich da eine Kooperation etablieren… Noch nicht. Auch so eine Kooperation will natürlich angeschoben werden ;) > > Viele Grüße > Claas Viele Grüße, Andreas > > > From: volkszaehler-users > [mailto:volkszaehler-users-boun...@demo.volkszaehler.org] On Behalf Of > Andreas Goetz > Sent: Monday, January 6, 2020 1:50 PM > To: volkszaehler.org - users > Subject: Re: [vz-users] MQTT -> vzlogger -> volkszaehler > > Hallo Claas! > > > On 6. Jan 2020, at 11:28, Claas H. Köhler <mailto:claa...@web.de>> wrote: > > Hallo, > > Ich finde das Thema sehr interessant. Bestünde Interesse hier in der > Gemeinde, die Logger Funktionalität von vzlogger (also das Schreiben in > die Datenbank über die Middleware API), auszulagern ? > > Ja. Tatsächlich hatte ich schonmal angefangen, vzlogger in seine Teile zu > zerlegen: > > - Datenaquise (aus den Geräten) > - Datenverteilung und -mapping > > Ersteres ist m.E. Kernfunktionalität, Letzteres eine Zusatzfunktion die wir > immer mehr ausgebaut haben, die aber eigenständig ist. Auf Entwicklung (ich > glaube auch User) ML hatte mich meinen Vorschlag dazu mal vorgestellt: > https://github.com/andig/ingress <https://github.com/andig/ingress> >> >> ingress is a universal data ingestion and mapping daemon aimed at use with, >> but not limited to, the Volkszähler <https://volkszaehler.org/> smart meter >> framework. > >> Ich könnte mir ein Design vorstellen, in dem eine Anwendung Daten von >> verschiedenen Geräten liest und über [WAMP, MQTT] publiziert. Eine >> zweite Anwendung könnte die Daten dann empfangen und in geeigneter Form >> in die Datenbank schreiben. Damit würde vzlogger in zwei Anwendungen >> aufgespalten: > > Du bist zum gleichen Schluss gekommen wie ich. > > > Endgeräte [vzlogger, Mosquitto, ...] -> Logger [Datenbankanbindung über > VZ Middleware API] > > > > Das wäre natürlich ein langfristigerer Ansatz, der vom > Kernentwicklerteam unterstützt werden müsste und der einen gewissen > Personaleinsatz erfordert. > > Da sind wir beim Kernproblem. Ich alleine werde das nicht stemmen, weitere > Interessenten gibts derzeit nicht. > > > Wäre das ein Ansatz, der mit der mittelfristigen Planung für den > volkszähler zusammenpasst oder habt Ihr was ganz anderes vor? > > Offen gesagt (ich habs vor ein paar Wochen schonmal so gesagt) ist VZ in der > aktuellen Form ausentwickelt und funktioniert. Ohne mindestens 2 weitere > *Entwickler* würde ich ein Projekt wie oben skizziert nicht angehen. > > > Viele Grüße > Claas > > Viele Grüße, > Andreas > > > > > On Mon, 2020-01-06 at 10:45 +0100, tho...@fambesse.de > <mailto:tho...@fambesse.de> wrote: > > Hi Joe, > ich hab das bei mir umgesetzt mit folgender Config: > ESP8266-01(MQTT)-->
Re: [vz-users] MQTT -> vzlogger -> volkszaehler
Hallo Andreas, Ich wusste, dass es wenig Entwickler gibt, aber nicht, dass es im Wesentlichen eine one man show ist. Respekt. Dafür hast Du ganz schön was auf die Beine gestellt. Verstehe ich Dich richtig, dass Du Dich in Zukunft eher auf die Kernkompetenz „Messgeräte auslesen“ konzentrieren möchtest und die Datenbankfunktionalität und Visualisierung eher mit Hilfe externer Lösungen wie Influx oder Grafana anbieten möchtest ? Ich könnte mir schon vorstellen, das Projekt punktuell zu unterstützen, soweit es meine momentan begrenzte Freizeit zulässt. In Anbetracht der geringen Ressourcen, ist Dein Ansatz, sich auf das Kerngeschäft zu konzentrieren, wahrscheinlich schlau. Kennst Du kotori (https://getkotori.org/docs/index.html) ? Sieht auf den ersten Blick vom Konzept her ähnlich wie VZ aus. Trotz mondänem Web Auftritt anscheinend auch nur ein Entwickler. Vielleicht ließe sich da eine Kooperation etablieren… Viele Grüße Claas From: volkszaehler-users [mailto:volkszaehler-users-boun...@demo.volkszaehler.org] On Behalf Of Andreas Goetz Sent: Monday, January 6, 2020 1:50 PM To: volkszaehler.org - users Subject: Re: [vz-users] MQTT -> vzlogger -> volkszaehler Hallo Claas! On 6. Jan 2020, at 11:28, Claas H. Köhler wrote: Hallo, Ich finde das Thema sehr interessant. Bestünde Interesse hier in der Gemeinde, die Logger Funktionalität von vzlogger (also das Schreiben in die Datenbank über die Middleware API), auszulagern ? Ja. Tatsächlich hatte ich schonmal angefangen, vzlogger in seine Teile zu zerlegen: - Datenaquise (aus den Geräten) - Datenverteilung und -mapping Ersteres ist m.E. Kernfunktionalität, Letzteres eine Zusatzfunktion die wir immer mehr ausgebaut haben, die aber eigenständig ist. Auf Entwicklung (ich glaube auch User) ML hatte mich meinen Vorschlag dazu mal vorgestellt: https://github.com/andig/ingress ingress is a universal data ingestion and mapping daemon aimed at use with, but not limited to, the <https://volkszaehler.org/> Volkszähler smart meter framework. Ich könnte mir ein Design vorstellen, in dem eine Anwendung Daten von verschiedenen Geräten liest und über [WAMP, MQTT] publiziert. Eine zweite Anwendung könnte die Daten dann empfangen und in geeigneter Form in die Datenbank schreiben. Damit würde vzlogger in zwei Anwendungen aufgespalten: Du bist zum gleichen Schluss gekommen wie ich. Endgeräte [vzlogger, Mosquitto, ...] -> Logger [Datenbankanbindung über VZ Middleware API] Das wäre natürlich ein langfristigerer Ansatz, der vom Kernentwicklerteam unterstützt werden müsste und der einen gewissen Personaleinsatz erfordert. Da sind wir beim Kernproblem. Ich alleine werde das nicht stemmen, weitere Interessenten gibts derzeit nicht. Wäre das ein Ansatz, der mit der mittelfristigen Planung für den volkszähler zusammenpasst oder habt Ihr was ganz anderes vor? Offen gesagt (ich habs vor ein paar Wochen schonmal so gesagt) ist VZ in der aktuellen Form ausentwickelt und funktioniert. Ohne mindestens 2 weitere *Entwickler* würde ich ein Projekt wie oben skizziert nicht angehen. Viele Grüße Claas Viele Grüße, Andreas On Mon, 2020-01-06 at 10:45 +0100, tho...@fambesse.de wrote: Hi Joe, ich hab das bei mir umgesetzt mit folgender Config: ESP8266-01(MQTT)--> Mosquitto-->Node-RED Node-Red ist so konfiguriert das er MM2 und Volkszähler und Grafana/Influx befüllt bzw befüttert. Ich kann dir wenn du Interesse hast das etwas detaillierter aufdröseln bzw dir meine Node-Red config geben. Die Transferleistung ESP8266 nach Tasamoa müsstest du ggf. selbst lösen. Diese steht bei mir erst noch an da ich nicht tasamoa sondern Shelly nutze aber noch keine Zeit für die MQTT Einbindung hatte. Beste Grüße Thomas -Ursprüngliche Nachricht- Von: volkszaehler-users Im Auftrag von Andreas Goetz Gesendet: Sonntag, 5. Januar 2020 21:44 An: volkszaehler.org <http://volkszaehler.org/> - users Betreff: Re: [vz-users] MQTT -> vzlogger -> volkszaehler Naja... wenn Du exec nutzen willst, warum nicht irgendwas in Verbindung mit mosquitto_sub? Sonst mal schnell selbst was coden, mqtt subscriber der in eine Datei schreibt, dann file Protokoll. Irgendsowas, wäre zu probieren... Viele Grüße, Andreas Am 05.01.2020 um 21:14 schrieb joekok...@epios.eu: Vielen Dank für die schnelle Antwort! Es war mir klar, dass es keine direkte Anbindung gibt. Mich würde interessieren, ob jemand schon irgendwas ähnliches gemacht hat. Mosquitto -> X -> vzlogger -> volkszaehler Und welches Programm sich am ehesten dazu eignen würde. Ich denke an eine Art REST API, an welcher vzlogger mit exec Protokoll die Daten dann einliest. Node-Red erscheint mir bei oberflächlicher Betrachtung eine etwas hohe Einstiegshürde und vielleicht etwas zu umfangreich für die Problemstellung. Aber diese Einschätzung kann auch falsch sein. Liebe Grüße, Joe On 1/5/20 8:57 P
Re: [vz-users] MQTT -> vzlogger -> volkszaehler
Hallo Claas! > On 6. Jan 2020, at 11:28, Claas H. Köhler <mailto:claa...@web.de>> wrote: > > Hallo, > > Ich finde das Thema sehr interessant. Bestünde Interesse hier in der > Gemeinde, die Logger Funktionalität von vzlogger (also das Schreiben in > die Datenbank über die Middleware API), auszulagern ? Ja. Tatsächlich hatte ich schonmal angefangen, vzlogger in seine Teile zu zerlegen: - Datenaquise (aus den Geräten) - Datenverteilung und -mapping Ersteres ist m.E. Kernfunktionalität, Letzteres eine Zusatzfunktion die wir immer mehr ausgebaut haben, die aber eigenständig ist. Auf Entwicklung (ich glaube auch User) ML hatte mich meinen Vorschlag dazu mal vorgestellt: https://github.com/andig/ingress <https://github.com/andig/ingress> ingress is a universal data ingestion and mapping daemon aimed at use with, but not limited to, the Volkszähler <https://volkszaehler.org/> smart meter framework. > Ich könnte mir ein Design vorstellen, in dem eine Anwendung Daten von > verschiedenen Geräten liest und über [WAMP, MQTT] publiziert. Eine > zweite Anwendung könnte die Daten dann empfangen und in geeigneter Form > in die Datenbank schreiben. Damit würde vzlogger in zwei Anwendungen > aufgespalten: Du bist zum gleichen Schluss gekommen wie ich. > Endgeräte [vzlogger, Mosquitto, ...] -> Logger [Datenbankanbindung über > VZ Middleware API] > > > > Das wäre natürlich ein langfristigerer Ansatz, der vom > Kernentwicklerteam unterstützt werden müsste und der einen gewissen > Personaleinsatz erfordert. Da sind wir beim Kernproblem. Ich alleine werde das nicht stemmen, weitere Interessenten gibts derzeit nicht. > Wäre das ein Ansatz, der mit der mittelfristigen Planung für den > volkszähler zusammenpasst oder habt Ihr was ganz anderes vor? Offen gesagt (ich habs vor ein paar Wochen schonmal so gesagt) ist VZ in der aktuellen Form ausentwickelt und funktioniert. Ohne mindestens 2 weitere *Entwickler* würde ich ein Projekt wie oben skizziert nicht angehen. > Viele Grüße > Claas Viele Grüße, Andreas > > > On Mon, 2020-01-06 at 10:45 +0100, tho...@fambesse.de > <mailto:tho...@fambesse.de> wrote: >> Hi Joe, >> ich hab das bei mir umgesetzt mit folgender Config: >> ESP8266-01(MQTT)--> Mosquitto-->Node-RED >> Node-Red ist so konfiguriert das er MM2 und Volkszähler und >> Grafana/Influx befüllt bzw befüttert. >> >> Ich kann dir wenn du Interesse hast das etwas detaillierter >> aufdröseln bzw dir meine Node-Red config geben. Die Transferleistung >> ESP8266 nach Tasamoa müsstest du ggf. selbst lösen. >> Diese steht bei mir erst noch an da ich nicht tasamoa sondern Shelly >> nutze aber noch keine Zeit für die MQTT Einbindung hatte. >> >> Beste Grüße >> Thomas >> >> -Ursprüngliche Nachricht- >> Von: volkszaehler-users > <mailto:volkszaehler-users-bounces@demo.volkszaehler> >> .org> Im Auftrag von Andreas Goetz >> Gesendet: Sonntag, 5. Januar 2020 21:44 >> An: volkszaehler.org <http://volkszaehler.org/> - users >> > <mailto:volkszaehler-us...@demo.volkszaehler.or> >> g> >> Betreff: Re: [vz-users] MQTT -> vzlogger -> volkszaehler >> >> Naja... wenn Du exec nutzen willst, warum nicht irgendwas in >> Verbindung mit mosquitto_sub? Sonst mal schnell selbst was coden, >> mqtt subscriber der in eine Datei schreibt, dann file Protokoll. >> Irgendsowas, wäre zu probieren... >> >> Viele Grüße, Andreas >> >>> Am 05.01.2020 um 21:14 schrieb joekok...@epios.eu >>> <mailto:joekok...@epios.eu>: >>> >>> Vielen Dank für die schnelle Antwort! Es war mir klar, dass es >>> keine direkte Anbindung gibt. >>> >>> Mich würde interessieren, ob jemand schon irgendwas ähnliches >>> gemacht hat. Mosquitto -> X -> vzlogger -> volkszaehler >>> >>> Und welches Programm sich am ehesten dazu eignen würde. >>> >>> Ich denke an eine Art REST API, an welcher vzlogger mit exec >>> Protokoll die Daten dann einliest. >>> >>> Node-Red erscheint mir bei oberflächlicher Betrachtung eine etwas >>> hohe Einstiegshürde und vielleicht etwas zu umfangreich für die >>> Problemstellung. Aber diese Einschätzung kann auch falsch sein. >>> >>> Liebe Grüße, >>> Joe >>> >>>> On 1/5/20 8:57 PM, Andreas Goetz wrote: >>>> Die Funktion gibts nicht und ist aktuell nicht geplant. Ohne >>>> vzlogger wäre node-red Dein Freund. >>>> Viele Grüße, Andreas >>>>>> Am 05.01.2020 um 20:54 schrieb joekok...@epios.eu >>>>>> &l
Re: [vz-users] MQTT -> vzlogger -> volkszaehler
Hi Claas MQTT ist per Design ja am Publishen und du muss dir nur den passenden Stream raussuchen und diesen entsprechend deiner Wünsche irgendwo hinleiten. Wie das mit WAMP läuft weiß ich nicht da fast alles imo. per MQTT läuft was ich brauche. Das mach ich mit Node-Red. Also die Sensoren/Aktoren sende die ganze Zeit per MQTT und ich entscheide dann in Node-Red welcher Sensor/Aktor wohin geschrieben wird (MM2, VZ.db oder Influx oder alles oder oder oder.). Wenn man einmal durchgestiegen ist (Node-Red), sehr sehr einfach. Ich habe einen raspi4 mit folgender Installation - Influx - Grafana - Mosquitto - Node-Red Damit habe ich das entsprechen umgesetzt und funktioniert bis dato (Laufzeit derzeit 2 Monate) sehr stabil und ausreichend performant. Ja ich weiß das ich die Logging-Daten somit doppelt speicher und es möglich ist die daten von VZ-db auch für Grafana zu nutzen. Auch hier knappe Ressource Zeit und Grafana & Influx sehr gut per default zusammenarbeiten. Wenn ich dich und die Anfrage richtig verstehe bekommst du mit node-Red und Mosquitto genau das was du suchst. Eine Datendrehscheibe wo du entscheiden kannst welche Sensor/Aktor-Werte wohin sollen. Sehe ich das richtig? Beste grüße Thomas > -Ursprüngliche Nachricht- > Von: volkszaehler-users boun...@demo.volkszaehler.org> Im Auftrag von Claas H. Köhler > Gesendet: Montag, 6. Januar 2020 11:28 > An: volkszaehler.org - users > Betreff: Re: [vz-users] MQTT -> vzlogger -> volkszaehler > > Hallo, > > Ich finde das Thema sehr interessant. Bestünde Interesse hier in der > Gemeinde, die Logger Funktionalität von vzlogger (also das Schreiben in die > Datenbank über die Middleware API), auszulagern ? > > Ich könnte mir ein Design vorstellen, in dem eine Anwendung Daten von > verschiedenen Geräten liest und über [WAMP, MQTT] publiziert. Eine zweite > Anwendung könnte die Daten dann empfangen und in geeigneter Form in > die Datenbank schreiben. Damit würde vzlogger in zwei Anwendungen > aufgespalten: > > Endgeräte [vzlogger, Mosquitto, ...] -> Logger [Datenbankanbindung über VZ > Middleware API] > > Einen wesentlichen Vorteil würde ich darin sehen, dass man die genutzten > Technologien etwas vereinheitlicht. Aktuell werden nach meinem > (begrenzten) Verständnis folgende Protokolle eingesetzt: > * REST für die Middleware API > * WAMP Version 1 für das Empfangen von Echtzeitdaten durch das Frontend > * Raw Sockets für das Versenden von Echtzeitdaten durch vzlogger > * MQTT für das Versenden von Echtzeitdaten durch vzlogger > > Könnte die Reduktion auf REST + [WAMP Version 2 oder MQTT] > möglicherweise die Komplexität reduzieren ? > > Ein erster Schritt könnte so aussehen, dass man den vzlogger so lässt wie er > ist und die Logger Funktionalität in eine zweite Anwendung kopiert. Dabei > könnte man auch den aktuellen Code etwas aufräumen, ohne das bewährte > System zu beeinträchtigen. > > Das wäre natürlich ein langfristigerer Ansatz, der vom Kernentwicklerteam > unterstützt werden müsste und der einen gewissen Personaleinsatz > erfordert. > > Wäre das ein Ansatz, der mit der mittelfristigen Planung für den volkszähler > zusammenpasst oder habt Ihr was ganz anderes vor ? > > Viele Grüße > Claas > > > On Mon, 2020-01-06 at 10:45 +0100, tho...@fambesse.de wrote: > > Hi Joe, > > ich hab das bei mir umgesetzt mit folgender Config: > > ESP8266-01(MQTT)--> Mosquitto-->Node-RED Node-Red ist so konfiguriert > > das er MM2 und Volkszähler und Grafana/Influx befüllt bzw befüttert. > > > > Ich kann dir wenn du Interesse hast das etwas detaillierter aufdröseln > > bzw dir meine Node-Red config geben. Die Transferleistung > > ESP8266 nach Tasamoa müsstest du ggf. selbst lösen. > > Diese steht bei mir erst noch an da ich nicht tasamoa sondern Shelly > > nutze aber noch keine Zeit für die MQTT Einbindung hatte. > > > > Beste Grüße > > Thomas > > > > -Ursprüngliche Nachricht- > > Von: volkszaehler-users > .org> Im Auftrag von Andreas Goetz > > Gesendet: Sonntag, 5. Januar 2020 21:44 > > An: volkszaehler.org - users > g> > > Betreff: Re: [vz-users] MQTT -> vzlogger -> volkszaehler > > > > Naja... wenn Du exec nutzen willst, warum nicht irgendwas in > > Verbindung mit mosquitto_sub? Sonst mal schnell selbst was coden, mqtt > > subscriber der in eine Datei schreibt, dann file Protokoll. > > Irgendsowas, wäre zu probieren... > > > > Viele Grüße, Andreas > > > > > Am 05.01.2020 um 21:14 schrieb joekok...@epios.eu: > > > > > > Vielen Dank für die schnelle Antwort! Es war mir klar, dass es > > > keine direkte Anbindung gibt. > > > > &
Re: [vz-users] MQTT -> vzlogger -> volkszaehler
Hallo, Ich finde das Thema sehr interessant. Bestünde Interesse hier in der Gemeinde, die Logger Funktionalität von vzlogger (also das Schreiben in die Datenbank über die Middleware API), auszulagern ? Ich könnte mir ein Design vorstellen, in dem eine Anwendung Daten von verschiedenen Geräten liest und über [WAMP, MQTT] publiziert. Eine zweite Anwendung könnte die Daten dann empfangen und in geeigneter Form in die Datenbank schreiben. Damit würde vzlogger in zwei Anwendungen aufgespalten: Endgeräte [vzlogger, Mosquitto, ...] -> Logger [Datenbankanbindung über VZ Middleware API] Einen wesentlichen Vorteil würde ich darin sehen, dass man die genutzten Technologien etwas vereinheitlicht. Aktuell werden nach meinem (begrenzten) Verständnis folgende Protokolle eingesetzt: * REST für die Middleware API * WAMP Version 1 für das Empfangen von Echtzeitdaten durch das Frontend * Raw Sockets für das Versenden von Echtzeitdaten durch vzlogger * MQTT für das Versenden von Echtzeitdaten durch vzlogger Könnte die Reduktion auf REST + [WAMP Version 2 oder MQTT] möglicherweise die Komplexität reduzieren ? Ein erster Schritt könnte so aussehen, dass man den vzlogger so lässt wie er ist und die Logger Funktionalität in eine zweite Anwendung kopiert. Dabei könnte man auch den aktuellen Code etwas aufräumen, ohne das bewährte System zu beeinträchtigen. Das wäre natürlich ein langfristigerer Ansatz, der vom Kernentwicklerteam unterstützt werden müsste und der einen gewissen Personaleinsatz erfordert. Wäre das ein Ansatz, der mit der mittelfristigen Planung für den volkszähler zusammenpasst oder habt Ihr was ganz anderes vor ? Viele Grüße Claas On Mon, 2020-01-06 at 10:45 +0100, tho...@fambesse.de wrote: > Hi Joe, > ich hab das bei mir umgesetzt mit folgender Config: > ESP8266-01(MQTT)--> Mosquitto-->Node-RED > Node-Red ist so konfiguriert das er MM2 und Volkszähler und > Grafana/Influx befüllt bzw befüttert. > > Ich kann dir wenn du Interesse hast das etwas detaillierter > aufdröseln bzw dir meine Node-Red config geben. Die Transferleistung > ESP8266 nach Tasamoa müsstest du ggf. selbst lösen. > Diese steht bei mir erst noch an da ich nicht tasamoa sondern Shelly > nutze aber noch keine Zeit für die MQTT Einbindung hatte. > > Beste Grüße > Thomas > > -Ursprüngliche Nachricht- > Von: volkszaehler-users .org> Im Auftrag von Andreas Goetz > Gesendet: Sonntag, 5. Januar 2020 21:44 > An: volkszaehler.org - users g> > Betreff: Re: [vz-users] MQTT -> vzlogger -> volkszaehler > > Naja... wenn Du exec nutzen willst, warum nicht irgendwas in > Verbindung mit mosquitto_sub? Sonst mal schnell selbst was coden, > mqtt subscriber der in eine Datei schreibt, dann file Protokoll. > Irgendsowas, wäre zu probieren... > > Viele Grüße, Andreas > > > Am 05.01.2020 um 21:14 schrieb joekok...@epios.eu: > > > > Vielen Dank für die schnelle Antwort! Es war mir klar, dass es > > keine direkte Anbindung gibt. > > > > Mich würde interessieren, ob jemand schon irgendwas ähnliches > > gemacht hat. Mosquitto -> X -> vzlogger -> volkszaehler > > > > Und welches Programm sich am ehesten dazu eignen würde. > > > > Ich denke an eine Art REST API, an welcher vzlogger mit exec > > Protokoll die Daten dann einliest. > > > > Node-Red erscheint mir bei oberflächlicher Betrachtung eine etwas > > hohe Einstiegshürde und vielleicht etwas zu umfangreich für die > > Problemstellung. Aber diese Einschätzung kann auch falsch sein. > > > > Liebe Grüße, > > Joe > > > > > On 1/5/20 8:57 PM, Andreas Goetz wrote: > > > Die Funktion gibts nicht und ist aktuell nicht geplant. Ohne > > > vzlogger wäre node-red Dein Freund. > > > Viele Grüße, Andreas > > > > > Am 05.01.2020 um 20:54 schrieb joekok...@epios.eu: > > > > > > > > Hallo, > > > > > > > > ich habe einige Sonoff Devices mit der open-source firmware > > > > tasmota (https://github.com/arendst/Tasmota) geflashed und über > > > > Weihnachten ausprobiert. Sie funktionieren bisher zuverlässig. > > > > > > > > Nun möchte ich die Sensordaten in Volkzaehler integrieren. Die > > > > beste Art an die Senordaten (zum Beispiel der Last beim Sonoff > > > > POW) ist anscheinend MQTT. Deshalb habe ich erstmals mit > > > > mosquitto rumprobiert. > > > > > > > > Hat jemand Erfahrung damit Daten aus MQTT topics durch vzlogger > > > > in die Volkszaehler Datenbank zu bringen? (Tasmota -> Mosquitto > > > > -> X -> vzlogger -> volkszaehler) Ist ein MQTT Client dafür am > > > > Besten geeignet? Macht das bereits jemand? > > > > > > > > Für mich ist der "Umweg" über vzlogger wichtig, da ich die > > > > Buffer Funktion von vzlogger bei Netzwerkausfällen nutzen > > > > möchte. > > > > > > > > Beste Grüße > > > > Joe > >
Re: [vz-users] MQTT -> vzlogger -> volkszaehler
Hi Joe, ich hab das bei mir umgesetzt mit folgender Config: ESP8266-01(MQTT)--> Mosquitto-->Node-RED Node-Red ist so konfiguriert das er MM2 und Volkszähler und Grafana/Influx befüllt bzw befüttert. Ich kann dir wenn du Interesse hast das etwas detaillierter aufdröseln bzw dir meine Node-Red config geben. Die Transferleistung ESP8266 nach Tasamoa müsstest du ggf. selbst lösen. Diese steht bei mir erst noch an da ich nicht tasamoa sondern Shelly nutze aber noch keine Zeit für die MQTT Einbindung hatte. Beste Grüße Thomas -Ursprüngliche Nachricht- Von: volkszaehler-users Im Auftrag von Andreas Goetz Gesendet: Sonntag, 5. Januar 2020 21:44 An: volkszaehler.org - users Betreff: Re: [vz-users] MQTT -> vzlogger -> volkszaehler Naja... wenn Du exec nutzen willst, warum nicht irgendwas in Verbindung mit mosquitto_sub? Sonst mal schnell selbst was coden, mqtt subscriber der in eine Datei schreibt, dann file Protokoll. Irgendsowas, wäre zu probieren... Viele Grüße, Andreas > Am 05.01.2020 um 21:14 schrieb joekok...@epios.eu: > > Vielen Dank für die schnelle Antwort! Es war mir klar, dass es keine direkte > Anbindung gibt. > > Mich würde interessieren, ob jemand schon irgendwas ähnliches gemacht hat. > Mosquitto -> X -> vzlogger -> volkszaehler > > Und welches Programm sich am ehesten dazu eignen würde. > > Ich denke an eine Art REST API, an welcher vzlogger mit exec Protokoll die > Daten dann einliest. > > Node-Red erscheint mir bei oberflächlicher Betrachtung eine etwas hohe > Einstiegshürde und vielleicht etwas zu umfangreich für die Problemstellung. > Aber diese Einschätzung kann auch falsch sein. > > Liebe Grüße, > Joe > >> On 1/5/20 8:57 PM, Andreas Goetz wrote: >> Die Funktion gibts nicht und ist aktuell nicht geplant. Ohne vzlogger wäre >> node-red Dein Freund. >> Viele Grüße, Andreas >>>> Am 05.01.2020 um 20:54 schrieb joekok...@epios.eu: >>> >>> Hallo, >>> >>> ich habe einige Sonoff Devices mit der open-source firmware tasmota >>> (https://github.com/arendst/Tasmota) geflashed und über Weihnachten >>> ausprobiert. Sie funktionieren bisher zuverlässig. >>> >>> Nun möchte ich die Sensordaten in Volkzaehler integrieren. Die beste Art an >>> die Senordaten (zum Beispiel der Last beim Sonoff POW) ist anscheinend >>> MQTT. Deshalb habe ich erstmals mit mosquitto rumprobiert. >>> >>> Hat jemand Erfahrung damit Daten aus MQTT topics durch vzlogger in die >>> Volkszaehler Datenbank zu bringen? (Tasmota -> Mosquitto -> X -> vzlogger >>> -> volkszaehler) Ist ein MQTT Client dafür am Besten geeignet? Macht das >>> bereits jemand? >>> >>> Für mich ist der "Umweg" über vzlogger wichtig, da ich die Buffer Funktion >>> von vzlogger bei Netzwerkausfällen nutzen möchte. >>> >>> Beste Grüße >>> Joe
Re: [vz-users] MQTT -> vzlogger -> volkszaehler
Naja... wenn Du exec nutzen willst, warum nicht irgendwas in Verbindung mit mosquitto_sub? Sonst mal schnell selbst was coden, mqtt subscriber der in eine Datei schreibt, dann file Protokoll. Irgendsowas, wäre zu probieren... Viele Grüße, Andreas > Am 05.01.2020 um 21:14 schrieb joekok...@epios.eu: > > Vielen Dank für die schnelle Antwort! Es war mir klar, dass es keine direkte > Anbindung gibt. > > Mich würde interessieren, ob jemand schon irgendwas ähnliches gemacht hat. > Mosquitto -> X -> vzlogger -> volkszaehler > > Und welches Programm sich am ehesten dazu eignen würde. > > Ich denke an eine Art REST API, an welcher vzlogger mit exec Protokoll die > Daten dann einliest. > > Node-Red erscheint mir bei oberflächlicher Betrachtung eine etwas hohe > Einstiegshürde und vielleicht etwas zu umfangreich für die Problemstellung. > Aber diese Einschätzung kann auch falsch sein. > > Liebe Grüße, > Joe > >> On 1/5/20 8:57 PM, Andreas Goetz wrote: >> Die Funktion gibts nicht und ist aktuell nicht geplant. Ohne vzlogger wäre >> node-red Dein Freund. >> Viele Grüße, Andreas Am 05.01.2020 um 20:54 schrieb joekok...@epios.eu: >>> >>> Hallo, >>> >>> ich habe einige Sonoff Devices mit der open-source firmware tasmota >>> (https://github.com/arendst/Tasmota) geflashed und über Weihnachten >>> ausprobiert. Sie funktionieren bisher zuverlässig. >>> >>> Nun möchte ich die Sensordaten in Volkzaehler integrieren. Die beste Art an >>> die Senordaten (zum Beispiel der Last beim Sonoff POW) ist anscheinend >>> MQTT. Deshalb habe ich erstmals mit mosquitto rumprobiert. >>> >>> Hat jemand Erfahrung damit Daten aus MQTT topics durch vzlogger in die >>> Volkszaehler Datenbank zu bringen? (Tasmota -> Mosquitto -> X -> vzlogger >>> -> volkszaehler) Ist ein MQTT Client dafür am Besten geeignet? Macht das >>> bereits jemand? >>> >>> Für mich ist der "Umweg" über vzlogger wichtig, da ich die Buffer Funktion >>> von vzlogger bei Netzwerkausfällen nutzen möchte. >>> >>> Beste Grüße >>> Joe
Re: [vz-users] MQTT -> vzlogger -> volkszaehler
Vielen Dank für die schnelle Antwort! Es war mir klar, dass es keine direkte Anbindung gibt. Mich würde interessieren, ob jemand schon irgendwas ähnliches gemacht hat. Mosquitto -> X -> vzlogger -> volkszaehler Und welches Programm sich am ehesten dazu eignen würde. Ich denke an eine Art REST API, an welcher vzlogger mit exec Protokoll die Daten dann einliest. Node-Red erscheint mir bei oberflächlicher Betrachtung eine etwas hohe Einstiegshürde und vielleicht etwas zu umfangreich für die Problemstellung. Aber diese Einschätzung kann auch falsch sein. Liebe Grüße, Joe On 1/5/20 8:57 PM, Andreas Goetz wrote: Die Funktion gibts nicht und ist aktuell nicht geplant. Ohne vzlogger wäre node-red Dein Freund. Viele Grüße, Andreas Am 05.01.2020 um 20:54 schrieb joekok...@epios.eu: Hallo, ich habe einige Sonoff Devices mit der open-source firmware tasmota (https://github.com/arendst/Tasmota) geflashed und über Weihnachten ausprobiert. Sie funktionieren bisher zuverlässig. Nun möchte ich die Sensordaten in Volkzaehler integrieren. Die beste Art an die Senordaten (zum Beispiel der Last beim Sonoff POW) ist anscheinend MQTT. Deshalb habe ich erstmals mit mosquitto rumprobiert. Hat jemand Erfahrung damit Daten aus MQTT topics durch vzlogger in die Volkszaehler Datenbank zu bringen? (Tasmota -> Mosquitto -> X -> vzlogger -> volkszaehler) Ist ein MQTT Client dafür am Besten geeignet? Macht das bereits jemand? Für mich ist der "Umweg" über vzlogger wichtig, da ich die Buffer Funktion von vzlogger bei Netzwerkausfällen nutzen möchte. Beste Grüße Joe
Re: [vz-users] MQTT -> vzlogger -> volkszaehler
Die Funktion gibts nicht und ist aktuell nicht geplant. Ohne vzlogger wäre node-red Dein Freund. Viele Grüße, Andreas > Am 05.01.2020 um 20:54 schrieb joekok...@epios.eu: > > Hallo, > > ich habe einige Sonoff Devices mit der open-source firmware tasmota > (https://github.com/arendst/Tasmota) geflashed und über Weihnachten > ausprobiert. Sie funktionieren bisher zuverlässig. > > Nun möchte ich die Sensordaten in Volkzaehler integrieren. Die beste Art an > die Senordaten (zum Beispiel der Last beim Sonoff POW) ist anscheinend MQTT. > Deshalb habe ich erstmals mit mosquitto rumprobiert. > > Hat jemand Erfahrung damit Daten aus MQTT topics durch vzlogger in die > Volkszaehler Datenbank zu bringen? (Tasmota -> Mosquitto -> X -> vzlogger -> > volkszaehler) Ist ein MQTT Client dafür am Besten geeignet? Macht das bereits > jemand? > > Für mich ist der "Umweg" über vzlogger wichtig, da ich die Buffer Funktion > von vzlogger bei Netzwerkausfällen nutzen möchte. > > Beste Grüße > Joe
