Auslesen der BMW-Daten mit FHEM (225xe)

Rumbel · 20. März 2018

Hallo zusammen,

vor längerer Zeit hatte ich mal angekündigt, dass ich meine Daten per Heimautomatisierung abholen will und mir grafisch darstellen lassen will.
Ich nutze für die Heimautomatisierung FHEM (Siehe HIER) auf einem Raspberry Pi 3

Um den Code laufen zu lassen, solltet ihr daher auch FHEM nutzen. Oder alles anpassen.

Folgendes geht
- Auslesen aller Daten, die CD sendet
- Berechnung einiger weniger Daten (bspw mit Benzin gefahrene km, Prozentsatz allgemein elektrisch gefahren, ...)
- Statistiken zu Verbrauch, %Elektrisch, etc
- Karte mit der letzten Position
- Karte mit der Position der letzten 3 Stops (für längere Reisen)
- Benachrichtigungen, wenn das Auto parkt, läd, etc. Teilweise inkl. Positionsangabe (benötigt Pushbulled)
- Automatisches holen des Bearers falls nötig / ungültig (aktuell ca. alle 2-3h glaub ich)

Folgendes kommt vielleicht noch
- Senden von Kommandos
- Das ganze als FHEM Modul fertig verpackt
- eine schöne Oberfläche mit Bildchen
- ein paar fehlende Daten

Folgendes kommt nie
- Vollständiger Support von mir oder
- Haftung in irgendeiner Weise, falls BMW das Ganze irgendwie doof findet und uns aussperrt oder das deswegen Fahrzeug implodiert.

Hinweise:
Der Code ist noch "gefrickel": Da wurde viel gebastelt, viel entspricht nicht unbedingt der höchsten Qualität, aber es läuft schon mal
Für mich ist's ne Beta zum Testen und weiterentwickeln und irgendwann folgt vielleicht ein komplettes Modul.

Hier der Code in drei Teilen
Einrichten der Passswörter / VIM

Passwörter

Rumbel · 20. März 2018

Einrichten der FHEM-Config

Einrichtung

Perl-Quellcode

Quellcode bearbeiten

define BMW_gps_lat dummy
attr BMW_gps_lat event-on-change-reading state
attr BMW_gps_lat group Location
attr BMW_gps_lat room BMW
attr BMW_gps_lat stateFormat state
define BMW_gps_lng dummy
attr BMW_gps_lng event-on-change-reading state
attr BMW_gps_lng group Location
attr BMW_gps_lng room BMW
attr BMW_gps_lng stateFormat state
define BMW_heading dummy
attr BMW_heading event-on-change-reading state
attr BMW_heading group Location
attr BMW_heading room BMW
attr BMW_heading stateFormat state°
define BMW_charging_status dummy
attr BMW_charging_status event-on-change-reading state
attr BMW_charging_status group Battery
attr BMW_charging_status room BMW
attr BMW_charging_status stateFormat state
define BMW_chargingSystemStatus dummy
attr BMW_chargingSystemStatus event-on-change-reading state
attr BMW_chargingSystemStatus group Battery
attr BMW_chargingSystemStatus room BMW
attr BMW_chargingSystemStatus stateFormat state
define BMW_prognosisWhileChargingStatus dummy
attr BMW_prognosisWhileChargingStatus event-on-change-reading state
attr BMW_prognosisWhileChargingStatus group Battery
attr BMW_prognosisWhileChargingStatus room BMW
attr BMW_prognosisWhileChargingStatus stateFormat state
define BMW_chargingLevelHv dummy
attr BMW_chargingLevelHv event-on-change-reading state
attr BMW_chargingLevelHv group Battery
attr BMW_chargingLevelHv room BMW
attr BMW_chargingLevelHv stateFormat state %
define BMW_Segment_LastTrip_time_segment_end dummy
attr BMW_Segment_LastTrip_time_segment_end event-on-change-reading state
attr BMW_Segment_LastTrip_time_segment_end group LastTrip
attr BMW_Segment_LastTrip_time_segment_end room BMW
attr BMW_Segment_LastTrip_time_segment_end stateFormat state
define BMW_Segment_LastTrip_time_segment_end_formatted dummy
attr BMW_Segment_LastTrip_time_segment_end_formatted event-on-change-reading state
attr BMW_Segment_LastTrip_time_segment_end_formatted group LastTrip
attr BMW_Segment_LastTrip_time_segment_end_formatted room BMW
attr BMW_Segment_LastTrip_time_segment_end_formatted stateFormat state
define BMW_soc_hv_percent dummy
attr BMW_soc_hv_percent event-on-change-reading state
attr BMW_soc_hv_percent group Battery
attr BMW_soc_hv_percent room BMW
attr BMW_soc_hv_percent stateFormat state %
define BMW_beMaxRangeElectricKm dummy
attr BMW_beMaxRangeElectricKm event-on-change-reading state
attr BMW_beMaxRangeElectricKm group LastTrip
attr BMW_beMaxRangeElectricKm room BMW
attr BMW_beMaxRangeElectricKm stateFormat state km
define BMW_beRemainingRangeElectricKm dummy
attr BMW_beRemainingRangeElectricKm event-on-change-reading state
attr BMW_beRemainingRangeElectricKm group LastTrip
attr BMW_beRemainingRangeElectricKm room BMW
attr BMW_beRemainingRangeElectricKm stateFormat state km
define BMW_beRemainingRangeFuel dummy
attr BMW_beRemainingRangeFuel event-on-change-reading state
attr BMW_beRemainingRangeFuel group LastTrip
attr BMW_beRemainingRangeFuel room BMW
attr BMW_beRemainingRangeFuel stateFormat state km
define BMW_remaining_fuel dummy
attr BMW_remaining_fuel event-on-change-reading state
attr BMW_remaining_fuel group LastTrip
attr BMW_remaining_fuel room BMW
attr BMW_remaining_fuel stateFormat state Liter
define BMW_Segment_LastTrip_ratio_electric_driven_distance dummy
attr BMW_Segment_LastTrip_ratio_electric_driven_distance event-on-change-reading state
attr BMW_Segment_LastTrip_ratio_electric_driven_distance group LastTrip
attr BMW_Segment_LastTrip_ratio_electric_driven_distance room BMW
attr BMW_Segment_LastTrip_ratio_electric_driven_distance stateFormat state %
define BMW_mileage dummy
attr BMW_mileage event-on-change-reading state
attr BMW_mileage group AllTrips
attr BMW_mileage room BMW
attr BMW_mileage stateFormat state km
define BMW_door_lock_state dummy
attr BMW_door_lock_state event-on-change-reading state
attr BMW_door_lock_state group Doors
attr BMW_door_lock_state room BMW
attr BMW_door_lock_state stateFormat state
define BMW_door_driver_front dummy
attr BMW_door_driver_front event-on-change-reading state
attr BMW_door_driver_front group Doors
attr BMW_door_driver_front room BMW
attr BMW_door_driver_front stateFormat state
define BMW_door_passenger_front dummy
attr BMW_door_passenger_front event-on-change-reading state
attr BMW_door_passenger_front group Doors
attr BMW_door_passenger_front room BMW
attr BMW_door_passenger_front stateFormat state
define BMW_door_driver_rear dummy
attr BMW_door_driver_rear event-on-change-reading state
attr BMW_door_driver_rear group Doors
attr BMW_door_driver_rear room BMW
attr BMW_door_driver_rear stateFormat state
define BMW_door_passenger_rear dummy
attr BMW_door_passenger_rear event-on-change-reading state
attr BMW_door_passenger_rear group Doors
attr BMW_door_passenger_rear room BMW
attr BMW_door_passenger_rear stateFormat state
define BMW_trunk_state dummy
attr BMW_trunk_state event-on-change-reading state
attr BMW_trunk_state group Doors
attr BMW_trunk_state room BMW
attr BMW_trunk_state stateFormat state
define BMW_hood_state dummy
attr BMW_hood_state event-on-change-reading state
attr BMW_hood_state group Windows
attr BMW_hood_state room BMW
attr BMW_hood_state stateFormat state
define BMW_window_driver_front dummy
attr BMW_window_driver_front event-on-change-reading state
attr BMW_window_driver_front group Windows
attr BMW_window_driver_front room BMW
attr BMW_window_driver_front stateFormat state
define BMW_window_passenger_front dummy
attr BMW_window_passenger_front event-on-change-reading state
attr BMW_window_passenger_front group Windows
attr BMW_window_passenger_front room BMW
attr BMW_window_passenger_front stateFormat state
define BMW_window_driver_rear dummy
attr BMW_window_driver_rear event-on-change-reading state
attr BMW_window_driver_rear group Windows
attr BMW_window_driver_rear room BMW
attr BMW_window_driver_rear stateFormat state
define BMW_window_passenger_rear dummy
attr BMW_window_passenger_rear event-on-change-reading state
attr BMW_window_passenger_rear group Windows
attr BMW_window_passenger_rear room BMW
attr BMW_window_passenger_rear stateFormat state
define BMW_sunroof_state dummy
attr BMW_sunroof_state event-on-change-reading state
attr BMW_sunroof_state group Windows
attr BMW_sunroof_state room BMW
attr BMW_sunroof_state stateFormat state
define BMW_sunroof_position dummy
attr BMW_sunroof_position event-on-change-reading state
attr BMW_sunroof_position group Windows
attr BMW_sunroof_position room BMW
attr BMW_sunroof_position stateFormat state %
define BMW_LASTTRIP_DELTA_KM dummy
attr BMW_LASTTRIP_DELTA_KM event-on-change-reading state
attr BMW_LASTTRIP_DELTA_KM group LastTrip
attr BMW_LASTTRIP_DELTA_KM room BMW
attr BMW_LASTTRIP_DELTA_KM stateFormat state km
define BMW_LASTTRIP_TIME_SEGMENT_END dummy
attr BMW_LASTTRIP_TIME_SEGMENT_END event-on-change-reading state
attr BMW_LASTTRIP_TIME_SEGMENT_END group LastTrip
attr BMW_LASTTRIP_TIME_SEGMENT_END room BMW
attr BMW_LASTTRIP_TIME_SEGMENT_END stateFormat state
define BMW_CUMULATED_ELECTRIC_DRIVEN_DISTANCE dummy
attr BMW_CUMULATED_ELECTRIC_DRIVEN_DISTANCE event-on-change-reading state
attr BMW_CUMULATED_ELECTRIC_DRIVEN_DISTANCE group AllTrips
attr BMW_CUMULATED_ELECTRIC_DRIVEN_DISTANCE room BMW
attr BMW_CUMULATED_ELECTRIC_DRIVEN_DISTANCE stateFormat state km
define BMW_SAVED_LITERS_OVERALL dummy
attr BMW_SAVED_LITERS_OVERALL event-on-change-reading state
attr BMW_SAVED_LITERS_OVERALL group AllTrips
attr BMW_SAVED_LITERS_OVERALL room BMW
attr BMW_SAVED_LITERS_OVERALL stateFormat state km
define BMW_TIMESTAMP_STATISTICS_RESET dummy
attr BMW_TIMESTAMP_STATISTICS_RESET event-on-change-reading state
attr BMW_TIMESTAMP_STATISTICS_RESET group AllTrips
attr BMW_TIMESTAMP_STATISTICS_RESET room BMW
attr BMW_TIMESTAMP_STATISTICS_RESET stateFormat state
define BMW_LASTTRIP_DELTA_TIME dummy
attr BMW_LASTTRIP_DELTA_TIME event-on-change-reading state
attr BMW_LASTTRIP_DELTA_TIME group LastTrip
attr BMW_LASTTRIP_DELTA_TIME room BMW
attr BMW_LASTTRIP_DELTA_TIME stateFormat state min
define BMW_COMBINED_AVG_CONSUMED_LITERS_OVERALL dummy
attr BMW_COMBINED_AVG_CONSUMED_LITERS_OVERALL event-on-change-reading state
attr BMW_COMBINED_AVG_CONSUMED_LITERS_OVERALL group AllTrips
attr BMW_COMBINED_AVG_CONSUMED_LITERS_OVERALL room BMW
attr BMW_COMBINED_AVG_CONSUMED_LITERS_OVERALL stateFormat state Liter
define BMWUpdateCyclic at +*00:05:00 {BMW_Test();;}
attr BMWUpdateCyclic room BMW
define BMW_Map weblink htmlCode {myBMWUtils_ShowGoogleMapsCode(16,400,400)}
attr BMW_Map room BMW
define FileLog_BMW_Trips FileLog ./log/BMW_Trips-%Y-%m.log BMW_.*
attr FileLog_BMW_Trips group log
attr FileLog_BMW_Trips logtype text
attr FileLog_BMW_Trips room BMW
define SVG_FileLog_BMW_Trips_1 SVG FileLog_BMW_Trips:SVG_FileLog_BMW_Trips_1:CURRENT
attr SVG_FileLog_BMW_Trips_1 room BMW

Rumbel · 20. März 2018

Einrichtung Teil 2

Einrichtung

Perl

define SVG_FileLog_BMW_Trips_2 SVG FileLog_BMW_Trips:SVG_FileLog_BMW_Trips_2:CURRENT
attr SVG_FileLog_BMW_Trips_2 room BMW
define BMW_lsc_trigger dummy
attr BMW_lsc_trigger devStateIcon CHARGINGSTARTED:message_socket@blue CHARGINGDONE:message_socket@green VEHICLE_MOVING:car@orange VEHCSHUTDOWN:secur_open@orange VEHCSHUTDOWN_SECURED:secur_locked
attr BMW_lsc_trigger event-on-change-reading state
attr BMW_lsc_trigger group 1_State
attr BMW_lsc_trigger room BMW
define BMW_not_Status notify BMW_lsc_trigger.* {BMW_Push($EVENT);;}
attr BMW_not_Status room BMW
define BMW_CUMULATED_ELECTRIC_PERCENT_calc dummy
attr BMW_CUMULATED_ELECTRIC_PERCENT_calc event-on-change-reading state
attr BMW_CUMULATED_ELECTRIC_PERCENT_calc group AllTrips
attr BMW_CUMULATED_ELECTRIC_PERCENT_calc room BMW
attr BMW_CUMULATED_ELECTRIC_PERCENT_calc stateFormat state %
define BMW_CurrentBearer dummy
attr BMW_CurrentBearer room BMW
define BMW_CurrentBearer_Date dummy
attr BMW_CurrentBearer_Date room BMW
define BMW_LastSuccessfullRequest dummy
attr BMW_LastSuccessfullRequest room BMW
define BMW_CurrentState dummy
attr BMW_CurrentState room BMW
define BMW_MILEAGE_FUEL_calculated dummy
attr BMW_MILEAGE_FUEL_calculated group AllTrips
attr BMW_MILEAGE_FUEL_calculated room BMW
attr BMW_MILEAGE_FUEL_calculated stateFormat state %
define BMW_gps_lat_1 dummy
attr BMW_gps_lat_1 event-on-change-reading state
attr BMW_gps_lat_1 group Location
attr BMW_gps_lat_1 room BMW
attr BMW_gps_lat_1 stateFormat state
define BMW_gps_lat_2 dummy
attr BMW_gps_lat_2 event-on-change-reading state
attr BMW_gps_lat_2 group Location
attr BMW_gps_lat_2 room BMW
attr BMW_gps_lat_2 stateFormat state
define BMW_gps_lat_3 dummy
attr BMW_gps_lat_3 event-on-change-reading state
attr BMW_gps_lat_3 group Location
attr BMW_gps_lat_3 room BMW
attr BMW_gps_lat_3 stateFormat state
define BMW_gps_lng_1 dummy
attr BMW_gps_lng_1 event-on-change-reading state
attr BMW_gps_lng_1 group Location
attr BMW_gps_lng_1 room BMW
attr BMW_gps_lng_1 stateFormat state
define BMW_gps_lng_2 dummy
attr BMW_gps_lng_2 event-on-change-reading state
attr BMW_gps_lng_2 group Location
attr BMW_gps_lng_2 room BMW
attr BMW_gps_lng_2 stateFormat state
define BMW_gps_lng_3 dummy
attr BMW_gps_lng_3 event-on-change-reading state
attr BMW_gps_lng_3 group Location
attr BMW_gps_lng_3 room BMW
attr BMW_gps_lng_3 stateFormat state
define BMW_Map_History weblink htmlCode {myBMWUtils_ShowGoogleMapsCodeHistory(16,400,400)}
attr BMW_Map_History room BMW_Test
define at_BMW_MidnightUpdate at *00:01 {addLog("BMW_Segment_LastTrip_ratio_electric_driven_distance","state");;}
attr at_BMW_MidnightUpdate room BMW

Alles anzeigen

Rumbel · 20. März 2018

Der Code (als Datei)

folgendes als 99_myBMWUtils.pm in FHEM speichern

225xe · 23. März 2018

Tolle Arbeit. Leider fahre ich jetzt in Osterferien weg und kann es nicht testen (FHEM habe ich seit vielen Jahren im Einsatz).

Hättest Du für die Wartezeit ein paar Screenshots Deiner Plots?

Rumbel · 23. März 2018

hier mal auf die schnelle 3 Screenshots per Smartphone aus der Musikprobe... Hoffe, unser Dirigent liest nicht mit... Glaub der fährt Golf.

Wie gesagt: das Design fehlt noch... Irgendwann will ich das als Floorplan anlegen mit dem Auto als Hintergrund.

Bild 1: Anzeige der Position unseres Probelokals und die Fenster.
Lustig: Das gekippte Schiebedach wird nicht als offen angezeigt...

Screenshot_20180323-211852.jpg

Bild 2: Daten
Screenshot_20180323-211836.jpg
Bild 3: Statistik
Screenshot_20180323-211917.jpg
Die Karte mit der Historie zeige ich später mal, da will ich die Koordinaten noch ändern.

225xe · 23. März 2018

Whoow bist Du schnell! Tausend Dank!

Danke vielmals. Das sieht ja richtig toll aus! Da weiß ich gleich was ich nach dem Urlaub mache.......
Ich vermute, dass ich meine alten FHEM-Server erstmal updaten muss.

Keine Angst. Ich nerve nicht bzgl. Support. Habe selbst mehrere FHEM-Treiber geschrieben und weiß wie viel Arbeit Support macht.

Rumbel · 23. März 2018

Freut mich, dass es dir gefällt

Eingeschränkt Support werde ich leisten können, aber eben nicht all zu viel

Sag Bescheid, bevor du anfängst, dann lade ich dann nochmals die neuste version hoch.

Hier noch die Karte mit der Historie. Nein, ich bin nicht durch's Wasser gefahren, ich hab einfach nur zufällige Koordinaten verwendet.
Das Textfeld ist der Mouse-Over tag des zweiten (dunkleren) Punktes
GPS.PNG

Zwecks update. ich nutze eigentlich alles Standard.
Perl sollte halt aktuell sein auf deinem Server und FHEM das WebWidget für die karten unterstützen.
Theoretisch sollte das auch mit älteren FHEMs laufen, aber Updaten macht sicher generell Sinn

p.s.: wünsch dir einen schönen Urlaub und allzeit freie Straßen!

Thatsme.2 · 26. März 2018

Hi,
das ist ja echt super, sowas hab ich lange gesucht.
Die Statistik die BMW in der CD-App oder im CD-Web anbietet ist lächerlich.
Ich hab auch schon mehrfach bei BMW reklamiert man möge doch bitte eine vernünftige Verbrauchsstatistik einbringen.

Also frisch ans Werk und FHEM installiert.
Steile Lernkurve, aber ich hab zumindest meine Heizung-Steuerung schon erfolgreich integriert.

Dann hab ich mich an my_BMWUtils gewagt …
Stunden und Tage vergingen ohne jeden Erfolg, bis mir endlich klar war, dass der BMW CD Server am Wochenende fast immer offline war …
Als der endlich wieder funktionierte musste ich mehrmals mein Passwort zurücksetzen, weil das Konto gesperrt war. Vermutlich wegen zu vieler Fehlversuche mit myBMWUtils.

Das Problem dabei war offensichtlich, dass mein Passwort ein & enthielt!
Sobald ich keine Sonderzeichen im Passwort habe funktioniert auch der Login und ich erhalte einen Bearer Session Key.

Aber leider kommt es gleich danach doch wider zu einem Fehler 400.
Hier das Log mit Debug=2, die VID habe ich unkenntlich gemacht:

Code

-----------------------BMW Test - Received Bearer BMW Test - Received Bearer Response Header / Location:
	https://www.bmw-connecteddrive.com/app/default/static/external-dispatch.html#state=eyJtYXJrZXQiOiJkZSIsImxhbmd1YWdlIjoiZGUiLCJkZXN0aW5hdGlvbiI6InVzZXJEYXNoYm9hcmQiLCJwYXJhbWV0ZXJzIjoie30ifQ&access_token=HiSyDsnjj1EIg9LPiodZ9cVZi1GsUJxs&token_type=Bearer&expires_in=7199-----------------------




 BMW Test - Bearer successfull: HiSyDsnjj1EIg9LPiodZ9cVZi1GsUJxs
 BMW Test - Request Car Data Setup
 BMW Test - Request Car Data Sent to https://www.bmw-connecteddrive.de/api/vehicle/dynamic/v1/V......?offset=-60
 BMW Test - Received Car Data
 BMW Test - invalid response: 400 Bad Request




2018.03.26 14:39:46 3: BMWUpdateCyclic: 
 BMW Test Started
 BMW Test - Setup
 BMW Test - Setup done
 BMW Test - Request Car Data Setup
 BMW Test - Request Car Data Sent to https://www.bmw-connecteddrive.de/api/vehicle/dynamic/v1/V......?offset=-60
 BMW Test - Received Car Data
 BMW Test - invalid response: 400 Bad Request




 BMW Test - Request Bearer
 BMW Test - Sending Request:
 BMW Test - Request Received
 BMW Test - Received Bearer Code: 302 Found


-----------------------BMW Test - Received Bearer BMW Test - Received Bearer Response Header / Location:
	https://www.bmw-connecteddrive.com/app/default/static/external-dispatch.html#state=eyJtYXJrZXQiOiJkZSIsImxhbmd1YWdlIjoiZGUiLCJkZXN0aW5hdGlvbiI6InVzZXJEYXNoYm9hcmQiLCJwYXJhbWV0ZXJzIjoie30ifQ&access_token=5KHk2FhTt8ne2qagkd6RE2jwngw0uN7Y&token_type=Bearer&expires_in=7199-----------------------

Alles anzeigen

Woran kann das liegen?
Nach meinem Verständnis der Fehlermeldung ist an der im Code hinterlegten URL was falsch?

Wäre schön, wenn du mir da weiterhelfen könntest.

Rumbel · 26. März 2018

Hi @Thatsme.2,

freut mich, dass FHEM so einfach läuft bei dir. Mit entsprechenden Tutorials geht das gut.

Ich werde bei Gelegenheit die neueste Version hier hochladen... ein paar Kleinigkeiten hab ich schon verbessert.

Zu deinem Problem:
Was gibst du als VIN ein? Die Kurze (V123456) oder die Lange (WBA2C71080V123456) (hier anynomisiert)
Es muss auf jeden Fall die lange sein. Die volle VIN erhält man im Web oder im Fahrzeugschein.

Setzen kannst du sie über

Code

set BMWif_vim WBA2C71080V123456

Ein wichtiger Tipp noch:
deaktiviere auf jeden Fall den Timer so lange du noch am testen bist

Code

set BMWUpdateCyclic  inactive

und ruf das Script manuell über die Kommandozeile auf

Code

{BMW_Test();;}

(ja, mit 2x ; am Ende)

dann wird der token nicht so schnell gesperrt, wenn doch was nicht stimmt.

Tags