Worksheet 08 · Räumlich validieren
Random Forest mit zufälligen und räumlichen Prüffaltungen
Vergleich vorbereiten
Verwenden Sie die vollständigen LAI-/Prädiktorpaare aus Worksheet 07 und den Abschnitt The machine learning way der EON-Vorlage. Übernehmen Sie daraus die räumliche Faltung mit CAST::knndm(). Die Zahl der Faltungen beträgt in beiden Prüfungen drei.
Für diesen Vergleich wird keine Variablenauswahl ausgeführt: Ersetzen Sie die ffs()-Modellierung der Vorlage durch caret::train(..., method = "rf"). Legen Sie die Prädiktornamen ausdrücklich fest; ID, Koordinatenkennungen und LAI dürfen nicht versehentlich in den Prädiktorsatz gelangen.
Zwei Prüfungen ausführen
- Erzeugen Sie mit
set.seed(42)drei zufällige Faltungen, beispielsweise mitcaret::createFolds(), und die drei räumlichen Faltungen mitCAST::knndm(). Speichern Sie die jeweiligen Trainings- und Testindizes und stellen Sie die Testzuordnung an den Referenzorten dar. - Trainieren Sie mit beiden Faltungssätzen denselben Random Forest: gleiche Prädiktoren,
ntree = 500, genau ein festesmtryund dieselben sonstigen Einstellungen. Verwenden SietrainControl(index = ..., indexOut = ..., savePredictions = "final", method = "cv")und ein einzeiligestuneGrid. Setzen Sie den Zufallsstart vor jedem Training erneut. - Berechnen Sie aus den zurückgehaltenen Vorhersagen RMSE, MAE und mittleren Fehler als
mean(pred - obs). Jede Referenz soll pro Prüfverfahren genau einmal getestet werden. Berechnen Sie zusätzlich Kennwerte pro Faltung. - Vergleichen Sie die Trainings-Test-Abstände anhand von
CAST::geodist()und stellen Sie die räumliche Prüfsituation den Abständen zwischen Trainingspunkten und Vorhersagegebiet gegenüber.
Ergebnis
Geben Sie Faltungskarten, die Tabelle der zurückgehaltenen Vorhersagen und einen Kennwertvergleich ab. Geben Sie an, für welche räumliche Entfernungssituation die jeweiligen Fehler stehen. Nennen Sie die zahlenmäßige Fehlerdifferenz; ein größerer räumlicher Fehler wird nicht vorausgesetzt. Bewahren Sie das räumlich geprüfte Modell mit seinen Faltungen für Worksheet 09 auf.