Data sources
============

.. contents::

Data sources and licensing
--------------------------

The following table contains the primary data sources used to create data sets used for *POMMES* models.
The licensing of the different sources differs and the table should provide an overview over the licences used.
Thus, we cannot publish all the data under an open license, such as a Creative Commons Attribution license. Please
be aware that some data might be subject to copyright.

.. csv-table::
   :header: "institution", "data set", "license", "distributed with the repository", "download link"

    "OPSD", "data package conventional power plants", "MIT License for software; for dataset-specific license see hyperlink", "yes", "`https://doi.org/10.25832/conventional_power_plants/2018-12-20 <https://doi.org/10.25832/conventional_power_plants/2018-12-20>`_"
    "ÜNB / BNetzA", "power plant list", "free to use, license-free according to §5 Abs. 1 UrhG", "yes", "`https://www.netzentwicklungsplan.de/sites/default/files/paragraphs-files/Kraftwerksliste_%C3%9CNB_Entwurf_Szenariorahmen_2030_V2019_2_0_0.pdf <https://www.netzentwicklungsplan.de/sites/default/files/paragraphs-files/Kraftwerksliste_%C3%9CNB_Entwurf_Szenariorahmen_2030_V2019_2_0_0.pdf>`_"
    "FZJ / KIT / FIAS", "FRESNA (PyPSA-EUR) PP matching", "GPLv3 for software, for dataset-specific license see hyperlink", "yes", "`https://doi.org/10.5281/zenodo.3358985 <https://doi.org/10.5281/zenodo.3358985>`_"
    "tmrowco", "bidding zone geometries", "MIT License", "yes", "`https://github.com/tmrowco/electricitymap-contrib/pull/1383 <https://github.com/tmrowco/electricitymap-contrib/pull/1383>`_"
    "UBA", "new-built power plants", "usage of data accordant to § 12a EGovG permitted", "yes", "`https://www.umweltbundesamt.de/sites/default/files/medien/384/bilder/dateien/4_tab_genehmigte-in_genehmigung-kraftwerksprojekte_2019-04-04.pdf <https://www.umweltbundesamt.de/sites/default/files/medien/384/bilder/dateien/4_tab_genehmigte-in_genehmigung-kraftwerksprojekte_2019-04-04.pdf>`_"
    "BDEW", "new-built power plants", "All rights reserved", "yes", "`https://www.bdew.de/media/documents/PI_20190401_BDEW-Kraftwerksliste.pdf <https://www.bdew.de/media/documents/PI_20190401_BDEW-Kraftwerksliste.pdf>`_"
    "BNetzA", "new-built & decommissioned power plants", "free to use, license-free according to §5 Abs. 1 UrhG", "yes", "`https://www.bundesnetzagentur.de/DE/Sachgebiete/ElektrizitaetundGas/Unternehmen_Institutionen/Versorgungssicherheit/Erzeugungskapazitaeten/Kraftwerksliste/kraftwerksliste-node.html <https://www.bundesnetzagentur.de/DE/Sachgebiete/ElektrizitaetundGas/Unternehmen_Institutionen/Versorgungssicherheit/Erzeugungskapazitaeten/Kraftwerksliste/kraftwerksliste-node.html>`_"
    "Energie SaarLorLux", "new-built power plant", "All rights reserved", "yes", "`https://www.energie-saarlorlux.com/unternehmen/mehr-gutes-klima/unsere-co2-projekte/ <https://www.energie-saarlorlux.com/unternehmen/mehr-gutes-klima/unsere-co2-projekte/>`_"
    "ENTSOE", "new-built power plants", "CC BY 4.0", "yes", "`https://tyndp.entsoe.eu/maps-data <https://tyndp.entsoe.eu/maps-data>`_"
    "BNetzA", "threshold for new-built power plants", "free to use, license-free according to §5 Abs. 1 UrhG", "yes", "`https://www.bundesnetzagentur.de/SharedDocs/Downloads/DE/Sachgebiete/Energie/Unternehmen_Institutionen/Versorgungssicherheit/Berichte_Fallanalysen/BNetzA_Netzstabilitaetsanlagen13k.pdf?__blob=publicationFile&v=3 <https://www.bundesnetzagentur.de/SharedDocs/Downloads/DE/Sachgebiete/Energie/Unternehmen_Institutionen/Versorgungssicherheit/Berichte_Fallanalysen/BNetzA_Netzstabilitaetsanlagen13k.pdf?__blob=publicationFile&v=3>`_"
    "DIW", "efficiency estimates for power plants", "All rights reserved", "yes", "`https://www.diw.de/documents/publikationen/73/diw_01.c.440963.de/diw_datadoc_2014-072.pdf <https://www.diw.de/documents/publikationen/73/diw_01.c.440963.de/diw_datadoc_2014-072.pdf>`_"
    "BNetzA", "power plants shutdown", "free to use, license-free according to §5 Abs. 1 UrhG", "yes", "`https://www.bundesnetzagentur.de/DE/Sachgebiete/ElektrizitaetundGas/Unternehmen_Institutionen/Versorgungssicherheit/Erzeugungskapazitaeten/KWSAL/KWSAL <https://www.bundesnetzagentur.de/DE/Sachgebiete/ElektrizitaetundGas/Unternehmen_Institutionen/Versorgungssicherheit/Erzeugungskapazitaeten/KWSAL/KWSAL>`_"
    "juris", "nuclear power plants shutdown", "free to use, license-free according to §5 Abs. 1 UrhG", "yes", "`https://www.gesetze-im-internet.de/atg/ <https://www.gesetze-im-internet.de/atg/>`_"
    "juris", "coal power plants shutdown", "free to use, license-free according to §5 Abs. 1 UrhG", "yes", "`https://www.gesetze-im-internet.de/kvbg/index.html <https://www.gesetze-im-internet.de/kvbg/index.html>`_"
    "KWSB", "coal power plants shutdown", "CC BY-ND 3.0 DE", "yes", "`https://www.bmwi.de/Redaktion/DE/Downloads/A/abschlussbericht-kommission-wachstum-strukturwandel-und-beschaeftigung.pdf?__blob=publicationFile <https://www.bmwi.de/Redaktion/DE/Downloads/A/abschlussbericht-kommission-wachstum-strukturwandel-und-beschaeftigung.pdf?__blob=publicationFile>`_"
    "ENTSOE", "Actual Generation per Generation Unit", "Use pursuant to Article 5 of the Terms & Conditions of ENTSO-E; data owned by the specific TSOs", "no", "`https://transparency.entsoe.eu/generation/r2/actualGenerationPerGenerationUnit/show <https://transparency.entsoe.eu/generation/r2/actualGenerationPerGenerationUnit/show>`_"
    "ENTSOE", "Water Reservoirs and Hydro Storage Plants", "Use pursuant to Article 5 of the Terms & Conditions of ENTSO-E; data owned by the specific TSOs", "no", "`https://transparency.entsoe.eu/generation/r2/waterReservoirsAndHydroStoragePlants/show <https://transparency.entsoe.eu/generation/r2/waterReservoirsAndHydroStoragePlants/show>`_"
    "ENTSOE", "Actual Generation per Production Type", "Use pursuant to Article 5 of the Terms & Conditions of ENTSO-E; data owned by the specific TSOs", "no", "`https://transparency.entsoe.eu/generation/r2/actualGenerationPerGenerationUnit/show <https://transparency.entsoe.eu/generation/r2/actualGenerationPerGenerationUnit/show>`_"
    "UBA", "specific emission factors", "Use pursuant to § 12a EGovG for pre-calculationsg", "yes", "`https://www.umweltbundesamt.de/publikationen/entwicklung-der-spezifischen-kohlendioxid-6 <https://www.umweltbundesamt.de/publikationen/entwicklung-der-spezifischen-kohlendioxid-6>`_"
    "OPSD", "time series data", "MIT License for software; for dataset-specific license see hyperlink", "yes", "`https://data.open-power-system-data.org/time_series/2020-10-06 <https://data.open-power-system-data.org/time_series/2020-10-06>`_"
    "ÜNB", "Anlagenstammdaten", "data owned by the German TSO", "yes", "`https://www.netztransparenz.de/EEG/Anlagenstammdaten <https://www.netztransparenz.de/EEG/Anlagenstammdaten>`_"
    "ÜNB", "EEG-Bewegungsdaten zur Jahresabrechnung 2017", "data owned by the German TSO", "yes", "`https://www.netztransparenz.de/EEG/Jahresabrechnungen <https://www.netztransparenz.de/EEG/Jahresabrechnungen>`_"
    "IRENA", "installed RES capacities", "All rights reserved, data used for pre-calculations", "yes", "`https://www.irena.org/Statistics/Download-Data <https://www.irena.org/Statistics/Download-Data>`_"
    "ENTSO-E", "Installed Capacity per Production Type", "Use pursuant to Article 5 of the Terms & Conditions of ENTSO-E; data owned by the specific TSOs", "no", "`https://transparency.entsoe.eu/generation/r2/installedGenerationCapacityAggregation/show <https://transparency.entsoe.eu/generation/r2/installedGenerationCapacityAggregation/show>`_"
    "Prognos et al.", "study on RES capacities for DE", "All rights reserved, data used for pre calculations", "yes", "`https://www.agora-energiewende.de/veroeffentlichungen/klimaneutrales-deutschland/ <https://www.agora-energiewende.de/veroeffentlichungen/klimaneutrales-deutschland/>`_"
    "BNetzA", "RES tender results solarPV", "free to use, license-free according to §5 Abs. 1 UrhG", "yes", "`https://www.bundesnetzagentur.de/DE/Sachgebiete/ElektrizitaetundGas/Unternehmen_Institutionen/Versorgungssicherheit/Erzeugungskapazitaeten/Kraftwerksliste/kraftwerksliste-node.html <https://www.bundesnetzagentur.de/DE/Sachgebiete/ElektrizitaetundGas/Unternehmen_Institutionen/Versorgungssicherheit/Erzeugungskapazitaeten/Kraftwerksliste/kraftwerksliste-node.html>`_"
    "BNetzA", "RES tender results wind onshore", "free to use, license-free according to §5 Abs. 1 UrhG", "yes", "`https://www.bundesnetzagentur.de/DE/Sachgebiete/ElektrizitaetundGas/Unternehmen_Institutionen/Ausschreibungen/Wind_Onshore/BeendeteAusschreibungen/BeendeteAusschreibungen_node.html <https://www.bundesnetzagentur.de/DE/Sachgebiete/ElektrizitaetundGas/Unternehmen_Institutionen/Ausschreibungen/Wind_Onshore/BeendeteAusschreibungen/BeendeteAusschreibungen_node.html>`_"
    "BNetzA", "RES tender results common tenders", "free to use, license-free according to §5 Abs. 1 UrhG", "yes", "`https://www.bundesnetzagentur.de/DE/Sachgebiete/ElektrizitaetundGas/Unternehmen_Institutionen/Ausschreibungen/Wind_Onshore/BeendeteAusschreibungen/BeendeteAusschreibungen_node.html <https://www.bundesnetzagentur.de/DE/Sachgebiete/ElektrizitaetundGas/Unternehmen_Institutionen/Ausschreibungen/Wind_Onshore/BeendeteAusschreibungen/BeendeteAusschreibungen_node.html>`_"
    "BNetzA", "RES tender results offshore", "free to use, license-free according to §5 Abs. 1 UrhG", "yes", "`https://www.bundesnetzagentur.de/DE/Service-Funktionen/Beschlusskammern/1_GZ/BK6-GZ/2017/BK6-17-001/Ergebnisse_erste_Ausschreibung.pdf?__blob=publicationFile&v=3 <https://www.bundesnetzagentur.de/DE/Service-Funktionen/Beschlusskammern/1_GZ/BK6-GZ/2017/BK6-17-001/Ergebnisse_erste_Ausschreibung.pdf?__blob=publicationFile&v=3>`_"
    "BNetzA", "RES tender results offshore", "free to use, license-free according to §5 Abs. 1 UrhG", "yes", "`https://www.bundesnetzagentur.de/DE/Service-Funktionen/Beschlusskammern/1_GZ/BK6-GZ/2018/BK6-18-001/Ergebnisse_zweite_ausschreibung.pdf?__blob=publicationFile&v=3 <https://www.bundesnetzagentur.de/DE/Service-Funktionen/Beschlusskammern/1_GZ/BK6-GZ/2018/BK6-18-001/Ergebnisse_zweite_ausschreibung.pdf?__blob=publicationFile&v=3>`_"
    "BNetzA", "solarPV installations (and remuneration)", "free to use, license-free according to §5 Abs. 1 UrhG", "yes", "`https://www.bundesnetzagentur.de/DE/Sachgebiete/ElektrizitaetundGas/Unternehmen_Institutionen/ErneuerbareEnergien/ZahlenDatenInformationen/EEG_Registerdaten/ArchivDatenMeldgn/ArchivDatenMeldgn_node.html <https://www.bundesnetzagentur.de/DE/Sachgebiete/ElektrizitaetundGas/Unternehmen_Institutionen/ErneuerbareEnergien/ZahlenDatenInformationen/EEG_Registerdaten/ArchivDatenMeldgn/ArchivDatenMeldgn_node.html>`_"
    "ÜNB", "capacity balance", "All rights reserved, data used for pre-calculations", "yes", "`https://www.netztransparenz.de/portals/1/Bericht_zur_Leistungsbilanz_2019.pdf <https://www.netztransparenz.de/portals/1/Bericht_zur_Leistungsbilanz_2019.pdf>`_"
    "DIW", "fuel costs uranium 2017", "All rights reserved", "yes", "`https://www.diw.de/documents/publikationen/73/diw_01.c.440963.de/diw_datadoc_2014-072.pdf <https://www.diw.de/documents/publikationen/73/diw_01.c.440963.de/diw_datadoc_2014-072.pdf>`_"
    "DIW", "operation costs", "All rights reserved", "yes", "`https://www.diw.de/documents/publikationen/73/diw_01.c.440963.de/diw_datadoc_2014-072.pdf <https://www.diw.de/documents/publikationen/73/diw_01.c.440963.de/diw_datadoc_2014-072.pdf>`_"
    "Öko Institut", "fuel costs lignite 2017", "All rights reserved", "yes", "`https://www.oeko.de/oekodoc/1995/2014-015-de.pdf <https://www.oeko.de/oekodoc/1995/2014-015-de.pdf>`_"
    "Destatis", "fuel costs hardcoal 2017", "CC BY 2.0 DE", "yes", "`https://www-genesis.destatis.de/genesis/online?&sequenz=tabelleErgebnis&selectionname=43511-0001#abreadcrumb <https://www-genesis.destatis.de/genesis/online?&sequenz=tabelleErgebnis&selectionname=43511-0001#abreadcrumb>`_"
    "BAFA", "fuel costs natural gas 2017", "CC BY-ND 3.0 DE", "yes", "`https://www.bafa.de/SharedDocs/Downloads/DE/Energie/egas_aufkommen_export_1991.html <https://www.bafa.de/SharedDocs/Downloads/DE/Energie/egas_aufkommen_export_1991.html>`_"
    "BMWI", "fuel costs heating oil 2017", "CC BY-ND 3.0 DE", "yes", "`https://www.bmwi.de/Redaktion/DE/Artikel/Energie/energiedaten-gesamtausgabe.html <https://www.bmwi.de/Redaktion/DE/Artikel/Energie/energiedaten-gesamtausgabe.html>`_"
    "r2b", "transport costs", "CC BY-ND 3.0 DE", "yes", "`https://www.bmwi.de/Redaktion/DE/Publikationen/Studien/definition-und-monitoring-der-versorgungssicherheit-an-den-europaeischen-strommaerkten.pdf?__blob=publicationFile&v=18 <https://www.bmwi.de/Redaktion/DE/Publikationen/Studien/definition-und-monitoring-der-versorgungssicherheit-an-den-europaeischen-strommaerkten.pdf?__blob=publicationFile&v=18>`_"
    "Fraunhofer ISI", "operation costs", "All rights reserved", "yes", "`https://www.ise.fraunhofer.de/content/dam/ise/de/documents/publications/studies/DE2018_ISE_Studie_Stromgestehungskosten_Erneuerbare_Energien.pdf <https://www.ise.fraunhofer.de/content/dam/ise/de/documents/publications/studies/DE2018_ISE_Studie_Stromgestehungskosten_Erneuerbare_Energien.pdf>`_"


Data manipulation
-----------------

For an in-depth description of how the data is used, transferred and combined
with assumptions in order to provide *POMMES* model inputs, please directly
refer to the `jupyter notebook <https://github.com/pommes-public/pommesdata/blob/dev/pommesdata/data_preparation.ipynb>`_.