Geavanceerd zoeken  

Nieuws:

Pagina's: [1]   Omlaag

Auteur Topic: Importeren Telmee bestanden  (gelezen 1532 keer)

0 leden en 1 gast bekijken dit topic.

hiskodevries

  • Forum beheerder
  • Offline Offline
  • Berichten: 47728
Importeren Telmee bestanden
« Gepost op: september 28, 2020, 10:52:58 am »

Vanuit het 'oude' waarneming.nl is een optie toegevoegd om Telmee exports toe te voegen aan Waarneming.nl
Vanuit https://waarneming.nl kies je in het menu voor 'Oude site'
Zorg dat je ook ingelogd bent op de oude site
On de menukeuze 'Invoeren' zie je een keuze Telmee import

Daarmee kun je een csv export vanuit Telmee in Waarneming.nl importeren

https://waarneming.nl/import/telmee_import.php

De volgende gegevens worden meegenomen
Soort
lokatiepunt
aantal
datum/tijd
kleed *
gedrag *
geslacht

* vermits te matchen met de bij ons bekende gegevens

De import begint met een controle of de essentiële kolommen aanwezig zijn:
soort/datum/lat/lon/aantal
Als die kloppen gaat de import verder.
Tijdens dit proces kun je foutmeldingen krijgen over 'Soort bestaat niet'  of 'Deze waarneming hoort op een andere site terecht' of 'voor deze waarneming is geen exacte datum bekend'
Mocht voor de combinatie Soort/datum en locatie punt al een waarneming van jou bestaan wordt die overgeslagen.

« Laatst bewerkt op: september 29, 2020, 12:38:17 pm door hiskodevries »
Gelogd
Was getekend Hisko de Vries.

Wil je een fotovraag stellen op het forum lees dan dit eerst https://forum.waarneming.nl/smf/index.php?topic=452369.0

ajdees

  • Validator
  • Offline Offline
  • Berichten: 456
Re: Importeren Telmee bestanden
« Reactie #1 Gepost op: januari 09, 2021, 19:50:24 pm »

Omdat ik graag mijn waarnemingen die in Telmee staan in Waarneming.nl wil zien, heb ik de import functionaliteit voorzichtig gebruikt en wat ervaringen opgeschreven met onderstaand verslag als resultaat. Ik denk dat het ook gelezen kan worden als handleiding.

https://waarneming.nl/import/telmee_import.php
Deze pagina begint met de volgende waarschuwing: “LET OP, open het het gedownloade bestand niet zelf met een spreadsheet programma”.
Voordat ik iets importeer wil ik controleren of ik het er wel mee eens ben en of alles staat zoals het moet staan in de dataset. Een kopie van de Telmee-export heb ik daarom geopend in Excel. Daarin trof ik veel aan wat me niet beviel en na wat testjes met kleine aantallen waarnemingen bleken er veel fouten op te treden. De bovenstaande waarschuwing heb ik daarom genegeerd. Het blijkt dat als je de Telmee-export opent in Excel, bewerkt en opslaat als .csv, deze prima geïmporteerd kan worden.
“Dubbele records worden voorkomen door een check op datum, soort, kleed, geslacht en punt”. 
Ook lijkt dat de check op dubbele waarnemingen niet foutloos. Zo heb ik nu twee identieke waarnemingen van Volucella inanis (?) op 1996-08-05:
https://waarneming.nl/observation/205411996/
https://waarneming.nl/observation/205394489/

Hieronder per kolom uit de Telmee-export mijn bevindingen.

Kolom 1: status      wordt niets mee gedaan, denk ik. Mag ook leeg zijn.

Kolom 2: nederlandse naam   wordt niets mee gedaan, denk ik. Mag ook leeg zijn.

Kolom 3: wetenschappelijke naam   noodzakelijk. Enkele soorten worden niet herkend door gewijzigde taxonomie (bijv. Sylvia communis = Curruca communis, Athene vidalii = Athene noctua). Hiervan krijg je bij uploaden een foutmelding. Waarnemingen van een genus eindigen in Telmee op ‘sp. indet.’, wat niet wordt herkend. Vervang ‘sp. indet.’ door ‘spec.’ d.m.v. Zoeken en Vervangen.

Kolom 4: determinatie onzeker      wordt overgenomen, waarneming wordt geïmporteerd als ‘onzeker’.

Kolom 5: datum   noodzakelijk. Bij veel van mijn waarnemingen staat er naast de datum ook een tijdsaanduiding. Sommige zijn correct maar velen zijn onzin variërend tussen 00:10:00 en 00:55:00.  Dit is op te lossen door de weergave aan te passen: cellen (of hele kolom) te selecteren, rechtermuis Celeigenschappen, tabblad Getal: Datum, Type: *14-3-2012. De tijdsaanduiding wordt dan genegeerd. edit 13-1-2021: overname van datum is inmiddels verbeterd.

Kolom 6: einddatum   moet leeg zijn. Als er een datum in staat, krijg je een foutmelding dat er ‘geen exacte datum bekend is’.

Kolom 7: telonderwerp      wordt niets mee gedaan, denk ik. Mag ook leeg zijn.

Kolom 8: telmethode   wordt niets mee gedaan, denk ik. Mag ook leeg zijn.

Kolom 9: aantal      noodzakelijk. Als deze cel leeg is (Kolom 8: ‘voorkomen‘), wordt de waarneming geïmporteerd met aantal ‘0 onbekend’. De betekenis van ‘0 onbekend’ is me niet duidelijk, vandaar het forum topic betekenis aantal 'o onbekend' (waarneming.nl). edit 13-1-2021: bij aantal = 0 wordt nu ook naar abundantie gekeken. Abundantieklasse is 'aanwezig', dan wordt aantal 1.

Kolom 10: abundantieklasse   wordt niets mee gedaan, denk ik. Niet mee geëxperimenteerd. Zie kolom 9

Kolom 11: stadium   wordt overgenomen maar gaat niet altijd goed. ‘Zie opmerking’ wordt  Stadium: onbekend. Bij geleedpotigen (behalve vinders, spinnen?) gebruikt Telmee de term ‘adult’ voor het volwassen stadium terwijl Waarneming.nl ‘imago’ gebruikt. Deze waarnemingen worden geïmporteerd met stadium ‘onbekend’ wat natuurlijk jammer is. Oplossing: bij geleedpotigen ‘adult’ vervangen door ‘imago’ of zoals bij de vlinders staat ‘imago (adult)’. Lastig is wel, dat de Telmee-export geen taxonomie bevat; je moet dus alle geleedpotigen selecteren uit een alfabetische lijst met alle taxa (filter op bovenste rij). Als de cel leeg is, wordt de waarneming geïmporteerd met stadium ‘onbekend’. 'nimf' wordt niet herkend, dit veranderen naar 'larve/nimf'. edit 13-1-2021: kolom 11 wordt ook gebruikt bij bepaling van dubbele waarnemingen.

Kolom 12: sekse   wordt overgenomen, gaat goed. Als de cel leeg is, wordt de waarneming geïmporteerd met geslacht ‘onbekend’. edit 13-1-2021: kolom 12 wordt ook gebruikt bij bepaling van dubbele waarnemingen.

Kolom 13: plaats   wordt niets mee gedaan, denk ik. Mag ook leeg zijn. Echter, wanneer Telmee in dit veld een puntkomma ‘;’ heeft staan, wordt hierdoor de cel gesplitst en schuiven alle volgende velden bij de betreffende waarneming op naar rechts, waardoor o.m. de kolommen met coördinaten onzinnige data bevatten en de waarneming niet kan worden geïmporteerd. Ook bij het importeren van een ongeopende Telmee-export gaat dit om dezelfde reden niet goed. Dit kan (door mij) alleen handmatig worden opgelost in de Telmee-export.

Kolom 14: type      wordt niets mee gedaan, denk ik. Mag ook leeg zijn.

Kolom 15: x-hok   wordt niets mee gedaan, denk ik. Mag ook leeg zijn.

Kolom 16: y-hok   wordt niets mee gedaan, denk ik. Mag ook leeg zijn.

Kolom 17: x-centrum   wordt niets mee gedaan, denk ik. Mag ook leeg zijn.

Kolom 18: y-centrum   wordt niets mee gedaan, denk ik. Mag ook leeg zijn.

Kolom 19: x-grootte   wordt niets mee gedaan, denk ik. Mag ook leeg zijn. In kolom 19 en 20 staat informatie over de nauwkeurigheid van de waarneming, maar alle waarnemingen worden geïmporteerd met een nauwkeurigheid van 10 meter.

Kolom 20: y-grootte   wordt niets mee gedaan, denk ik. Mag ook leeg zijn.

Kolom 21: lat   noodzakelijk

Kolom 22: long   noodzakelijk

Kolom 23: activiteit   wordt overgenomen, gaat goed. Als de cel leeg is, wordt de waarneming geïmporteerd met activiteit ‘ter plaatse’.

Kolom 24: biotoop   wordt niets mee gedaan, denk ik. Niet mee geëxperimenteerd

Kolom 25: determinatie      wordt niets mee gedaan, denk ik. Niet mee geëxperimenteerd

Kolom 26: methode   wordt niets mee gedaan, denk ik. Mag ook leeg zijn.

Kolom 27: verblijfplaats      wordt niets mee gedaan, denk ik. Niet mee geëxperimenteerd

Kolom 28: doodsoorzaak   wordt niets mee gedaan, denk ik. Niet mee geëxperimenteerd

Kolom 29: substraat   wordt niets mee gedaan, denk ik. Niet mee geëxperimenteerd

Kolom 30: oorsprong   wordt niets mee gedaan, denk ik. Niet mee geëxperimenteerd

Kolom 31: apparatuur   wordt niets mee gedaan, denk ik. Niet mee geëxperimenteerd

Kolom 32: lengteklasse   wordt niets mee gedaan, denk ik. Niet mee geëxperimenteerd

Kolom 33: opmerkingen   Deze wordt overgenomen en dat is supergoed. Echter, wanneer Telmee in dit veld een apostrof ‘’’ heeft staan bijv in het woord ‘s’ morgens’, wordt hierdoor in de Telmee-export de cel gesplitst en wordt de tekst na de apostrof in de volgende cel geplaatst. Handmatig oplossen in de Telmee-export.
 
« Laatst bewerkt op: maart 02, 2021, 23:38:34 pm door ajdees »
Gelogd
met vriendelijke groeten,
Albert Dees
Pagina's: [1]   Omhoog
 

Pagina opgebouwd in 0.06 seconden met 20 queries.