NIA geeft een heel merkwaardig resultaat? / NIA gives a very strange result?

Gestart door hiskodevries, juli 12, 2022, 19:43:28 PM

Vorige topic - Volgende topic

Gerrian

Citaat van: arnoldwijker op oktober 03, 2023, 13:26:56 PMWaarom is in de nieuwste versie het herkennen van voorheen prima herkende groepen als lieveheersbeestjes en wantsen zo'n drama geworden? Vaak wordt niet eens wat er op lijkt / totaal andere soortgroep voorgesteld.
Veel vliegen gaan weer wel veel beter.
Ik heb niet de indruk dat lieveheersbeestjes in de nieuwe versie slechter herkend worden dan in de oude. Ook in de oude versie zat de beeldherkenning er soms volkomen naast, zo werd het veelstippig Aziatisch lieveheersbeestje regelmatig regelmatig met grote stelligheid voor citroenlieveheersbeestje uitgemaakt.
Ik heb net een aantal waarnemingen van het twintigvleklieveheersbeestje door de beeldherkenning gehaald. Daar kwam meestal de juiste naam uit met een redelijk hoog percentage zekerheid. In de oude versie heb ik nooit meegemaakt dat de juiste naam voor deze soort naar boven kwam.
Dat larven en poppen veel minder vaak voor imago worden uitgemaakt, vind ik ook een verbetering.

Ik vrees dat lieveheersbeestjes voorlopig wel lastig blijven voor de beeldherkenning door hun bolle vorm en glimmende dekschilden. Een spiegeling kan zomaar voor een stip worden aangezien door de beeldherkenning.
Als validator van lieveheersbeestjes zou ik dan ook graag zien dat waarnemers wat meer naar het beest en minder naar het percentage kijken. Ook een voorspelling >90% zou géén reden moeten zijn de suggestie zondermeer over te nemen. Altijd eerst vergelijken met foto's van goedgekeurde exemplaren van de voorgestelde soort.

Henk Soepenberg

Citaat van: hiskodevries op oktober 06, 2023, 09:19:28 AMArnold, denk eens met mij mee over de overeenkomsten .
De fotos die fout gaan zijn haarscherp en beeldvullend.
Kunnen we nog meer overeenkomsten zien ?

Een contrastarme achtergrond? Volledig bijgesneden voorspelt NIA bij alle drie de voorbeelden van Arnold de goede soort (3 x 100%).
Vriendelijke groeten,
Henk

hiskodevries

Henk, het zou kunnen. Met dat probleem hebben we eerder geworsteld, maar toen speelde het bij veel meer soortgroepen.
Was getekend Hisko de Vries.

Wil je een fotovraag stellen op het forum lees dan dit eerst https://forum.waarneming.nl/smf/index.php?topic=452369.0

KoenVerhoogt

Er komen de laatste tijd wel heel veel waarnemingen binnen bij de korstmossen die een totaal andere groep zijn. Hier een greep uit de eerste 50 openstaande waarnemingen van vandaag, 6 daarvan zijn dus niet eens korstmossen (en nog eens 12 waren een totaal andere soort dan op de foto stond). Dat zijn best behoorlijke percentages...

https://waarneming.nl/observation/290086738/
https://waarneming.nl/observation/290090645/
https://waarneming.nl/observation/290090817/
https://waarneming.nl/observation/290090991/
https://waarneming.nl/observation/290091395/
https://waarneming.nl/observation/290094047/
Met vriendelijke groet, Koen Verhoogt
Favoriete soortgroepen: Korstmossen en Kevers
6237 soorten tot nu toe

https://waarneming.nl/user/photos/102250[/url

hiskodevries

Koen, het gaat in dit topic vooral om structurele fouten. Daar waar een trend is te zien.
Was getekend Hisko de Vries.

Wil je een fotovraag stellen op het forum lees dan dit eerst https://forum.waarneming.nl/smf/index.php?topic=452369.0

KoenVerhoogt

Tja wanneer spreek je van een trend.... Ik vind dat als er meer dan 10% van de waarnemingen via obsidentify als korstmos binnenkomen welke eigenlijk een paddenstoel zijn best een trend. Vooral als dit pas gebeurt sinds de nieuwe versie van de NIA
Met vriendelijke groet, Koen Verhoogt
Favoriete soortgroepen: Korstmossen en Kevers
6237 soorten tot nu toe

https://waarneming.nl/user/photos/102250[/url

hiskodevries

Koen, ik ga straks onderzoeken of dat gewijzigd is. Dat moet met een query kunnen
Was getekend Hisko de Vries.

Wil je een fotovraag stellen op het forum lees dan dit eerst https://forum.waarneming.nl/smf/index.php?topic=452369.0

hiskodevries

#97
Koen, zie hier https://old.waarneming.nl/hisko/nia_mismatches.php?g=12 
via obsidentify binnengekomen als de soort die getoond wordt en waarvan later de soort is gewijzigd naar een andere soort. De details kun je ophalen als je op een soortnaam klikt.
Dit overzicht https://old.waarneming.nl/mobiele_app_validation_stats.php?sg=12&maand=0&new_users=0 geeft aan dat het percentage 'goedgekeurd zonder wijziging ' toeneemt sinds september . Kan natuurlijk door een achterstand komen. of toch een verbetering
Was getekend Hisko de Vries.

Wil je een fotovraag stellen op het forum lees dan dit eerst https://forum.waarneming.nl/smf/index.php?topic=452369.0

hiskodevries

#98
Citaat van: hiskodevries op oktober 10, 2023, 12:43:54 PMtoeneemt sinds september . Kan natuurlijk door een achterstand komen. of toch een verbetering
zegt ook niets dus, want bij wantsen is daar geen verslechtering zichtbaar
Kleine aanpassing in https://old.waarneming.nl/mobiele_app_validation_stats.php?sg=12&maand=0&new_users=0 gemaakt. Een aparte kolom voor als de soort is gewijzigd naar een andere soortgroep dan geselecteerd, ongeacht de validatie status.
Ik zie daar nog geen trend
Was getekend Hisko de Vries.

Wil je een fotovraag stellen op het forum lees dan dit eerst https://forum.waarneming.nl/smf/index.php?topic=452369.0

arnoldwijker

Citaat van: Henk Soepenberg op oktober 09, 2023, 10:27:07 AM
Citaat van: hiskodevries op oktober 06, 2023, 09:19:28 AMArnold, denk eens met mij mee over de overeenkomsten .
De fotos die fout gaan zijn haarscherp en beeldvullend.
Kunnen we nog meer overeenkomsten zien ?

Een contrastarme achtergrond? Volledig bijgesneden voorspelt NIA bij alle drie de voorbeelden van Arnold de goede soort (3 x 100%).

En als ik de meeldauwlieveheersbeestje helemaal niet crop komt NIA ook weer met een goed resultaat. De achtergrond is dan nog steeds net zo egaal groen als op de gecropte foto. Er blijft dus wel iets merkwaardigs in NIA zitten...
Bijzonder is dat de software herkenning van iNaturalist het niet uitmaakt of je wel of niet cropt bij zo'n foto: komt altijd met hetzelfde juiste resultaat.

Martijn van Sluijs

#100
Gentianella spec. wordt door de nieuwe versie zeer vaak als Gesnaveld klauwtjesmos benoemd. Hier een selectie:
https://observation.org/observation/290478177/
https://observation.org/observation/289873344/
https://observation.org/observation/289867852/
https://observation.org/observation/289602385/
https://observation.org/observation/289529631/
https://observation.org/observation/289529341/
https://observation.org/observation/289463545/
https://observation.org/observation/290362941/
https://observation.org/observation/289197186/
https://observation.org/observation/289150314/
https://observation.org/observation/288945671/
https://observation.org/observation/288933922/
https://observation.org/observation/288771355/
https://observation.org/observation/288575374/
https://observation.org/observation/288409626/
https://observation.org/observation/288197026/
https://observation.org/observation/288189836/
https://observation.org/observation/288165866/
https://observation.org/observation/287893350/
https://observation.org/observation/287893303/
https://observation.org/observation/288338730/
https://observation.org/observation/287747692/
https://observation.org/observation/287735266/
https://observation.org/observation/287706397/
https://observation.org/observation/287695804/
https://observation.org/observation/287571677/
https://observation.org/observation/287150493/
https://observation.org/observation/287332287/
https://observation.org/observation/287070434/
https://observation.org/observation/288634425/
https://observation.org/observation/287117139/
https://observation.org/observation/287921867/

In mindere mate belandt Gentianella spec. ook bij Gewoon puntmos:
https://observation.org/observation/287916392/
https://observation.org/observation/289008504/

En bij Gewoon dikkopmos:
https://observation.org/observation/286972388/
https://observation.org/observation/287773654/
https://observation.org/observation/287873111/
https://observation.org/observation/287924317/
https://observation.org/observation/288204163/

Hiernaast is bij Gewoon muursterretje een toename te zien tov voorheen van dingen die duidelijk geen Gewoon muursterretje zijn (veenmos, plant, etc.): https://observation.org/species/17659/photos/?advanced=on&page=1. Dit geldt ook voor Gewoon dikkopmos.

Dit soort soortgroepoverschrijdende fouten zijn extra problematisch tov 'normale' fouten door NIA omdat we ze als plantenvalidatoren niet op kunnen pakken omdat ze buiten onze soortgroep worden ingevoerd, terwijl het wel planten zijn. Relevant hierbij is dat mossen/korstmossen amper gevalideerd worden op obs, en we ze dus ook niet op die manier alsnog 'terug' krijgen.

Edit: in een paar gevallen zijn waarnemingen afgekeurd ipv verplaatst naar de juiste soortgroep zie ik nu, die kunnen we als plantenvalidatoren dan natuurlijk ook niet oppakken.
Vriendelijke groeten,
Martijn

lukasverboom

Citaat van: Martijn van Sluijs op oktober 14, 2023, 13:32:00 PMRelevant hierbij is dat mossen/korstmossen amper gevalideerd worden op obs, en we ze dus ook niet op die manier alsnog 'terug' krijgen.

Wij zijn een beetje moe geworden van obsidentify in het buitenland... Valideren is een beetje als proberen iets te herkennen zonder loepje van een meter afstand, en zo durf ik buiten NW-Europa bijna niks op naam te brengen. Dan moet alles op NTB, een verzamelgroep of afgekeurd, en dat gaat snel vervelen.

Dit kan allemaal naar Gentianella sp.? Dan doe ik dat binnenkort even.
Groet,
Lukas

Marien bioloog
Favoriete groepen: korstmossen, mossen, schelpen, vleermuizen, mariene dingen.

Korstmossen in de tuin? https://forum.waarneming.nl/index.php/topic,464730.0.html

Martijn van Sluijs

#102
Citaat van: lukasverboom op oktober 14, 2023, 14:52:58 PM
Citaat van: Martijn van Sluijs op oktober 14, 2023, 13:32:00 PMRelevant hierbij is dat mossen/korstmossen amper gevalideerd worden op obs, en we ze dus ook niet op die manier alsnog 'terug' krijgen.
Wij zijn een beetje moe geworden van obsidentify in het buitenland... Valideren is een beetje als proberen iets te herkennen zonder loepje van een meter afstand, en zo durf ik buiten NW-Europa bijna niks op naam te brengen. Dan moet alles op NTB, een verzamelgroep of afgekeurd, en dat gaat snel vervelen.
Het was puur een (hierbij relevante) vaststelling, en absoluut niet bedoeld op een 'wijzende' manier! Ik ken de achtergrond, en ik begrijp de redenen goed.

Citaat van: lukasverboom op oktober 14, 2023, 14:52:58 PMDit kan allemaal naar Gentianella sp.? Dan doe ik dat binnenkort even.
Bedankt voor het aanbod, maar laat ze iig voorlopig graag even staan als voorbeelden. Nu is het inderdaad wel op te lossen door ze handmatig over te zetten, maar als het nu al om deze aantallen sinds september gaat, dan hoop ik dat er wel naar gekeken wordt of er een oplossing binnen NIA mogelijk is voor volgend piekseizoen. Anders wordt de lijst volgend jaar om handmatig om te zetten wel heel lang.
Vriendelijke groeten,
Martijn

jack_windig

Heel vreemd, dit is nu al 3de maal vandaag dat ik een Kleverige Koraalzwammetje tegen kom gedetermineerd als een microvlinder, wel 3 x een andere soort:
https://waarneming.nl/observation/290815894/
en
https://waarneming.nl/observation/290719176/

die derde kan ik zo gauw niet terugvinden

robbe p

https://waarnemingen.be/species/131229/observations/?advanced=on
https://waarnemingen.be/observation/290792053/

Deze twee worden vrij veel gesuggereerd sinds de nieuwe update in september. Het zijn altijd mossen, een deel ervan is ook al gewijzigd naar mos onbekend.

RutgerB


KoenVerhoogt

Citaat van: hiskodevries op oktober 10, 2023, 13:13:06 PM
Citaat van: hiskodevries op oktober 10, 2023, 12:43:54 PMtoeneemt sinds september . Kan natuurlijk door een achterstand komen. of toch een verbetering
zegt ook niets dus, want bij wantsen is daar geen verslechtering zichtbaar
Kleine aanpassing in https://old.waarneming.nl/mobiele_app_validation_stats.php?sg=12&maand=0&new_users=0 gemaakt. Een aparte kolom voor als de soort is gewijzigd naar een andere soortgroep dan geselecteerd, ongeacht de validatie status.
Ik zie daar nog geen trend
Ik weet natuurlijk niet hoe deze tabel is opgebouwd, maar kloppen doet ie niet. De praktijk is dat er enkele tientallen waarnemingen per dag(!) worden gewijzigd naar een andere soortgroep. Dat die aantallen niet in jou tabel staan betekend niet dat het niet gebeurd...
Hier weer een greep uit de eerste ~30 openstaande waarnemingen van vandaag
https://waarneming.nl/observation/291385999/
https://waarneming.nl/observation/291382249/
https://waarneming.nl/observation/291379345/
https://waarneming.nl/observation/291380310/
Met vriendelijke groet, Koen Verhoogt
Favoriete soortgroepen: Korstmossen en Kevers
6237 soorten tot nu toe

https://waarneming.nl/user/photos/102250[/url

hiskodevries

Koen, dat viel mij ook al op, dat die getallen wel heel erg laag waren
Was getekend Hisko de Vries.

Wil je een fotovraag stellen op het forum lees dan dit eerst https://forum.waarneming.nl/smf/index.php?topic=452369.0

hiskodevries

Was getekend Hisko de Vries.

Wil je een fotovraag stellen op het forum lees dan dit eerst https://forum.waarneming.nl/smf/index.php?topic=452369.0

armin.dahl

bug or project?
i would like to understand what happened here  :huh:
https://observation.org/observation/291149304/

interesting feature "does not occur" but how to manage it?
291149304 Cepaea_nemoralis_bug_.JPG


there are some other observations like that, e.g.
Cepaea nemoralis forma P00300
https://observation.org/observation/290592730/


Armin: https://observation.org/users/116008/
A fool is a man who never tried an experiment in his life. - Erasmus Darwin

Frank van de Putte

Citaat van: armin.dahl op oktober 23, 2023, 15:33:01 PMbug or project?
i would like to understand what happened here  :huh:
https://observation.org/observation/291149304/


Some years ago there was a project to identify / register these different variants (forma) of that snail-species. But since that project has ended, these "forma" are not "active" anymore, but apparantly are still in the NIA model; all these forma should lead to the general species Cepaea nemoralis.
Groetjes,

Frank van de Putte

hiskodevries

This in itself has nothing to do with NIA, but with the use of very outdated species lists.
In this case the advice is to change the species and advise the user to refresh his specieslists in Iobs
Was getekend Hisko de Vries.

Wil je een fotovraag stellen op het forum lees dan dit eerst https://forum.waarneming.nl/smf/index.php?topic=452369.0

lukasverboom

Citaat van: hiskodevries op oktober 24, 2023, 14:57:48 PMThis in itself has nothing to do with NIA, but with the use of very outdated species lists.
In this case the advice is to change the species and advise the user to refresh his specieslists in Iobs
The problem is that NIA suggests this taxon (95% certainty). I thought they were removed from the model?
Groet,
Lukas

Marien bioloog
Favoriete groepen: korstmossen, mossen, schelpen, vleermuizen, mariene dingen.

Korstmossen in de tuin? https://forum.waarneming.nl/index.php/topic,464730.0.html

hiskodevries

Yes, i thought also , and they are. We have to review the species mapping
Was getekend Hisko de Vries.

Wil je een fotovraag stellen op het forum lees dan dit eerst https://forum.waarneming.nl/smf/index.php?topic=452369.0

hiskodevries

Was getekend Hisko de Vries.

Wil je een fotovraag stellen op het forum lees dan dit eerst https://forum.waarneming.nl/smf/index.php?topic=452369.0

KoenVerhoogt

Citaat van: hiskodevries op oktober 23, 2023, 12:33:20 PMbinnenkort nieuwe cijfers
Heb je toevallig al tijd gehad om hierin te duiken? Ik ben namelijk een beetje op het punt er de brui aan te geven. Slechte foto's kan ik nog wel hebben. Elke dag tientallen waarnemingen wijzigen omdat de soortgroep niet eens klopt ergert me mateloos
Met vriendelijke groet, Koen Verhoogt
Favoriete soortgroepen: Korstmossen en Kevers
6237 soorten tot nu toe

https://waarneming.nl/user/photos/102250[/url

hiskodevries

Koen, de cijfers die nu door https://old.waarneming.nl/mobiele_app_validation_stats.php?sg=12&maand=0&new_users=0 worden gegenereerd zouden goed moeten zijn.
Let op dit zijn alleen obsidentify waarnemingen waarover de data gegenereerd wordt.
Ja je ziet een toename sinds augustus. Dat is heel vervelend natuurlijk.
Was getekend Hisko de Vries.

Wil je een fotovraag stellen op het forum lees dan dit eerst https://forum.waarneming.nl/smf/index.php?topic=452369.0

Matthijs Molenaar

Er komen steeds meer verkeerde soortgroepen binnen (zeker met de toename van waarnemingen, dan verandert het aantal van verkeerde soortgroepen ook mee) - van paddenstoelen tot algen tot planten. Opvallend: het is er eigenlijk pas sinds de nieuwe versie van NIA. Hoe kan dit?
En op een dag wijzig ik minstens 20 waarnemingen naar een andere soortgroep (en ben zeker niet de enige, denk ik), dus het aantal in de link klopt zeker niet. Verder ben ik het helemaal met Koen eens!  :blink:
Met vriendelijke groet,
Matthijs Molenaar.

Levenslijst Waarneming.nl

When nothing goes right, go left (Martha Cecilia)

hiskodevries

#118
dan zie ik graag wat van die waarnemingen hier. dam kan ik eens kijken hoe de wijzigingen dan wel gelogd zijn.
Die toename zie ik ook, zoals al eerder gezegd. Waarom ? dat weet ik niet natuurlijk.
De voorbeelden van Koen in https://forum.waarneming.nl/index.php/topic,495873.msg2578282.html#msg2578282 heb ik alle vier getest en worden keurig geteld in dat overzicht
Was getekend Hisko de Vries.

Wil je een fotovraag stellen op het forum lees dan dit eerst https://forum.waarneming.nl/smf/index.php?topic=452369.0