OpenHazWaste: åben EU-benchmark for genkendelse af farligt affald

Forslag, version 0.1 · 20. oktober 2026

Flere udbydere taler om gode genkendelsesprocenter for kemiprodukter og farligt affald. En procent uden oplysning om, hvad der er målt, på hvilke billeder, og hvad der sker, når systemet svarer "ved ikke", kan ikke sammenlignes med noget. Det her er et åbent forslag til en fælles måling, som virksomheder, kommuner, genbrugspladser og forskere kan deltage i på de samme vilkår. Kemipilot har lavet udkastet og lader sig måle efter de samme regler som alle andre.

Hvad der måles

En genkendelsesprocent kan betyde fem forskellige ting. Forslaget skiller dem ad:

1. Identitet: er det rigtige produkt fundet?
2. Fare: er faren rigtig, det vil sige UN-nummer, ADR-klasse og faresætninger?
3. Fraktion: er den rigtige EU-affaldskode valgt, og er affaldet rigtigt vurderet som farligt eller ikke farligt?
4. Vejledning: er anvisningen til en konkret plads rigtig og sikker?
5. Sikkerhed: hvor ofte er svaret farligt forkert?

En påstand om en genkendelsesprocent skal sige, hvilket af de fem niveauer den gælder, og på hvilke billeder den er målt.

Opgaver

Benchmarken har fem spor, som rapporteres hver for sig:

• Spor A, kemikalier: forbrugs- og erhvervsprodukter, fra rengøring og maling til lim og laboratoriekemi.
• Spor B, batterier: kemi, format og tilstand, herunder beskadigede litiumceller.
• Spor C, trykflasker, gaspatroner og aerosoler: gastype, flasketype og grænsetilfælde som spraydåser med brækket knap.
• Spor D, vejledning: er den konkrete anvisning til en navngiven plads rigtig, når produktet er identificeret korrekt?
• Spor E, feltforhold: slidte etiketter, omhældte og umærkede beholdere, fremmede sprog og transportbånd med bevægelse.

Et fælles sprog: EU's affaldsliste

Facit og svar udtrykkes i affaldskoder fra EU's affaldsliste (Kommissionens afgørelse 2000/532/EF), i vurderingen farlig eller ikke farlig og i UN- og ADR-oplysninger. Så favoriseres ingen udbyders egne fraktioner. De konkrete beholdere på en plads varierer fra plads til plads og måles derfor i sit eget spor. Facit kommer fra produktets eget sikkerhedsdatablad (punkt 13 og 14) eller fra en ekspertvurdering, aldrig fra det system, der bliver målt.

Sådan rapporteres resultater

• Alle tal har et 95 %-konfidensinterval, fordi et resultat på et par hundrede billeder ellers siger mindre, end det ser ud til.
• Der rapporteres både dækning og præcision, så et system, der svarer "ved ikke" til alt, ikke ser bedre ud end et, der svarer.
• Hvert forkert svar får en alvorlighedsklasse fra "rigtigt" til "forkert vejledning, der kan skabe fare på stedet". Kravet til det forseglede testsæt er nul farlige fejl, ikke et gennemsnit.
• To systemer sammenlignes på de samme billeder med en parret test, ikke ved at sætte to procenttal side om side.
• Resultater med og uden opslag i udbyderens eget produktkatalog vises hver for sig, fordi det er den forskel, der siger noget om selve genkendelsen.
• Resultaterne vises pr. spor og aldrig som ét samlet tal.

Data og privatliv

Billederne viser produkter og emballage og intet andet:

• Billeder med ansigter, hænder, andre personer eller læselig personinformation udelades.
• Alle metadata fjernes, herunder GPS, tidspunkt og enhed.
• Billeder fra kunders medarbejdere indgår kun i det forseglede testsæt, som ligger hos en neutral part og ikke udgives.
• Butiks- og producentbilleder udgives ikke, fordi de er ophavsretligt beskyttede.
• De offentlige felter indeholder ingen navne på kunder, pladser eller medarbejdere.

Sådan deltager du

1. Læs protokollen, og kør scoreren på udviklingssættet.
2. Aflever dine svar på det forseglede sæt til den neutrale evaluator.
3. Resultatet offentliggøres pr. spor med systemets version og dato.
4. Alle følger de samme regler, også Kemipilot.

Skriv til kontakt@kemipilot.com for at deltage eller for at kommentere forslaget.

Status

Det her er et forslag. Der er endnu ikke offentliggjort resultater for noget system, heller ikke vores eget.

• Et pilotsæt er under opbygning. Spor B og C er tyndere end spor A, og vi fotograferer selv det, der mangler.
• Alvorlighedsklasserne skal gennemgås af kemikere, før de er endelige.
• Den neutrale evaluator er ikke aftalt endnu.
• Licens er foreslået, men ikke besluttet: åben kode (Apache-2.0) og åben protokol og taksonomi (CC BY 4.0).