ondragleave se provede pokaždém najetí na element

Dobrý den,
mám script, který přidá do HTML objekt, kam má uživatel hodit nějaký soubor pro upload (podobně jako Google obrázky):

To pracuje bez problémů.
Problém ale nastane, pokud chci přidaný element opět smazat když uživatel se souborem odjede mimo stránku. Script funguje, ale má i nežádoucí "účinky". Pokud totiž uživatel se souborem najede na stránce na nějaký element (div, table..) tak se provede ondragleave.


Moje otázka je tedy prostá. Kde dělám prosím vás chybu?
Děkuji

EDIT: Tak sem zjistil, že ondragenter a najetí na nějaký element začne do HTML spamovat tu tabulku, kam má uživatel soubor hodit (což je také špatné).