for /F "delims=," %%f IN (lista.txt) DO (
  if exist %%f (
    echo OK %%f
  ) else (
    echo Nincs ilyen fajl vagy konyvtar: %%f
  )
)
pause