а ведь начал писать ответ типа вот, ты можешь в той же функции, где набиваешь item, вызвать просто еще раз эту же функцию по тому же линку с отключенным dupefilter, если определил, что что-то не так. А потом подумал, не может быть шоб такого не спрашивалось раньше, в итоге тупо первая ссыль в гугле, и даже с кодом)