Как работают дубли объявлений в парсере?

Парсер опеределяет дубли только, когда точно уверен, что это дубль. Критерия по которым происходит определение:

Для категории Квартиры
  • region - Регион
  • district - Район
  • locality - Населенный пункт
  • street - Улица
  • house - Дом
  • rooms - Кол-во комнат
  • floor - Этаж
  • area - Площадь

Для категории Комната

  • region - Регион
  • district - Район
  • locality - Населенный пункт
  • street - Улица
  • house - Дом
  • floor - Этаж
  • floors_total - Этажность
  • area - Площадь

Для категории Дома:

  • region - Регион
  • district - Район
  • locality - Населенный пункт
  • street - Улица
  • house - Дом
  • area - Площадь

 Если все эти параметры одинаковы, то объект объявляется дублем. Если хоть одного из параметров нет (на одной площадке например может быть номер дома, а на другом нет),то такие объекты мы не ставим как дубль.

Исключением является площадь, которую мы берем в некотором диапазоне.