410

Как программист квартиру снимал продолжение или ...

Друзья! Я очень рад и удивлен одновременно, что моя первая статья навела шороху здесь, на Пикабу)

Для тех, кто не в курсе, советую ознакомиться с первой частью, про то, как я и мой сосед по маёвскому общежитию, вчерашние студенты, невольно встали на путь борьбы с посредниками по аренде недвижимости и что из этого получилось

http://pikabu.ru/story/kak_programmist_kvartiru_snimal_ili__...

Как программист квартиру снимал продолжение или ... Труд, Длиннопост, Доска объявлений, Риэлтор, Поиск, Программирование, Аренда жилья, Авито

А теперь к делу.

В первой части был рассказан общий принцип работы недобросовестных риелторов и мошенников на досках объявлений.

В этой части речь пойдет о реальных методиках, которые применяются для того, чтобы сбить честного квартиросъемщика с толку, и как мы с такими "трюками" боремся, дабы выявить честных собственников из общей массы посредников.


В общем случае, агентские объявления и объявления мошенников оформлены нарочито качественно: у объявления есть фотография и не одна, заполнены все необходимые поля параметров, описание объявления очень подробное и на первый взгляд кажется, что публикующий приложил не мало усилий для этого, подошел к делу с толком.


Если не знать одно "но": в случае с мошенниками и агентами, оформляет объявление, как правило, специальный робот, по заранее подготовленному шаблону.

Именно поэтому простейший текстовый анализ выявляет сильную схожесть описаний объявлений у казалось бы совершенно разных квартир и продавцов(иначе говоря, наш баянометр орёт=)).


Однако было бы слишком наивно выявлять собственников только лишь по тому, как оформлено объявление, поэтому в нашей системе применяется комплексный подход, в котором мы анализируем:

телефон, текст описания, цену, адрес, фотографии, параметры объявления(например: этаж, материал стен, год постройки и т.д.) и даже количество просмотров у объявления.


Кроме этого, для того чтобы при анализе делать правильные выводы необходимо знать методики и трюки, которые применяют агенты и мошенники,

ниже я приведу краткое описание самых популярных трюков, замеченных на известной доске объявлений.


Эти простые советы позволят вам без каких-либо технических средств отсекать большой "кусок" посредников при поиске жилья.


1. "Идеальное объявление". Трюк стар как мир, основан на том, что каждый человек верит в чудо(или халяву, кому как удобно), верит в то, что сегодня реально снять квартиру в центре столицы с идеальным ремонтом меньше чем за 25 000 рублей, без комиссии, без залога(без смс, без регистрации, ага).

Вот один из наглядных примеров с известной доски объявлений.

Как программист квартиру снимал продолжение или ... Труд, Длиннопост, Доска объявлений, Риэлтор, Поиск, Программирование, Аренда жилья, Авито

Как правило, такой трюк рассчитан на недавно приехавших в Москву людей, иностранцев, туристов, которые еще не успели понять что к чему, опытный человек на такое не поведется.


Мы в свою очередь для того чтобы выявить такое объявление используем накопленные статистические данные.

Простым языком, наша система знает некоторую “среднюю цену”(медиану) аренды жилья с конкретными параметрами в том или ином районе города в данный момент, а также использует (пока еще небольшую) историю изменения этой “средней цены”.


2. "Как в кино!". Трюк очень похож на описанный в 1 пункте, применяется для привлечения внимания. По сути такое же "вкусное" объявление, только по цене и параметрам, как правило, близко к реальным.

Разница лишь в том, что фотографии объявления просто тупо "левые" картинки из интернета, часто любят вставлять картинки отрендеренной(отрисованной) 3D модели с каких-нибудь зарубежных сайтов интерьеров и проч.

"Фотографии" объявления получаются яркие, красочные, как в кино!

Как программист квартиру снимал продолжение или ... Труд, Длиннопост, Доска объявлений, Риэлтор, Поиск, Программирование, Аренда жилья, Авито

Простой поиск по этой картинке в google

Как программист квартиру снимал продолжение или ... Труд, Длиннопост, Доска объявлений, Риэлтор, Поиск, Программирование, Аренда жилья, Авито

Если видите что-то похожее - попробуйте выполнить поиск по картинке в любом из поисковиков.


3. "Собственник, агентам не звонить!!". Что удивительно, в последнее время частенько вот прямо так (с двумя восклицательными знаками в конце) стали писать в описании, якобы собственники.

Трюк основан на том, чтобы замаскировать агентское объявление под объявление собственника: публикуется объявление в разделе "частные", пишется, что без комиссии(иногда даже и без залога) заезжай и живи!


Однако, позвонив по такому объявлению оказывается, что продавец это агент(или брат,сват,тесть,дядь=)) и квартиру "вот только что уже сняли, но есть другая квартира, такая же хорошая".


У нас был комичный случай, когда наша программка обнаружила такое вот объявление спустя 10 секунд после его фактической публикации на известной доске объявлений и агент от неожиданности не очень складно рассказывал нам свою историю про "вот-вот только что перед вами звонили и сняли", и недоговорив, просто бросил трубку.


Обнаружить такое объявление в ручную довольно муторное занятие, для этого необходимо проверить был ли номер продавца использован где-то ранее и где используется сейчас.


Мы в своей системе используем предположение о том, что агент на один и тот же номер публикует больше одного жилья примерно в одно и то же время.


Бывают конечно случаи когда собственник сдает сразу несколько своих квартир в Москве, но мы с такими мажорами не водимся (шутка, мы обрабатываем и этот случай тоже).


4. "Меченные объявления". Легче всего объяснить, что это за зверь картинкой(часть номера скрыта мной):

Как программист квартиру снимал продолжение или ... Труд, Длиннопост, Доска объявлений, Риэлтор, Поиск, Программирование, Аренда жилья, Авито

Такие объявления, якобы защищены от копирования (к тому же телефон на картинке бросается в глаза), однако зачастую на картинках указан номер уже "раскрытого" агента, а в графе номер продавца указан подставной/левый новый номер.


Это очень интересный случай. Дело в том, что на известном сайте объявлений регистрация происходит по номеру телефона. Такие вот агенты/мошенники применяют специальные программы, смысл которых создавать каждое новое объявление с новым(подставным) номером и соответственно с новым продавцом, при этом на картинке такие программы указывают реальный номер агента. Стоит добавить, что схема интересна еще и тем, что даже позвонив по подставному номеру вы попадете все равно к агенту - достигается это правильной настройкой перенаправления звонка.


Поэтому если видите такое объявление сначала сверьте номер на картинке с номером указанным в номере продавца. Если номера разные - перед вами агент, а возможно и мошенник.


Это тот самый случай когда ручная обработка проще автоматической. В своей системе для выявления таких случаев мы используем оптическое распознавание текста на картинках (OpenCV модуль с обученным фильтром Neumann - Matas + Tesseract).


Распознав текст с картинки, система направляет его в модуль лексического анализа, откуда оно идет уже дальше по конвейеру обработки и уже в конце ему выносится вердикт.


5. "Новые номера". Это тоже самое что 4 случай, только без меченных картинок, просто новый "левый" номер, который перенаправляет вас на агента/мошенника.

Пожалуй это самый неприятный случай из описанных. Он тяжело распознаваем, как в ручном режиме так и в автоматическом.


Как мы это реализовали у себя, с вашего позволения оставлю в тайне.


Теперь хотелось бы сказать пару слов о нашей системе. Наш бесплатный сервис находит объявления от собственников, позволяя снять жилье без посредников и лишних переплат.


На данный момент мы завершили переезд сервера в Azure (почему именно туда, мы расскажем в следующей статье), однако часть сервисов по-прежнему развёрнуты в нашем "дата-центре", за которым пристально приглядывает наш пушистый заведующий=).

Как программист квартиру снимал продолжение или ... Труд, Длиннопост, Доска объявлений, Риэлтор, Поиск, Программирование, Аренда жилья, Авито

А так наш заведующий проводит ревизию кода проекта)

Как программист квартиру снимал продолжение или ... Труд, Длиннопост, Доска объявлений, Риэлтор, Поиск, Программирование, Аренда жилья, Авито

На данный момент мы обрабатываем данные по Москве и частично Московской области. Данные по Питеру находятся в процессе анализа.

Буквально на днях добавили поиск жилья на карте. Надеемся, что упростили процесс поиска для тех, кто планировал найти жилье в МО.

Как программист квартиру снимал продолжение или ... Труд, Длиннопост, Доска объявлений, Риэлтор, Поиск, Программирование, Аренда жилья, Авито

В остальном у нас всё по-прежнему, заходите, и выбирайте жилье без посредников

(кодовое слово: трупикабу)

Как программист квартиру снимал продолжение или ... Труд, Длиннопост, Доска объявлений, Риэлтор, Поиск, Программирование, Аренда жилья, Авито

В заключении хотелось бы сказать огромное спасибо пикабушникам, которые, работая с нашим сайтом, пользовались сервисом жалоб на объявления, вы - настоящие тру, друзья!


Я сам вдохновлен успехом пикабу и тем как это сообщество само по себе является этаким "санитаром леса", регулятором и модератором содержимого сайта.


К сожалению, пост и так получился длинным и не получилось осветить как следует технические моменты системы.


В следующем посте я постараюсь рассказать детально о стеке технологий и как все устроено с технической точки зрения.


P.S. Внимание! Загадка для внимательных. (Разгадка кроется в самих постах)


В начале поста я упомянул, что мы анализируем количество просмотров у объявлений, чтобы выявить агента или мошенника.


Вопрос: Как мы это делаем?


Тому кто ближе всего будет к разгадке отправим нашего заведующего "дата-центром"(шутка).


Удачных поисков!

Найдены возможные дубликаты

+14

Правильным путем идете товарищи! Надеюсь доживу до того прекрасного дня, когда подобное  будет не только в Мск Питер, но и в других городах.

раскрыть ветку 1
+2

AirBnB уже начинает напрягаться)

+10
Очень жду для Питера подобное, так как в данный момент нахожусь в поиске квартиры в северной столице:)
раскрыть ветку 3
+3

+ присоединяюсь

+1
та же фигня
0

И я с вами =)

+5

Помню, случился у меня в жизни печальный случай. Приехал на учёбу в Харьков и нужно было снять квартиру. Решили с другом снимать вдвоём (чтобы дешевле) и были очень расстроены тем как встретил незнакомый город. Обзвонив за несколько дней больше 30 объявлений, пришли к выводу, что в городе работает где-то 4 конторки (у каждой свой район). Некоторые агенты палилилсь и говорили, что я уже всех обзваниваю. Что примечательно, с каждым звонком агент называет разные имена, при том, что голос тот же. Еще они часто меняются - сначала трубку берёт мужчина, а в следующий раз уже женщина. По одному и тому же номеру, трубку брали 2 разные женщины и один мужчина.

Договорившись о встрече, мы выехали с сумками на указанное место. Но в этом месте не было их конторы, это был лишь увлекательный отправной пункт. Дальше, каждые пару минут приходилось набирать агента дабы узнать следующий "чекпоинт". И так раз 15, мы ходили от магазина до магазина, иногда кругами и наконец-то, измученные жарой и весом сумок, дошли до "офиса". Этот офис находился в магазине с вывеской "Надгробные плиты из гранита". Зайдя в маленькую комнатушку, увидел 9 лежащих мобилок на столе агента. Да и встретил нас не мужчина (который устроил нам экскурсию), а девушка. Сначала задала крайне идиотский вопрос - "по какой цене хотите снять квартиру?" (при том, что мы с ней же договаривались насчет определенной квартиры час назад). [Судя по её тону, ей по барабану было какую цену писать в конракт]. Ну мы назвали ей цену, а она предложила нам совсем левый вариант. Далее, дала нам контракт, который необходимо подписать, оплатить квартиру и поехать вселяться. Только тогда дошло, зачем агент водил нас кругами по городу - дабы мы устали и не могли вникнуть в текст контракта. И это сработало, мы, быстро просмотрев те 2 листика, оплатили по 750 грн. за месяц проживания в квартире, которой (как позже оказалось) не существовало.

Нам сказали, что вселиться необходимо до обеда (тогда было уже 11 часов) и дали номер хозяйки (правда на листике написали - Алина и Андрей и номер второго не дали). Мы приехали как раз вовремя (в 11:40) и набрали хозяйку. Минут 20 не брала трубку и взяла только когда начался обед. Сказала, что попробует отпросится и перезвонит через 15 минут. Не перезвонила, в итоге мы сами её набрали. Сказала, что её не отпустили, посему нам надо ждать окончания обеда и набрать её. Просидели 2 часа на лавочке и набрали её. В ответ на наши возмущения, хамовито ответила, чтобы мы ждали когда она вернется с работы.

В итоге мы просидели с сумками на лавочке до 7 вечера. Пока сидели, с нами завела разговор местная жительница и мы узнали, что именно в этом доме нет однокомнатных квартир. Хозяйка трубку не брала, созвонились с агентом и та сказала, что позвонит ей и узнает. Когда узнала, выяснилось, что хозяйка типо сильно устала и поехала домой. На вопрос "почему нас не мог вселить Андрей?" - тишина. Мы потребовали возвращение денег, а агент в попыхах стала нам другую квартирку искать. Спустя пол часа накидала нам 5 номеров (взятых из левых объявлений), из которых подошел только один. Агент сказала, чтобы мы поехали по тому адресу, переночевали и завтра в обед приехали вселяться. При том, она уточнила, что если мы снимем (по выбранному номеру) квартиру, она вернет часть суммы (с учетом, если вариант дешевле). Мы той ночью вселились, заплатили и на следующий день стали звонить агенту. Она сказала, что растрогла наш контракт, аргументируя это тем, что не может ждать и то, что мы уже сняли квартиру. Мы посетовали на её неправомерные действия и потребовали возвращение денег. Она грит "Без проблем, я подам заявку в бухгалтерию". Хотя какая к черту бухгалтерия, если у них офис состоит из двух комнатушек и все деньги лежат в ящике стола! После чего, добавила, что заявку будут рассматривать 2 недели, после чего перешлют на мою карточку. Как ни странно, наш контракт действителен всего 2 недели и по его истечению мы уже не сможем вернуть деньги. + в контракте, где агент вписала стоимость квартиры за месяц, было написано "плата за услуги компании". То-есть, по закону, мы заплатили просто за то, чтобы они нам нашли квартиру.

+4

Мне кажется просмотры можно посмотреть так

http://image.prntscr.com/image/2bfa6cb6504440158f006df54e128...

+6

Респект за проект!

Только с лингвистическим анализом имейте ввиду, что добротное годное описание могут использовать и простые арендодатели в качестве шаблона (я так сдавал). Было лень самому придумывать описание, взял с другого объявления и поменял цифры, ненужное зачеркнул и т.п.

раскрыть ветку 1
+1

+1

+3

Парни еще бы тоже самое с автомобилями сделать было бы шикарно))а то достали автосалоны и мошенники)

+3

1 чувак уже пытался пилить проект "sobnik" данные обрабатывались с помощь клиентских компьюеров(плагин к хрому), но у автора пропал запал(свяжитесь мб он поделится мыслишками/наработками) + его поделие с тем же успехом юзали риелторы.

А так удачи вам в этом начинании.


Azure взяли из-за bizspark, да?)


P.S. Боюсь что единственный способ борьбы с риелторами это на законодательном уровне запретить сдачу квартир агентам, с невзъебенными штрафами.

раскрыть ветку 2
0

Увы это рынок, а рыночные отношения контролирует государство. Если просто передать "риэлторские" полномочия некой другой структуре, то ничего не поменяется. Нужны четкие правила игры для всех, и неотвратимость наказания. Но пока одни готовы сдавать сами (в черную), а другие с риэлтором (в черную) есть выбор и уже каждый сам решает.

+3

мошенники и риелторы тоже читают пикабу, вскоре начнут пользоваться этим чудо сервисом, и загнётся оно, если не проработают как с ними бороться

раскрыть ветку 1
0

Все это можно решить специальными работниками которые будут обзванивать новые объявления:)

+1

Объявления же поднимаются в топ по количеству просмотров? Если так, то вот и анализируется позиция в топе и её измеенение.

+1
Пользуясь случаем, сдам квартиру на речном вокзале, 30к))
раскрыть ветку 8
+1

пользуясь случаем, я веган

раскрыть ветку 3
+1
Иллюстрация к комментарию
раскрыть ветку 2
0

Где находится, фотки, условия? В Сентябре буду искать и переезжать.

раскрыть ветку 3
+1

+1

0
Уже сдам к этому времени )
раскрыть ветку 1
+1
Потом начнётся монетизация проекта
раскрыть ветку 4
+10

Не вижу в этом ничего плохого.

раскрыть ветку 3
+10
Вдруг перекупят проект, и введут "золотой статус агента", чтобы его предложения все равно отображались. Или "верифицированный агент". Лишь бы такого не случилось :(:(
+1

Круговорот риэлторов в природе?

0

плохо тем, что в конечном счете, все расходы повесят на потребителя.

0
Нормальные агенты не зло, но я таковых не встречала.

Да и потом лучше если бы риелторы были ненавязанной услугой. Надо - привлек риелтора к поиску. Не надо - копаешься сам. А пока что 99% объявлений идут от агентов.



Ребята большие молодцы!
0
Спасибо большое за ваши посты.Вы молодцы,проделали просто грандиозную работу.Советовала вас своим друзьям,они удачно сняли однушку.Жаль,что нет поиска по районам.Очень нужно жильё в Котельниках на Белой Даче,но,к сожалению,не смогла найти.
Буду всем рассказывать про ваш сайт.Удачи вам!
раскрыть ветку 2
0

Спасибо большое вам!

раскрыть ветку 1
0

Доброго времени суток, вы в постах упоминали про проги по поиску и сбору объявлений. Не могли бы вы поделится их названием, а также аналогичными поисковиками в плане работы, ибо надоело выходить на одни  и те же вакансии через 10 левых сайтов. Заранее спасибо.

0

Хочу выразить вас свою благодарность - молодцы ребята, просто супер! Хотелось бы добавить поиск по карте, очень удобно, чтоб не лопатить фейки на "всем известном сайте", а сразу видеть реальные объявления у вас. Если есть такая техническая возможность. Спасибо еще раз, процветания вам!

раскрыть ветку 1
0

samssam, поиск по карте уже есть, причем сразу с ценой на карте

0

Ребят, обратите внимание. Картинки недопарсены. Возможно были добавлены после размещения объявления.


UPD. Прошу прощения... Это у вас фишка такая, не более 2-х картинок на карте размещать)))

мб их в слайдер загнать или попап?

Иллюстрация к комментарию
0

Сдаю через авито свою квартиру, без агентов и прочей нечисти.

Срок экспозиции обычно - один день, причем я заряжаю цену по максимуму чтобы было поменьше звонков.

И то потом звонят к каких нибудь стопагентов и прочих сервисов т.к. они не отслеживают снятые объявы с авито.

раскрыть ветку 1
0

Такое может быть, но не у нас, для отслеживания статуса объявления в нашей системе есть специальный компонент Pinger, о нем и о других тех. штуках напишем в следующим посте

0

Сделайте что-то подобное по курортным городам, потому что количество агентов и прочих обманщиков там просто немыслимо огромно.

Лучше начать как раз с Крыма.

0

хз как, но может анализ просмотров идет отправкой запроса к объявлению, скажем раз в 5 минут, и если с момента публикации(в зависимости от времени суток, когда опубликовано) объявление набирает кол-во просмотров больше N-го, то попадает в раздел СПАМ))

0

Вы - умнички)) Жилье в Мск мне пока нафиг не нужно, но плюсик поставлю и сайт сохраню в закладках))

0

Как выбрать подмосковный город? Например Фрязино-Ивантеевка...

раскрыть ветку 1
0

Можешь посмотреть на карте

0

зачем забиндили пробел под ентер?

задать параметры-> нажать "подобрать"->жмякнуть пробел ->страница ребутится.

0

И нашел небольшой баг, но бесит очень сильно

При вводе станции метро, которая начинается на "Б", почему-то отрабатывает нажатие Enter

раскрыть ветку 1
0

Ага, увидели, в ближайшее время поправим, спасибо!

0

куда заходить то?

раскрыть ветку 7
+1

В первом его посте вся инфа, там и ссылка есть. Для лл трудом.рф, кодовое слово трупикабу.

раскрыть ветку 6
0

я не понял куда кодовое слово вводить

раскрыть ветку 5
0

Добра вам))


А вообще, меня поражают ухищрения мошенников! Какие-то схемы, мутки, сложности... Работали бы все честно, была бы жизнь одно удовольствие)))

раскрыть ветку 1
0

Вы не представляете как тяжело с этими ухищрениями найти агента. Я когда переезжал в НиНо, пытался найти квартиру. Я забил на попытки найти самому и начал искать агента. Нашел хорошего, конечно, но это было тяжело.

0
Используя базу статистики? Нет же вроде ответа.
-3

1) А в такси в МСК платить 1000 р за поездку которая на автобусе 32 стоит - нет чувства что тебя обули? - это сервис и ты за него платишь..

2) Адекват есть, его напалмом не сожжешь.. а если сожжешь, то молодец, но сядешь на долго

3) Все незагуглишь

4) Есть спрос на услуги агентов, поэтому агенты будут

5) Тебе может и не нужен, но арендодателю может быть и нужен


Тебя послушать - все зло, деньги алкоголь комары агенты гаишники .. всех убрать и заживем!

-9

1)Единственный "+" работы без агента это экономия - на съем за год выходит 5%. Не супер...

2)Агент часто это уже фильтр, который много не адеквата уберет и вам время и нервы сэкономит.

3)Как ни странно агент работает по месту длительное время, может вас проконсультировать и т.п.

4)Как быть с ситуациями, когда собственники напрямую с к агенту обращаются, чтобы сдать жилплощадь?


А вообще - весь этот сервис , не более чем очередной коммерческий сайт.. и это ни плохо и ни хорошо. Сам же считаю что CIAN вполне годная вещь.

раскрыть ветку 2
+3

а если например представить паралельную вселенную, в которой абсолютно то же самое, только нет агентов, то в ней:

1) экономия, и отсутствие чувства, что тебя где-то наебали.

2)нет неадеквата и потери нервов(от неадекватных хозяев ни один агент не убережет)

3)зачем мне консультация? Я и сам могу загуглить что к чему

4)нет агентов, нет людей, которые к ним обращаются.

5)чтобы снять жильё, мне нужно просто на сайте найти объявление, позвонить и договорится. Зачем мне тут посредник?

А насчет сервиса, то ребята делают действительно годную вещь, и если это дело будет приносить деньги и окупаться, то ничего плохого я в этом не вижу, наоборот это принесет дополнительную мотивацию и финансовые вложения в проект отразятся на качестве в лучшую сторону.

Так что агенты и прочие посредники это зло, и было бы очень неплохо от них избавиться.

0
Агент детектед
ещё комментарии
Похожие посты
Возможно, вас заинтересуют другие посты по тегам: