Напоминаю по моей ленте, посвящённой проекту WSS, что согласно посту http://pikabu.ru/story/_2972349 я всё ещё ищу волонтёров-разработчиков, согласных поучаствовать в обмен на применение инструмента в личных целях. Как связаться - описано в предыдущем посте.
После нескольких первых постов число подписчиков у меня достигло 8 и довольно жёстко встало на этом числе, редко отклоняясь даже на единицу - что говорит о значительном интересе к проекту со стороны маленького коллектива.
А для всех постов, при условии нахождения в глубоком минусе, среднее значение числа плюсов равно 8,25 и исключая первую треть постов это значение достигает большой стабильности - значит систематически "плюсуют" почти только мои подписчики, что подтверждает свидетельства их заинтересованности в проекте.
В проекте много работы для кодинга, отладки, ковыряния в данных и придумывания работы поисковых алгоритмов. Мы уже начали полное переписывание всего кода на ЯП общего назначения. Предлагаю с сохранением анонимности всем заинтересованным подписчикам (и можно не только подписчикам) связаться по e-mail Widescreenscreening на яндексе по любым вопросам о проекте и сотрудничестве. Надеюсь на адекватные диалоги.
Привет, Pikabu, обещанный пост про "человеческое" описание WideScreenScreening.
Отношения это весьма серьёзная вещь, потому вопросы отношений нужно решать либо очень хорошо, либо никак - промежуточный вариант с плохими отношениями причиняет много проблем и отнимает много ресурсов за долгое время, потому недопустимо относиться к построению отношений спустя рукава - использовать слабые методы выбора партнёрши. Потому я специально начал разработку мощного (как по силе, так и по охвату) проекта для решения вопросов отношений - потому что "либо хорошо, либо никак".
Для меня то, что называется "серьёзные отношения" лежит по большей части в прагматичной плоскости (и не собираюсь это как-то скрывать) - материальная взаимоподдержка, совместное решение жилищных вопросов, взаимообеспечение на уровне быта и тому подобное. При этом наиболее значимым для меня является общность жизненных целей и идеологии (технократическая форма гуманизма, расписывал ранее) при готовности и желании вывода этого практически в смысл жизни (имею ввиду активизим - посвящение возможного максимума своей деятельности идеологическим целям). На этом фоне меня нисколько не волнуют стандартные для подавляющего большинства людей параметры физической внешности (это снимает вопрос красоты), но для наилучшей прагматичной взаимопомощи мне следует отдавать предпочтение людям с аналогичным моему экономическому положению (что накладывает ограничения на возраст, варианты работы и жилищную ситуацию).
Суммируя всё это получается что мне необходимо каким-либо образом проверить максимальное количество людей по всем этим критериям - чтобы сделать как можно более полную и точную проверку. Поскольку главный критерий это область интересов (весьма редкая, напомню), к тому-же такая, которая обязательно имеет проявление в сетевой активности - возможен приближающийся к 100% охвата метод проверки потенциальных (с общим интересом) кандидаток при компьютерной работе с крупными социальными сетями (методы знакомства на улице имеют малую выборку и не специфичны, методы поиска в тусовке также локально ограничены - широкоформатный анализ позволяет проверить *всех*).
Опыт работы с анализом данных позволяет планировать и реализовывать необходимый инструментарий для data mining соц. сетей, также справляться с большим количеством низкокачественной и рассеянной информации. В конечном счёте реализован (и развивается) инструмент вылавливания кандидаток с общими интересами, фильтрацией по подходящим параметрам (в роде возраста) и количественным ранжированием идеологичности (спасибо методам информационного поиска).
p.s. Мы начали переработку инструментария WSS на другой язык программирования (на Python), усложнение способов отсечения фейков, исправление багов, ввод бОльшего числа параметров для скоринга, наладку ещё одного метода оценки возраста, увеличению точности оценки идеологической активности (комментарии под новостями и Т-френды) и применение набора кандидаток из научно-релевантных (не ТГ) групп.
В начале января будет первая совместная сессия по WSS development со знакомым заинтересованным пользователем (в смысле, ему тоже нужен WSS), после этого будет больше интересных результатов и концепций.
Обещанное "человеческое" описание WSS будет опубликовано 3 - 5 января.
Было решено временно отойти от собственного велосипеда и поработать с сервисом знакомств на базе рекомендательных систем ( https://ru.wikipedia.org/wiki/Рекомендательная_система ) чтобы отдохнуть от работы напильником, работая на готовом и отработанном инструментарии (особенно когда понимаешь как он работает), и набраться некоторого опыта. Безусловно, никто не собирается ожидать от этого ресурса какой-то реальной пользы, поскольку это всё-таки сайт знакомств, пусть и с заметными входными порогами и эффективной системой сравнения.
p.s. Следующим постом будет описание задачи WSS более "человеческим" языком.
От ранее расписанной парадигмы в http://pikabu.ru/story/_2873139 было решено отказаться. Причинами для этого стали получение большого количества информации от успешных случаев реализации отношений Ъ/Ъ и отношения имеющихся ресурсов (в основном времени) к оцениваемым затратам на успешную конвертацию в Ъ (без учёта вероятности успеха < 1), требующую много месяцев и сил. Отказ от выявления про-Ъ кандидаток, потенциально хорошо "конвертируемых", с последующими попытками идеологического апгрейда был сделан из-за оцениваемого размера получаемой выборки, на порядок (по меньшей мере) превышающей размер первичной выборки (при данной методологии - 3 тыс. кандидаток), при этом степень Ъ заведомо занижена в среднем, т.к. делается отход от главного критерия - формальная принадлежность интересов к Ъ.
Новая парадигма, напротив, использует максимизацию фактической степени Ъ на основе не майнинга соц. сетей, а реальной активности в Ъ-сообществах, что будет выясняться с помощью computer-assisted нетворкинга (разработанный инструментарий WSS будет использоваться и развиваться дальше, но только как вспомогательный).
Собственно суть новой парадигмы состоит в экстремальном использовании общности интересов, эксплуатации экономико-географического детерминизма (в микро-масштабе, конечно) и максимизации эффективности сотрудничества. Аналогия на основе примеров: жёны революционеров, которые сами революционеры, с такой-же политической активностью.
Вероятно что суть описанного является ещё более труднодоступной по сравнению со многими предыдущими постами, а понятней дальше не будет. Также активность данной записи будет уменьшаться из-за падения необходимости в ней.
На первой итерации запуска WSS был получен только 1 приемлемый позитивный ответ из 200 человек, итерация 2 не прошла нормальный запуск - потому нельзя оценить эффективность, а на итерации 3 получено 4 позитивных ответа из 7, что говорит о повышении эффективности до ~50%, что является стократным ростом.
При работе с Top95 подтвердились редкие ошибки вычисления принадлежности к T-группам, из-за которых получались ложные завышения score, предполагаются и ложные занижения, но эта гипотеза не проверялась, потому нужно это в первую очередь исправить - это требует изменений и проверки алгоритмов парсинга и слияния датафреймов. Также будут другие небольшие технические модификации.
После исправления критических изъянов по степени отклонения топовых списков будет приниматься решение о возможности смены методологии поиска. Предполагаемая парадигма: эксплуатация географико-экономического детерминизма как более насущного фактора по сравнению с идеологическими критериями, что, как ни странно, давно отражено в контрольно-проверочном тексте (КПТ). Группами набора первичной выборки будут официальные и неофициальные группы топовых ВУЗов, группами для вычисления score (они будут разделены, да) будут разные адекватные научно-релевантные группы, в них-же (вместе со стенами) будет проводиться выкачка комментариев для подсчёта частоты основных научных слов. Также будет введена функция вида распределения Фишера для вычисления поправки к score на основе точного возраста (для подобных случаев) и устрожена система детекции фейков (число друзей, постов и прочего контента). Также будет попытка реализовать инкрементальное увеличение базы данных для возрастов для облегчения выполнения оценки возраста.
В посте http://pikabu.ru/story/_2855081 пользователь описал ситуацию, совпадающую с задачей WideScreenScreening (на 50% совпадающие требования, между прочим), но сейчас речь не об этом. В треде пользователем был оставлен комментарий http://pikabu.ru/story/_2855081#comment_37501840 , отмечу один момент:
"Поверь, подобным девушкам регулярно, если не постоянно, пишут парнишки всех мастей. И с подобным подходом ты - серая масса."
Известно что на сайтах знакомств (а vk.com не сайт знакомств) девушки и женщины испытывают шторм (сотни за стуки - не пиковая частота) из всевозможных сообщений с подкатами от мужиков. Ещё зависимость частоты от возраста очень значительна. Отсюда один опрос - а как часто в vk.com к лицам женского пола от 16 до 30 лет пишут левые люди со своими подкатами?
Статистика собирается для внутренней вероятносткой калибровки WSS, опрос vk-анонимен (в смысле не надо приводить id vk); формат ответа: "возраст - частота уникальных подкатов", указывайте единицы измерения. Из соображений приватности можно приводить не свои цифры, а сведения от неназванных подруг, также нормально если цифры приведут МЧ опрашиваемых сторон.
