Я посмотрел расшифровку групп. Фото одежды, сумочек, машин, филейные части, надутые губы в кадр, популярные мемчики на тему подарков, букеты роз, медведи. Внезапно, несколько фото собачек и котиков. Большая группа фотографий с курортов. Группа фотографий с косметикой. Очень много фотографий с алкоголем, кальянами, барами и ресторанами. Удивила только группа фотографий с определенными жестами, определенным выражением лица девушек и определенными позами. Нет, позы и жесты вполне цензурные, но где-то я все это уже видел.
Поищем в сети по фото, что тут у нас? Ага, обложки модных журналов и позы для фотосессий. Оказывается, есть продающее выражение лица. Девушка с таким выражением лица на обложке увеличивает продажи кратно. Но это приедается, и иногда на обложке появляется дорогая машина, или даже мужчина.
Ха-ха, а вот это очень остроумно. Такое выражение лица один блогер называет «задолбешься платить». Да, вписывается в концепцию. Я бы описал это выражение лица, как «избирательная недоступность».
Так, теперь чисто теоретически, я могу анализировать профили девушек в этой социальной сети на меркантильность.
Нужно выделить еще топ грубых девушек и написать алгоритм, способный искать одновременно по нескольким параметрам. И еще нужно понять какое количество групп фотографий будет достаточно, для качественного определения параметра. Думаю, что сто групп - очень мало. Кстати, можно добавить другие параметры, нужно анализировать и текст. В каком веке живешь? Давно уже никто ничего не пишет. Видео что ли начать анализировать?
А это идея! Люди обожают выкладывать короткие ролики про себя. Нужно начать их анализировать. Тут мне помогут алгоритмы распознавания образов в потоке, в которые я погрузился очень глубоко с софтом дронов и полицейским коином.
Нужно будет только обучить нейросеть, на подобной сайту знакомств выборке, находить шаблоны поведения.
Писать сейчас никто не пишет, а вот болтают без умолку! Можно анализировать и речь. Естественно, переводить в текст и анализировать уже его. Программ, которые переводят речь в текст полно, все коммуникаторы оснащены подобными. Я даже слышал, что над этими программами работают реальные носители языка, выступающие в виде группы контроля. Вся их работа заключается в том, что они слушают сложную речь и проверяют как ее распознал компьютер. Незаконно абсолютно, но всем плевать.
Искать шаблоны в потоковом видео и аудио не так сложно, как может показаться. А вот изначально выделить эти шаблоны будет чрезвычайно сложно. Может так случиться, что общих шаблонов у нескольких людей может не быть. Или не так! Можно будет выделить процент индивидуальности того или иного шаблона.
Есть такие, которые присущи всем, вроде скрещенных рук, закрытой или открытой позы, поворота корпуса и тд. А есть исключительно индивидуальные.
Интересно, кто-то занимается этой проблемой? Поищем.
Ага, есть чрезвычайно много литературы, но не вижу ни одного подхода, использующего нейронные сети. А нет, вот есть несколько исследований. Закрыты из-за недостатка финансирования. И темы близкие, но не то. А вот распознавание эмоций и лиц представлено особенно богато.
Нужно связаться с исследователями, чьи проекты закрыли. Вдруг они до сих пор копают в этом направлении.
Первая работа посвящена распознанию настроения человека не по мимике и жестам, а по шаблонам поведения. Только они выделяют много больший отрезок, для маркировки состояния, чем нужно мне.
Вторая работа анализирует исключительно маркеры одобрения и отторжения. Ищут они их совершенно в разных вещах, вплоть до угла экрана коммуникатора к плоскости лица или характере нажатия кнопки. Тут все понятно, проект востребован в области рекламы. Закрыт много лет назад. Странно, тема должна пользоваться спросом.
Работ по анализу психологического портрета человека по тексту написано чрезвычайно много. Вот только найти среди этого хлама серьезную работу та еще задачка.
Копал еще несколько часов и нашел интересную работу.
Человек по поведенческим шаблонам на видео определяет различные психические заболевания. Работа не закончена. Очень богато представлен раздел про депрессию. Анализирует он, помимо жестов и мимики, положение тела и поведение в течении нескольких секунд после определенных раздражителей (позитив в виде похвалы, негатив в виде грубых слов и тд). В конце этого раздела Гуда (так зовут академика) акцентирует, что реакция тела существует отдельно от раздражителя и может проявляться в различных ситуация, сигнализируя о разных состояниях человека. Эту работу определенно нужно перечитать и обдумать. Возможно, одновременно. Нужно пользоваться своим проклятьем – вторым потоком.