Основы
Первый пример предельно прост. Используя предложение из детской книжки, мы освоим базовую концепцию цепи Маркова, а также определим, что такое в нашем контексте корпус, звенья, распределение вероятностей и гистограммы. Несмотря на то, что предложение приведено на английском языке, суть теории будет легко уловить.
Это предложение и есть корпус, то есть база, на основе которой в дальнейшем будет генерироваться текст. Оно состоит из восьми слов, но при этом уникальных слов только пять — это звенья (мы ведь говорим о марковской цепи). Для наглядности окрасим каждое звено в свой цвет:
И выпишем количество появлений каждого из звеньев в тексте:
На картинке выше видно, что слово «fish» появляется в тексте в 4 раза чаще, чем каждое из других слов («One», «two», «red», «blue»). То есть вероятность встретить в нашем корпусе слово «fish» в 4 раза выше, чем вероятность встретить каждое другое слово из приведенных на рисунке. Говоря на языке математики, мы можем определить закон распределения случайной величины и вычислить, с какой вероятностью одно из слов появится в тексте после текущего. Вероятность считается так: нужно разделить число появлений нужного нам слова в корпусе на общее число всех слов в нем. Для слова «fish» эта вероятность — 50%, так как оно появляется 4 раза в предложении из 8 слов. Для каждого из остальных звеньев эта вероятность равна 12,5% (1/8).
Интенсив «Как выбрать язык программирования и найти работу»
24–26 марта, Онлайн, Беcплатно
tproger.ru
События и курсы на tproger.ru
Графически представить распределение случайных величин можно с помощью гистограммы. В данном случае, наглядно видна частота появления каждого из звеньев в предложении:
Итак, наш текст состоит из слов и уникальных звеньев, а распределение вероятностей появления каждого из звеньев в предложении мы отобразили на гистограмме. Если вам кажется, что возиться со статистикой не стоит, прочитайте наш перевод, который вас переубедит. И, возможно, сохранит вам жизнь.
Cловарик пикапера
БД — «ближе — дальше». Сначала к девушке пристаем, потом ее игнорируем, потом обижаем, потом приласкаем… Интригует и сбивает с толку.
Бичшилд (Bitch Shield) – защитная реакция девушки, агрессивное противодействие пикапу. Нейтрализуется негхитами (см ниже).
Бредогенератор (БГ) — способность разговаривать ни о чем сколько угодно и с кем угодно, применяется как заполнение пауз в разговоре, когда на самом деле сказать нечего.
Игла – психотехника эмоциональной привязки партнерши. Надо причинить девушке душевную боль, а потом «пожалеть».
Калибровка — оценка реакции девушки на определенные действия. Обнял девушку – ого! она заулыбалась, значит ставим «К+», потрогал за попу – оттолкнула, ставим «К-».
Кинестетика – физические прикосновения. В народе называется «лапать».
Метафора – красивая история рассказанная с умыслом. «…и тут царевич поцеловал спящую красавицу…» — говорит пикапер и валит ОЖП на диван.
Негхит — легкая форма оскорбления для уменьшения самомнения ОЖП. «У тебя на колготках дырка».
ОЖП — особа женского пола.
Опенер (Opener), шаблон – заготовка для начала знакомства. Шаблонов должно быть много, на разные случаи жизни, этому учат на тренингах.
Раппорт — техника построения иллюзии взаимной близости. Сначала идет «подстройка» (за вами повторяют жесты, позы, слова), а потом начинается «ведение», в нужную сторону. Классическая методика гипноза, часто используется мошенниками.
Крышеснос— необычные ситуации, приводящие к тому, что девушка испытывает приятный шок и готовность броситься парню в объятия.
Фаст (Fast Seduction) — быстрое соблазнение. Секс сразу после знакомства.
Поизучала я как-то тему пикапа ради интереса. И решила написать статью о том, как распознать пикапера и что они вообще из себя представляют.
Я сделала вывод, что советы по пикапу (а значит и самих пикаперов) можно грубо разделить на три категории.
Это мой субъективный вывод, потому что я, знаете ли, не мастер этого дела, но наверняка вам будет интересно узнать про это явление побольше, пусть даже от девушки.
Сначала я коротко расскажу про три стиля пикапа, а потом дам рекомендации, как вычислять пикаперов каждого типа.
Генератор фотографий
Иногда может понадобиться такое: написать отзыв или рецензию на продукт или сервис и поставить фото человека, который это сделал. Если у вас есть только отзывы, но нет фотографий, можно найти фото случайного человека из сети и поставить его, но это чревато проблемами. Например, он может подать на вас в суд за использование его фотографии в коммерческом проекте или привлечь вас за слова, которые он не говорил, но под которыми есть его фотография.
Чтобы такого не было, зайдите на сайт проекта «ЭтотЧеловекНеСуществует». Каждый раз, когда вы обновляете страницу, нейросеть генерирует для вас фото человека, которого нет в реальности — нейронка просто нарисовала его случайным образом.
Даже если вам пока не нужны такие фото, тогда просто зайдите посмотреть, как круто нейросети научились делать такие картинки.
Этого парня на самом деле не существует — его нарисовала нейросеть StyleGAN2
Обращение к пикаперам
(Ну, вдруг парочка забрели сюда и читают эту статью)
Все знают, что шутить с чувствами человека опасно. И это не какое-то сокровенное знание. Сломав другому человеку самооценку или жизнь, нельзя будет сказать: «Ой, ничего себе, а я и не знал, что так получится…»
Шутить с чувствами другого человека непорядочно и безответственно . И вы сами прекрасно это знаете.
Поэтому если вдруг вам не хватает уверенности в себе и вы хотите стать пикапером (или уже сделали это) — поймите, что есть другой путь решения вашей проблемы, кроме как решение стать человеком с большой буквы Г.
Этот путь — конструктивное повышение своей самооценки через собственные достижения и проработку мышления. Это путь, который не испортит жизнь другим людям, а вашу жизнь сделает гораздо лучше, достойнее и качественнее. Почитайте статью Почему девушки выбирают плохих парней — там вы найдёте пару полезных советов.
А если вы делаете это, потому что обижены на женщин — постарайтесь понять, что боль вам причиняли не все женщины этого мира, а только одна или две. А может, вы просто напуганы этими историями, где женщина со временем якобы неизбежно превращается в толстую неинтересную неухоженную пилу. Мы не все такие. Мы хотим быть счастливыми. Не ломайте жизни тех, кто не виноват в той чёрной штуке в вашей голове, которая заставляет вас ненавидеть нас. И пожалуйста, сходите к хорошему психологу — он поможет.
Зачем они это делают?
Пикаперы цепляют девушек исключительно для личной выгоды: запонтоваться перед друзьями, развести секс. Всё зависит от конкретного пикапера.
Но объединяет их одно: по сути, все они играют в эту игру только затем, чтобы доказать самим себе, что они круты, и им «по зубам» любая красавица. Многие так самоутверждаются.
Кстати, в пикаперах нередко оказываются парни, пострадавшие от девушек: те, которым когда-то жестоко отказали, те, над чьими чувствами посмеялись.
Разочаровавшись в любви, эти парни изобрели для себя удобную формулу: «без любви жить проще». А заодно — мстят всему женскому полу.
У пикаперов есть даже свои принципы. Вот они:
Принимать внимание девушек как должное.
Забыть о таком понятии, как угрызения совести.
Не принимать ответа «нет», делая все, чтобы девушка сказала «да».
Забить на девчонку, которая продинамила. Раз так, то она просто дура и не поняла, насколько он крут.
Быть оригинальным и находчивым, не жалеть сил, энергии, чтобы добиться своего.. Список принципов можно продолжить
У всех пикаперов они звучат по-разному, но смысл примерно одинаков
Список принципов можно продолжить. У всех пикаперов они звучат по-разному, но смысл примерно одинаков.
Проверка на искренность
Бывает так, что девушке очень нравится молодой человек, но ей кажется, что он применяет по отношению к ней пикап. Соблазнение красивое, и есть признаки, перечисленные выше. Что же делать в таком случае? Можно проверить его с помощью простых тестов, которые и покажут, какие намерения у мужчины на самом деле.
Первое, что можно сделать, это настоять на своем месте первого свидания. Обычно пикаперы все просчитывают, и ваша инициатива будет неприятным сюрпризом. А для обычного парня это непринципиально. Далее нужно попросить купить вам что-то, например, мороженое или коктейль. Настоящий искатель быстрого секса на это никогда не пойдет. Он будет искать все возможные пути к отступлению, ведь платить за вас он не собирается. Задавайте много вопросов о его работе, увлечениях, семье. Простой парень сразу же примется хвастаться всеми своими достижениями, а вот пикапер будет постоянно менять тему разговора, пытаясь побольше узнать о вас. Выучите пару фраз, которыми оперируют профессиональные соблазнители, и обязательно произнесите их с ошибками в присутствии нового знакомого. Если поправит вас – это не тот, кто вам нужен. Еще одним признаком может быть то, что парень пытается показать себя очень образованным и умным. Прочитанные наизусть стихи, скорее всего, это вся поэзия, с которой он сталкивался в своей жизни.
Генератор музыки
Чтобы в подкастах, передачах или видео была фоновая музыка, её нужно где-то взять. Можно найти бесплатные треки, можно украсть чьи-то произведения (но лучше не красть), а можно прийти к нейронке и сказать: нейронка, дай треков. И она даст — бесплатно и без лицензионных отчислений.
Чтобы так сделать, используют генераторы музыки, например MuseNet. Вы заходите туда, задаёте нужный стиль, выбираете инструменты и начало для трека. Дальше нейронка генерирует столько музыки в этом стиле, сколько вам нужно. Скачивать можно бесплатно, использовать тоже.
Если есть деньги на подписку для коммерческого использования, посмотрите на Mubert. Эта нейросеть создаёт потрясающе красивые мелодии в разных стилях, которые можно бесплатно слушать в приложении. О том, как Mubert устроен внутри, тоже расскажем, но в другой статье.
Пусть MuseNet сделает нам мелодию в стиле Леди Гага, но чтобы она была чем-то похожа на музыку из «Крёстного отца». И чтобы там было пианино, гитара, барабаны и басы
Реально ли сгенерировать текст без потери смысла
Как видим на примере Interkit и «Порфирьевича», вполне реально. А в будущем эти программы станут еще более умными, так как в их основу заложен искусственный интеллект. Он умеет самообучаться и повышать качество выдаваемого результата.
Подробно о работе генератора осмысленного текста рассказывается на Хабре
Здесь приведен пример того, как можно с помощью классификатора текстов и обучаемой системы выделения важной информации из текста, создавать уникальные отзывы или новые статьи
Что касается нейронных сетей — то это уже большой шаг вперед. Кстати, их используют и во многих других сферах — например, есть свои нейросети для фото: они обрабатывают снимки по алгоритмам и задачам быстрее, чем специалисты. В случае с контентом система учится генерировать новые тексты на примерах. Слои нейронок получают одновременно список разных аспектов, по которым строятся фразы и умеют создавать следующие слова и осмысленные предложения.
Принцип работы нейронок, генерирующих тексты
Однако искусственный интеллект пока еще недостаточно развит и тексты получаются корявыми, в них частенько встречаются смысловые и грамматические ошибки. Но скорее всего, в будущем все изменится, машинам начнут доверять написание статей и почему бы нет — сочинений и даже диссертаций. Уже сегодня отпадает необходимость в контент-райтерах, пишущих бездумные тексты за 10-20 рублей/1000 знаков. Нейросети способны также, при этом быстрее и дешевле.
Искусство соблазнения
Кем же являются эти мужчины, которые ищут мимолетного секса и не хотят постоянных отношений? Кто такие пикаперы? Это чаще всего мужчины, которые очень интересуются противоположным полом. Они изучают женщину, выясняют, чего она хочет, дают почувствовать, что она желанна и в полной безопасности. Девушка моментально увлекается таким молодым человеком, ждет с нетерпением новой встречи с ним. Главным правилом каждого пикапера является добиться интимной близости за минимальный период времени. Ведь на самом деле ему неинтересен внутренний мир женщины, его интересует только соблазнение. Если девушка не согласится на секс, то пикапер уйдет, не оглядываясь, его ждут новые победы над другими «жертвами».
Защита от пикаперов
Итак, дорогие девушки, теперь, надеюсь, вы больше поняли про пикап. Если так, то вы согласитесь с планом, который поможет вам никогда не стать жертвой пикапера:
- Повышайте свою самооценку (подробнее — в статье «Что если я чувствую себя лохушкой?»),
- Ставьте приоритет не на желание выйти замуж и родить детей, а на желание выбрать достойного партнёра,
- Избавляйтесь от психологических травм,
- И почитайте пару книжек, форумов или пройдите пару курсов пикапа, чтобы узнать побольше техник и научиться моментально их распознавать.
Включайте голову, не верьте тем, кто этого не заслужил (на всякий случай: заслуживают не красивыми словами, а делами ), не прыгайте в постель, только познакомившись с человеком, и любите достойных мужчин, а не абы кого, и все у вас будет хорошо!
Что дальше?
Попробуйте придумать, где вы сами можете использовать генератор текста на основе марковских цепей. Только не забывайте, что самое главное — это то, как вы парсите модель и какие особые ограничения устанавливаете на генерацию. Автор этой статьи, например, при создании генератора твитов использовал большое окно, ограничил генерируемый контент до 140 символов и использовал для начала предложений только «правильные» слова, то есть те, которые являлись началом предложений в корпусе.
Вы также можете продолжить дальше изучать марковские процессы и, например, попробовать разобраться в том, что такое скрытые марковские модели.
Перевод статьи
Генератор текста
В сети есть много сервисов, которые делают «рыбный текст» — бессмысленный набор случайных слов, который просто похож на настоящий. По отдельности каждое слово что-то значит, но вместе это читается как ересь. Чтобы получился нормальный текст, одних случайных подстановок недостаточно — нужны нейросети.
Мы уже делали подобные простые генераторы — вспомните проекты с гороскопом или генератором ответов на письма.
Самой известной нейронкой, которая умеет строить осмысленный текст, стала GPT-2. Если её обучить на огромном количестве разных произведений, то она сможет написать продолжение любого текста за вас. Работает так: вы пишете начало, буквально абзац или пару предложений, и задаёте нужный размер. После этого нейронка читает, что написано у вас, и пишет продолжение в том же стиле. Если обучение прошло хорошо, то она выдаст такой текст, который сложно будет отличить от текста, написанного человеком.
У проекта GPT-2 есть только один недостаток: он отлично работает на английском и плохо — на других языках. Разработчик Михаил Гранкин решил это исправить и сделал сервис «Порфирьевич». Внутри та же GPT-2, но модифицированная для русского языка и обученная на художественной литературе и стихах. От вас нужно только начало, а дальше нейронка сделает всё сама.
Мы отправили в сервис начало нашей статьи и получили вполне читабельный текст. Пока непонятно, к чему он приведёт, но логика в тексте есть
Генератор логотипов
Если у вас нет 100000 рублей на экспресс-дизайн в дизайнерской студии, но вам нужен логотип, попробуйте сервис Looka. Он спросит у вас название, любимые цвета, сферу деятельности и выяснит, какой стиль вам нравится, а потом выдаст много разных вариантов.
Вы можете выбрать любой из них, а можно взять один и допилить его в этом же сервисе и получить полноценный брендбук с визитками, лого на сайте, конвертами и прочими бизнес-атрибутами. Качество получается не хуже, чем у нейронки в студии дизайна, но даже платная подписка стоит гораздо дешевле, чем услуги дизайнера.
Можно выбрать любой логотип и сразу использовать его для компании
Расширяем словарную базу
В этой части статьи мы будем строить модель по тому же принципу, что и раньше, но при описании опустим некоторые шаги. Если возникнут затруднения, возвращайтесь к теории в первом блоке.
Возьмем еще четыре цитаты того же автора (также на английском, нам это не помешает):
«Today you are you. That is truer than true. There is no one alive who is you-er than you.»
«You have brains in your head. You have feet in your shoes. You can steer yourself any direction you choose. You’re on your own.»
«The more that you read, the more things you will know. The more that you learn, the more places you’ll go.»
«Think left and think right and think low and think high. Oh, the thinks you can think up if only you try.»
Сложность корпуса увеличилась, но в нашем случае это только плюс — теперь генератор текста сможет выдавать более осмысленные предложения. Дело в том, что в любом языке есть слова, которые встречаются в речи чаще, чем другие (например, предлог «в» мы используем гораздо чаще, чем слово «криогенный»). Чем больше слов в нашем корпусе (а значит, и зависимостей между ними), тем больше у генератора информации о том, какое слово вероятнее всего должно появиться в тексте после текущего.
Проще всего это объясняется с точки зрения программы. Мы знаем, что для каждого звена существует набор слов, которые могут за ним следовать. А также, каждое слово характеризуется числом его появлений в тексте. Нам нужно каким-то образом зафиксировать всю эту информацию в одном месте; для этой цели лучше всего подойдет словарь, хранящий пары «(ключ, значение)». В ключе словаря будет записано текущее состояние системы, то есть одно из звеньев корпуса (например, «the» на картинке ниже); а в значении словаря будет храниться еще один словарь. Во вложенном словаре ключами будут слова, которые могут идти в тексте после текущего звена корпуса («thinks» и «more» могут идти в тексте после «the»), а значениями — число появлений этих слов в тексте после нашего звена (слово «thinks» появляется в тексте после слова «the» 1 раз, слово «more» после слова «the» — 4 раза):
Перечитайте абзац выше несколько раз, чтобы точно разобраться
Обратите внимание, что вложенный словарь в данном случае — это та же гистограмма, он помогает нам отслеживать звенья и частоту их появления в тексте относительно других слов. Надо заметить, что даже такая словарная база очень мала для надлежащей генерации текстов на естественном языке — она должна содержать более 20 000 слов, а лучше более 100 000
А еще лучше — более 500 000. Но давайте рассмотрим ту словарную базу, которая получилась у нас.
Цепь Маркова в данном случае строится аналогично первому примеру — каждое следующее слово выбирается только на основании знаний о текущем слове, все остальные слова не учитываются. Но благодаря хранению в словаре данных о том, какие слова появляются чаще других, мы можем при выборе принять взвешенное решение. Давайте разберем конкретный пример:
more :
То есть если текущим словом является слово «more», после него могут с равной вероятностью в 25% идти слова «things» и «places», и с вероятностью 50% — слово «that». Но вероятности могут быть и все равны между собой:
think :
Что такое пикап?
Пикап (от англ. сленг. pick up — снимать) — это своеобразная программа, используемая парнями и направленная на соблазнение девушек. Пикапер — парень, который пользуется пикапом. НВ, Honey Boney (англ. милашка, красотка). Русский термин — КТ (клёвая тёлка). Так пикаперы называют девушек. Существует еще и шкала НВ — от 1 до 10. По ней пикапер определяет «престижность» девчонки, которую собирается цеплять.
Как они действуют?
Крайне самоуверенно, нагло и настойчиво. Пикапер точно знает, что хочет девушка, и пользуется этим. Если нужно, то даже наденет круглые очки и будет сидеть на скамейке возле подъезда с букетом полевых ромашек. Или превратится в героя боевика. Он не жалеет денег на цветы, конфеты, развлечения, подарки. А всё для того, чтобы произвести выгодное впечатление. Может даже поманить ощущением настоящей сказки: пригласить на ужин при свечах и признаться в любви, устроить совместную поездку в другой город, на море. В общем, будет играть до тех пор, пока не покорит тебя.
Пикапер всегда хорошо выглядит. Ведь ему обязательно нужно понравиться. Поэтому он знает, какой стиль одежды, парфюм производит наиболее сильное впечатление на прекрасный пол.
Зачем весь этот театр?
Чтобы влюбить тебя, затащить в постель, поставить в блокноте очередную галочку, почувствовать себя героем, обязательно похвастаться новым достижением перед друзьями. После того, как пикапер свою миссию выполнил, ты его уже не интересуешь. Ему нужны новые победы. У Петьки 90 было? Этому нужно 100. Спорт, одним словом.
Как происходит знакомство?
Когда пикапер замечает красивую девушку, то пускает в ход всю смекалку, чтобы она обратила на него внимание. Если ему приглянулась ты, то для начала он просто посмотрит в твою сторону
Думая, что он смотрит на тебя, естественно, ты ответишь ему взглядом. И получается, что не он первый на тебя посмотрел, а ты. Ты отводишь глаза, и пикапер понимает, что ты вот-вот попадешься на крючок.
Для знакомства он использует фразы типа: «Девушка, вы не знаете, где здесь находится памятник боксерской перчатке братьев Кличко?» или «Девушка, вы на меня так смотрели!!! Только вы этого не заметили, это было на уровне вашего подсознания».
В общем, он скажет то, что обязательно вызовет у тебя улыбку. Дальше он предложит прогуляться и попросит у тебя номер телефона. Море комплиментов по поводу твоей внешности и масса шуток в адрес других девушек — всё это в духе пикапера.
Ты начнешь думать, что наконец-то нашла того парня, который оценил тебя по достоинству.
А он поймет, что ты расслабилась, потеряла бдительность и… перешла на территорию, где всё происходит по его правилам.
Что потом?
Потом ты будешь сидеть возле телефона и ждать его звонка. Возможно, он позвонит, чтобы еще раз убедиться в том, что ты на него запала, причем по полной.
А вот третьей встречи уже не будет. Дело сделано. Противная галочка напротив твоего имени уже красуется в его блокноте, ты рыдаешь в подушку, а он — ищет новую жертву.
Что самое обидное?
Что пикаперы — это не обычные парни, со своими слабостями и мальчишескими заморочками. Это самые настоящие роботы.
Знакомясь, пикаперы говорят одни и те же заученные фразы, стандартные комплименты. Каждый их шаг заранее просчитан. И чем чаще они играют в свою игру, тем меньше совершают ошибок.
Как не попасть на удочку пикапера
Отличить пикапера от нормального парня сложно, но можно. Поэтому стоит взять на заметку несколько важных моментов.
Пикапер:
- Старается не отвечать на твои вопросы, зато постоянно о чём-то спрашивает тебя.
- Не даёт тебе свой номер телефона, но делает всё, чтобы заполучить твой.
- Постоянно говорит тебе комплименты и рассказывает смешные истории.
- Заставляет тебя играть по своим правилам.
- Может, ещё не зная твоего имени, признаться в любви, пасть перед тобой на колени, спеть серенаду под окном. В общем, действует очень изобретательно и оригинально.
Если ты поняла, что перед тобой пикапер, придерживайся простых правил:
-
Не говори ему, как тебя зовут.
- Не давай номер телефона.
- Старайся не смеяться над его шутками.
- Не бойся показаться грубой и невоспитанной. Пикапер не стоит твоей вежливости.
- Не принимай его предложения пойти прогуляться, выпить кофе и т.п.
- Не смей его жалеть. Ему только этого и надо.
- Убеди себя, что перед тобой отвратительный и мерзкий тип. И он совершенно не нравится тебе.
P. S. Бывает ли наоборот?
Естественно, в рядах пикаперов есть и девушки. Программа та же: пикаперша добивается парня и сразу же его бросает, отправляясь на поиски более свежего объекта. Правда, «добивается» в данном случае означает не «затаскивает в постель», а всего-навсего «разбивает сердце». И дело здесь — во все той же пресловутой заниженной самооценке.
И еще кое-что: о психологии женщины
Как ты относишься к своему парню
Работа с окнами
До настоящего момента мы с вами рассматривали только окна размером в одно слово. Можно увеличить размер окна, чтобы генератор текста выдавал более «выверенные» предложения. Это значит, что чем больше окно, тем меньше будет отклонений от корпуса при генерации. Увеличение размера окна соответствует переходу цепи Маркова к более высокому порядку. Ранее мы строили цепь первого порядка, для окна из двух слов получится цепь второго порядка, из трех — третьего, и так далее.
Окно — это те данные в текущем состоянии системы, которые используются для принятия решений. Если мы совместим большое окно и маленький набор данных, то, скорее всего, каждый раз будем получать одно и то же предложение. Давайте возьмем словарную базу из нашего первого примера и расширим окно до размера 2:
Расширение привело к тому, что у каждого окна теперь только один вариант следующего состояния системы — что бы мы ни делали, мы всегда будем получать одно и то же предложение, идентичное нашему корпусу. Поэтому, чтобы экспериментировать с окнами, и чтобы генератор текста возвращал уникальный контент, запаситесь словарной базой от 500 000 слов.
Суть определения
Теперь добавим к нашему тексту элементы, которые всегда подразумеваются, но не озвучиваются в повседневной речи — начало и конец предложения:
Любое предложение содержит эти невидимые «начало» и «конец», добавим их в качестве звеньев к нашему распределению:
Вернемся к определению, данному в начале статьи:
Марковский процесс — случайный процесс, эволюция которого после любого заданного значения временного параметра t не зависит от эволюции, предшествовавшей t, при условии, что значение процесса в этот момент фиксировано.
Марковская цепь — частный случай марковского процесса, когда пространство его состояний дискретно (т.е. не более чем счетно).
Так что же это значит? Грубо говоря, мы моделируем процесс, в котором состояние системы в следующий момент времени зависит только от её состояния в текущий момент, и никак не зависит от всех предыдущих состояний.
Представьте, что перед вами окно, которое отображает только текущее состояние системы (в нашем случае, это одно слово), и вам нужно определить, каким будет следующее слово, основываясь только на данных, представленных в этом окне. В нашем корпусе слова следуют одно за другим по такой схеме:
Таким образом, формируются пары слов (даже у конца предложения есть своя пара — пустое значение):
Сгруппируем эти пары по первому слову. Мы увидим, что у каждого слова есть свой набор звеньев, которые в контексте нашего предложения могут за ним следовать:
Представим эту информацию другим способом — каждому звену поставим в соответствие массив из всех слов, которые могут появиться в тексте после этого звена:
Разберем подробнее. Мы видим, что у каждого звена есть слова, которые могут стоять после него в предложении. Если бы мы показали схему выше кому-то еще, этот человек с некоторой вероятностью мог бы реконструировать наше начальное предложение, то есть корпус.
Пример. Начнем со слова «Start». Далее выбираем слово «One», так как по нашей схеме это единственное слово, которое может следовать за началом предложения. За словом «One» тоже может следовать только одно слово — «fish». Теперь новое предложение в промежуточном варианте выглядит как «One fish». Дальше ситуация усложняется — за «fish» могут с равной вероятностью в 25% идти слова «two», «red», «blue» и конец предложения «End». Если мы предположим, что следующее слово — «two», реконструкция продолжится. Но мы можем выбрать и звено «End». В таком случае на основе нашей схемы будет случайно сгенерировано предложение, сильно отличающееся от корпуса — «One fish».
Мы только что смоделировали марковский процесс — определили каждое следующее слово только на основании знаний о текущем. Давайте для полного усвоения материала построим диаграммы, отображающие зависимости между элементами внутри нашего корпуса. Овалы представляют собой звенья. Стрелки ведут к потенциальным звеньям, которые могут идти за словом в овале. Около каждой стрелки — вероятность, с которой следующее звено появится после текущего:
Отлично! Мы усвоили необходимую информацию, чтобы двигаться дальше и разбирать более сложные модели.
Выводы
Экономия времени и сил — главное преимущество генераторов контента по ключевым словам. Зачастую автоматически размноженный текст нуждается в правках со стороны человека, но все равно, это возможность быстро сделать уникальную статью для публикации на своем сайте.
Как превратить неуникальный текст в уникальный?
Генераторы выдают относительно уникальный контент. По крайней мере, поисковики могут заглотить такую наживку. Если же нужен материал с более высоким процентом уникальности, то можно сделать так. Перевести текст, скопированный с какого-нибудь английского тематически схожего ресурса на русский, затем размножить с помощью генератора или синонимайзера.
Какие генераторы текста выдают осмысленный текст?
Осмысленный текст выдают только генераторы, работающие на основе нейронных сетей. Мы проверили работу двух сервисов — «Порфирьевич» и Interkit. Обеими остались довольны.
Тексты, созданные автоматическими генераторами, считаются уникальными?
Не всегда, уникальность редко повышается больше 20%. По крайне мере для людей — точно нет. Мы проверили работу двух синонимайзеров — результат нас не впечатлил.
Почему в бурже используют тексты, сгенерированные нейронкой?
Потому что такие генераторы умеют делать по-настоящему уникальные и осмысленные тексты. Это экономит время и силы оптимизатора, который может заниматься другими важными делами.
Какие генераторы текстов являются бесплатными?
Все синонимайзеры и генераторы бредотекста абсолютно бесплатны, иначе ими бы не пользовались — реализована просто кнопка для сбора благотворительных средств. Из осмысленных генераторов пока бесплатен сервис «Порфирьевич», но думаем, это временно.
