Pinterest Сетка: День 336. Отчет за Март

02. апреля 2018 Pinterest 0
Pinterest Сетка: День 336. Отчет за Март

Трафик

 

Октябрь Ноябрь Декабрь
посетителей 147 000
просмотров 1 900 000

страниц на сеанс 9
посетителей 161 000
просмотров 2 100 000

страниц на сеанс 9,2
посетителей 263 000 (+63%)
просмотров 3 200 000 (+50%)
страниц на сеанс 8,2 (-11%)
Январь: Февраль: Март:
посетителей 249 000 (-5.32%)
просмотров 2 800 000 (-12.50%)
страниц на сеанс 7,9 (-3.66%)
посетителей 148 000 (-40.56%)
просмотров 1 700 000 (-39.29%)
страниц на сеанс 9,2 (+28%)
посетителей 133 000 (-11%)
просмотров 1 500 000 (-12%)
страниц на сеанс 9,2 (+0%)

 

Разработки

В марте вернулся к продолжению разработок софта, в этот раз возврат после продолжительного перерыва в кодинге оказался менее сложным, быстро все вспомнил и вникнул обратно. Последний месяц занимаюсь только разработками.

Как вы возможно знаете из прошлых отчетов – часть софта реализована на эмуляции браузера (используется мало), часть на приватном api и часть на публичном api.
Браузерная эмуляция – безопасно, очень тяжело для многопоточности, палки в колеса с разметкой страницы.
Публичный api – сильно ограничен, безопасный и не меняется со временем.
Приватный api – куча возможностей (использовал около 90% методов), ограничений нет никаких но есть сложности в повторении действий мобильного клиента, полностью не безопасно, не стабильно.

От браузерной эмуляции почти отказался и все хорошо, никакие супер-АИ из спецслужб не следят за аккаунтами) Но все-таки без браузера никуда, ибо софт полностью не сделан под симуляции/эмуляции (не знаю как более правильно назвать это) мобильного клиента. И как раз от приватного api я хочу уйти как можно дальше, когда-то они сделают так что работать по нему станет невозможно. Поэтому сейчас все новые функции будут под браузерные запросы, уже разобрался и сделал пару новых функций исключительно на post/get которые отправляет браузер. В случае ограничения приватного api перевести весь софт на браузерные запросы не составит труда, приблизительно займет это 1 месяц.
Пока столкнулся со следующими неприятными моментами: узнать gender указанный в профиле можно только через приватный api. Кстати, кто планирует работать по Pinterest и делать свой софт на запросах + браузер – обратите внимание на параметр browser_type возможно именно он сообщает нам о том какой дизайн сайта из нескольких будет использоваться для вашего акка и таким образом вы можете использовать нужную вам верстку для работы с элементами.

UPD 14.03

Решил перевести весь софт с api v3 и api v1 на браузерные запросы. На это ушло 2 недели, и 27го марта софт полностью эмулирует браузер. Основной причиной сделать это сейчас стала проблема с получением токенов v1 и v3, это не дело когда часть акков просто пылятся в базе данных и не работают.
Что могу сказать – проще было конечно написать софт с нуля чем разбираться и переделывать софт сделанный год назад, хорошо что хотя бы раньше делал с заботой о будущем – распределил всё по модулям и функциям что бы совсем не сойти с ума при корректировках))

Что сделано еще: вырезаны старые функции (лайкинг, старый фолловинг и прочее), улучшена человечность аккаунтов увеличена рандомизация, нашел проблемы и исправил пару косяков которые сказывались на производительности, в целом немного оптимизировал весь скрипт. Добавлена пара крутых фишек, которые я здесь к сожалению описать не могу, скажу только что они никак не связаны с алгоритмом продвижения/ленты, это больше улучшение работы с аккаунтами.

Так же в марте создавал пару отдельных небольших скриптов для аналитики пинов, прямо сейчас в конце месяца пишу этот отчет и одновременно готовлю новый скрипт для аналитики, чувствую, что победа над алгоритмами должна быть осуществлена до конца весны.

Кое-что из планов по разработке

Новый режим

Придумал одну штуку… Мой софт работает как обычные инструменты для соц сетей – мы подключаем аккаунт и пока софт запущен у нас одновременно работает n-аккаунтов, то есть при запуске мы подключили 100 из 500 аккаунтов и в течении суток работает только 100 аккаунтов и как только они выполнят свои задания – подключатся следующие 100. И в этом случае у нас есть потеря времени, поскольку мы соблюдаем лимиты между действиями, то тратим, например, 60 секунд между каждым действием. Ровно 60 секунд мы не используем ресурсы которые выделены. Я хочу протестировать новый режим работы суть которого проста – подключили акк, сделали 1 действие и выключили аккаунт, перешли к следующему аккаунту. За один и тот же промежуток времени мы обработаем в разы больше аккаунтов и действий будет выполнено больше. Это работает именно так если нам важно соблюдать паузы между действиями. Для этого метода скрипт полностью отключается от браузера и работает только на POST+GET. Обработка одного аккаунта займет приблизительно 10-15 секунд (это около 5 get запросов и пара post по требованию + общение с диском на запись/чтение). Скрипт будет максимально урезан для увеличения скорости работы в данном режиме, отключено логирование и дополнительные проверки. Тестирование режима пройдет на небольшом кол-ве новых акков что бы не рисковать основными, применить такую схему можно в любой сети где нет ограничения в аккаунтах.

Аккаунты

Сразу переходим к вопросу с аккаунтами. Их нужно не мало, отрегать их на дорогих почтах уже не выйдет – слишком дорого, поэтому буду рассматривать дешевые и всем известные почтовики.
Регер скорее всего буду делать заново, нужен быстрый регер, мой текущий регер делает 1 акк около 60 минут, но регает в 60-100 потоков. 60 минут занимает прожарка аккаунта.
На днях потратил несколько часов времени впустую и поник… я забыл что сервисы аренды прокси закрыли порты для imap и несколько часов я занимался настойкой получения писем по imap зря. Даже сервисы которые продают индивидуальные прокси уже закрыли порты для почтовых сервисов, так и до покупки прокси по паспорту не далеко))

Прокси

И сразу же к вопросу о прокси. Так же учитывая факт недоступности imap портов на всех прокси что я имею и на тех которые могу арендовать – образуется простой вывод: нужны свои прокси.
Но видели ли вы где-то пакетные прокси без ограничений хотя бы по 5 центов? Или аренду сервера с сетью в несколько тысяч ip со стоимостью до 200-500$
Поэтому пока нет возможности решить проблему с прокси, бюджета не хватит на те решения которые находил я.

 

О событиях марта

В группе вк я писал, что произошло одновременно две плохие ситуации – упал трафик, упал доход. Да в один момент резко пошел тренд падения трафика и падение цены клика вместе с CTR.

стата из кабинета pinterest

Цена клика выровнялась и почти вернулась примерно к 20 марта, сейчас ситуацию по адсенсу можно считать нормальной. Но трафик обратно не вернулся, это можно видеть на скриншоте выше, по состоянию на 29е марта трафик начал расти обратно но рывками, и тенденции роста в целом нет.

На март были поставлены большие цели, которые прервались этим плохим 14ым марта. Построил новую методику по выполнению заданий (целей, планов) которая реально работает, выполнил 4 из 7 поставленных задач, на каждую задачу было выделено 2 дня, теперь эти задания будут смещены на 15-30 дней, это не очень хорошо т.к. не вписываюсь в задумки на май-июнь (об этом будет в след отчете).

Текущая работа с соц сетью

Аккаунты – по аккам были только те изменения, которые я писал в отчетах, всего 2 партии акков, они более-менее живут, я почти не чистил базу акков и невалид акки присутствуют в базе можно считать с самого первого дня работы, сейчас их количество примерно 15%, возможно 20% т.к. у меня нет явной статистики по банам. Почему невалид а не забаненные акки? Все просто – некоторые акки отваливаются из-за причин, которые не может распознать софт и вернуть их в строй. Эта проблема образовалась сама по себе –  pinterest усложнил исходный код вводом защиты от ботов, разные языки на аккаунтах, разные версии дизайнов.

В конце марта все же успел чекнуть акки. На большинстве отвалившихся аккаунтов были сброшены пароли, добавил обработку этих моментов, так же pinterest сам не высылает письмо с ссылкой на сброс пароля, его нужно запрашивать вручную если вы не можете войти в акк, а если в акк войти можно, но просит сменить пароль, то либо высылает сам либо нужно кликнуть по предлагаемой кнопке.
Так же нашел проблему с баганными куки у аккаунтов, Pinterest отображает страницу ошибки и предлагает сменить браузер, пофиксил. Небольшая часть акков забанена навсегда.

Все больше pinterest становится похожим на обычную соц сеть. Возможно скоро они полностью пересмотрят свою политику и станут более открытыми для своих пользователей, анонсы изменений станут более человечными.

Что может произойти в pinterest в 2018? Я думаю компания может объявить свой фид пинов умной лентой, предварительно добавив в нее новый функционал. Уже сейчас внесены изменения в дизайн – кнопка «отправить сообщение» в профиле пользователя вынесена на видное место.
Лично мне не хватает официального общения компании со своими пользователями, нет нормальных ответов на вопросы, нет адекватных инструкций и объяснений как работает та или иная функция. Например, почему я вижу в Today GIFs гифку которой уже 3 года, почему я как пользователь должен смотреть старые пины. Вот в этом ключе Pinterest так же скорее всего должен предпринять какие-то ключевые изменения, например, дать пользователю выбор между новым и старым контентом, либо в ленте разделять старый/новый контент 50 на 50 и обязательно нужно рассказать о том, что это происходит именно так, чтобы пользователь не был обделен информацией о том как формируется фид.
Пока я вижу лишь компанию которая кричит «1. Админ всегда прав, 2. Если админ не прав то см. первый пункт», правила выстроены таким образом что не имеете никаких прав. Вы здесь в гостях, вам здесь не рады.

 

Дорвеи в соц сетях

Как и обещал – расскажу о дорвеях для соц сетей. Речь не о создании дорвеев на страницах соц сетей, а о создании сайтов которые заточены для получения трафика из конкретной сети. В данном случае конечно же мы рассмотрим Pinterest. Работает это только для контентных соц сетей. Среди тех, которые я знаю такими являются Pinterest, Tumblr и частично Facebook с ВК.

Опустим вопросы с авторским правом и перейдем к типу наполнения. Наполняется такой сайт парсингом с других сайтов или парсингом с самой соц сети.

Сайты выглядят очень просто, имеется контент, иногда меню, реклама (обычно адсенс, но видимо когда адсенс выкидывает сайт то вешается любая бурж тизерка).
Я не буду палить адреса и скрою логотипы, у меня нет желания кому-то навредить, просто показываю как можно работать.

Фулл скрины можно посмотреть в альбоме https://imgur.com/a/d7lAg

Сайт #1

Дизайн приятный, но в целом от МФА не удалось уйти, удачно расположен блок ссылочной рекламы и что важно – отображает как бы названия категорий.

Где то я читал что такое уже запрещено у адсенса. Но вот беда, это будет кликабельно и хорошо смотреться лишь на десктопном браузере с большим разрешением экрана, а большая часть трафика это как раз мобильные пользователи. Вот так выглядит страница на мобильном экране, уже выглядит не совсем как меню.

Наполняется сайт судя по всему автоматически, под каждой картинкой имеется ссылка на источник откуда взята картинка, источник Pinterest.

Снизу видно фиксированное окошко с рекламой, появляется сверху или снизу.

Сайт #2

А сейчас покажу примеры сайтов, которые получают тонны трафика, эти сайты хотя бы за это заслуживают уважение.

И второй сайт. Похожих сайтов с такой структурой в pinterest больше чем два. Это сайты одного владельца или нет – не известно, whois и прочее я не смотрел. Вроде бы видел владельца на одном форуме, но это не точно)

Наполнение выполняется вероятнее всего вручную

Сайт #3

Далее показываю дорвеи которые нашел еще год назад.

Я назову его «народный дорвей»

Заполнялся каким-то парсером.

Сайт #4

Сайт сделан на дешевом домене, имеет вид статейника но является картиночным дором, текст непонятный что-то из уник/генерированный/перевод/рерайт.

Но адсенс стоит и цена клика не должна быть маленькой из-за наличия текста и заголовков.

Сайт #5

Сайт-витрина товаров с etsy, amazon и возможно чего-то еще.
Хорошая идея работы с товарными ПП. Там еще стоит адсенс, но я забыл вырубить адблок)

Сайт #6

Простой сайт с закосом под магазин, используется амазон и адсенс.

 

Сайт #7

Этот сайт является каталогом где показана знаменитость либо просто красивый набор одежды на модели. И рядом выводится список вещей которые присутствуют на картинке, ссылки с предметов ведут на ПП shopstyle.com. Данный сайт не заморачивался с оформлением вывода предметов, но я видел сайты где вывод вещей сделан красивее (к сожалению не смог вспомнить адрес).

Всегда интересовало несколько вопросов касательно таких сайтов: эта инфа откуда-то парсится? Это собирает админ вручную с одного источника? Это какой-то плагин, возможно от shopstyle?
Уверен что уровень завлечения и кликабельности там приличный, ведь pinterest для того и используют что бы подобрать себе крутой наряд, а когда тебе дают ссылки на товар который тебе понравился…

Вы можете легко найти кучу примеров таких сайтов. Достаточно пару часов посерфить ленту пинтереста либо проявить на аккаунте активность и ждать пока вас начнут фолловить боты и смотреть их сайты, ссылки на которые будут в профиле.

Напоминаю – Фулл скрины можно посмотреть в альбоме https://imgur.com/a/d7lAg

Сохранить в Share on VK
VK
Share on Facebook
Facebook
Tweet about this on Twitter
Twitter
Pin on Pinterest
Pinterest