Обложка канала

LiveDune. Страница 13

2430 @livedune
Открыть

LiveDune — «белый» аналитический сервис социальных сетей. Внутренняя статистика всех социальных сетей: от охватов до числа уникальных посетителей за месяц.

  • LiveDune

    Мы тут сделали за 1 месяц миллиард запросов к API YouTube. После чего они нами заинтересовались и сейчас идет медленная переписка по апруву LiveDune. В отличии от Facebook, тут все делается через почту, но зато более дружественно - нам прислали PDF файл, в котором отметили что и где не так, какие правила это нарушает и как надо исправить.
    Вроде здорово, но вылезло две больших проблемы - нельзя считать свои метрики, только то, что получено от YT. Например, тот же ER нельзя показывать ни для аккаунта, ни для видео. Вообще никак.
    Вторая проблема, нельзя показывать динамику подписчиков и просмотров чужих аккаунтов, а по своим старше 30 дней нельзя. Почему? Пока не особо понятно, как минимум это странно, т.к. другие сертифицированные YouTube сервисы это показывают. Общаемся дальше.
    Если без расчета своих метрик можно как-то жить, то без динамики подписчиков уже труднее.

    А вот FB, как оказалось не отдает в выгрузку комментарии Инстаграм от закрытых профилей. Т.е. если хочешь их смотреть - лезь в само приложение Инстаграм, в другие сервисы ни ни.
    Также FB подтвердил баг с привязкой своих аккаунтов Инстаграм. Т.е. у вас есть бизнес-аккаунт Инстаграм, все отлично, но привязать его к LiveDune, для мониторинга статистики вы не сможете, из-за бага.

  • LiveDune

  • LiveDune

    Итак, Facebook починил возможность выгрузку комментариев из Инстаграм - это хорошо. Но, он ужесточил лимиты, теперь в час можно выгрузить не более 10 тысяч комментариев. Если точнее, то в час можно делать 200 запросов к API, но лимит на количество комментариев в одном запросе теперь равен 50.

    Раньше мы выгружали по 300 комментариев за раз (а можно было хоть по 1000). Соответственно выгрузка теперь сама по себе будет длиться примерно в 6 раз дольше, а если больше 10К комментов, то еще +1 час на ожидание появления лимитов.
    Решение тут одно - будем делать выгрузку в фоновом режиме с отправкой результата на E-mail.

  • Реклама

  • LiveDune

    Перезапустили мониторинг комментариев ВКонтакте, подробнее об этом можно почитать в блоге:
    https://livedune.ru/blog/monitoring_kommentariev_grupp_vkontakte
    А если коротко:
    1) Все аккаунты в одном месте
    2) Моментальное получение комментариев
    3) Моментальная отправка новых комментариев в Телеграм
    4) Возможность ответа на комментарии прямо из LiveDune
    5) Комменты собираются не только со стены, но и с фотографий/видео/товаров.

    Не все успели еще сделать, в начале июня появится позможность отвечать на комментарии фотографий и товаров (сейчас есть тех. затруднения в самом ВКонтакте), а также возможность переписки в ЛС группы.

  • LiveDune

    Обновили выгрузку из Инстаграм в Excel. Добавили кучу данных и поддержку английского языка https://livedune.ru/blog/obnovleniya_eksporta_instagram_v_excel

    А вот Facebook порадовал, они наконец исправили баг из-за которого было невозможно выгрузить комментарии на некоторых постах Инстаграм. Но при этом принесли новый баг, теперь выгрузить комментарии вообще не предоставляется возможным. Такие дела. Первый баг исправляли три недели, надеюсь в этот раз все будет быстрее.

    И немного про апрув доступа к API Facebook, они дали всем 3 месяца на его прохождение, до 1 августа. А мы уже третью неделю ждем, когда до нашей заявки доберутся. И абсолютно не понятно, как будут проводить апрув российских компаний.

  • LiveDune

    Сегодня все таки решил проверить наличие iconosquare.com в списках РКН, и вуаля, он там. К слову, как было объявлено ранее, мы сейчас тоже переезжаем на Amazon, надеюсь нас такая участь не настигнет.

  • LiveDune

    Facebook починил баг с загрузкой постов из чужих аккаунтов Инстаграм. Теперь проверка блогеров и мониторинг чужих аккаунтах должны работать стабильно всегда. Но при этом мы вчера словили аналогичную ошибку, но уже при загрузке своих постов, и опять отправили баг-репорт в FB. Приняли, ждем решения.

    Проблему с выгрузкой комментариев Инстаграм они подтвердили и видимо чинит - ждем.

    В старом API Инстаграм таких проблем не было, оно работало без сбоев, в отличии от нового. В неделю стабильно по два сообщения об ошибках отправляем. В любом случае, работать через тех. поддержку Facebook намного приятнее. Они отвечают в течение суток, а с Инстаграм можно было и не пытаться что-либо писать - не ответят.

  • LiveDune

    Facebook немного изменил API в следствие чего на некоторых постах выгрузка комментариев не работает. API просто выдает ошибку и в нашу тех. поддержку каждый день приходят жалобы об этом.

    5 дней назад мы сообщили в Facebook об этом, а сегодня они подтвердили баг и взяли в работу, пообещав исправление в течение 7 дней.


    Аналогичная ситуация при загрузке постов с чужих аккаунтов, иногда возникает внутренняя ошибка в API и выгрузить посты не получается либо частично, либо совсем. 3 недели назад мы отправили баг-репорт об этом и тоже сегодня получили ответ. Они взяли в работу, с высоким приоритетом, обещают исправление также в течение 7 дней.


    Плюс, сейчас мы общаемся с тех. поддержкой по поводу мониторинга комментариев. Они вернули эту возможность, но вот незадача, работает только на наших аккаунтах, аккаунтах разработчиков. Как только станет работать на аккаунтах клиентов - зарелизим. А пока переписываем мониторинг комментариев FB и ВКонтакте. FB пока работает по той же схеме, а вот ВК переписали заново. В нем мониторим не только стену, но и ЛС группы, продукты, видео и др. А главное скорость получения новых комментариев теперь будет моментальной. Выгрузка комментариев из постов FB и ВК также будут доступна.

  • LiveDune

    Facebook сильно изменил инструменты разработки. Изменений много, касаются они в основе взаимодействия с платформой Facebook. Пока могу выделить три крупных нововведения:


    1) Все приложения/сервисы будут должны заново пройти проверку в Facebook до 1 августа;

    2) Будет проверка не только самого приложения, но и компании. Т.е. теперь обычный студент (ну или профессор) не сможет запилить сервис статистики Инстаграм. Нужно создании компании, которая будет заключать с FB контракт;

    3) Для сторонних приложений на Android и iOS появилась возможность реализовать постинг Stories.

  • LiveDune

    У нового API Инстаграм есть небольшая проблема, он никак не учитывает рекламную активность в профиле. Если вы не используете продвижение аккаунта Инстаграм внутренней рекламой, то разницы вы и не заметите.
    С 23 апреля Инстаграм начал учитывать рекламную активность в общем охвате профиля и просмотрах за сутки. А вот по постам пока изменений нет, ни в охватах ни в лайках. Но в любом случае направление движения хорошее. Может вскоре нам дадут раздельно учитывать органические лайки и лайки полученные от рекламных кампаний?

  • LiveDune

    Facebook потихоньку начал принимать приложения на проверку, сейчас начали просматривать игровые приложения и те, которые работает с Facebook Messenger.

    Ни то, ни другое нас не касается. А вот полную проверку приложений обещают вернуть в ближайшие неделИ, что мы собственно очень ждем. Ведь нам нужны права на возможность ответа на комментарии прямо из LiveDune или бота в Телеграм. Но, как сообщает сам Facebook, на то чтобы проверить все заявки уйдет еще несколько недель, соответственно можно предположить, что в полную работу Facebook API вернется не ранее июля. Грустно, но ждем.

    А у себя в блоге мы разместили информацию о том, что изменилось при мониторинге своих и чужих аккаунтов Инстаграм - https://livedune.ru/blog/statistika_akkauntov_instagram

    Запустили Проверку блогеров, она конечно же претерпела изменения. О них можно посмотреть на странице - https://livedune.ru/blog/proverka_blogerov_instagram

  • LiveDune

    Из инста-каналов в Телеграм никто особо не отреагировал на заявление главы Роскомнадзора о возможной блокировке Facebook к концу года. Казалось бы причем тут Instagram? А все просто, блокируют Facebook, соответственно блокируется возможность авторизации в сервисах статистики, включая "белый" автопостинг. И с ними работать будет нельзя. А все из-за того, что новое API Инстаграм висит на Facebook.
    Ну а так как блокируется именно источник данных, то не будут работать вообще все сервисы на новом API, будь они из РФ или любой другой страны.
    Это конечно самый худший вариант событий, и на него рассчитывать не будем.

  • LiveDune

    Из-за последних событий много спрашивали и в тех. поддержку и в личку о том, а что же будет с массфолловингом, да и вообще с приватным API. Поделюсь своим мнением.
    Массфолловинг никаким боком не связан с утечкой данных, и он это самое последнее, о чем думает сейчас Инстаграм.
    А вот сбор баз на сервисах массфолловинга может пострадать. Думаю, что после того, как вся история подутихнет, ближе к лету возьмутся и за темную сторону сбора данных.

    В частности, подрежут возможность выгрузки подписчиков/лайков/комментариев. Если сейчас можно зайти к https://www.instagram.com/buzova86/, нажать на подписчиков и посмотреть чуть-ли не всех (а может и всех?), то оставят 100 последних подписчиков + поиск по ним. Этого с головой хватит тем, кто проверят подписчиков блогера вручную перед подачей рекламы. Но этого также хватит чтобы изрядно расплодившиеся в последнее время сервисы по проверке блогеров умерли поголовно, а вместе с ними и серые сервисы аналитики, такие как Пикалитикс.

    Ситуация усугубится еще и тем, что некоторые владельцы сервисов аналитики, которые закрылись, полезут в приватное API, "пилить" свои продукты.

  • LiveDune

    Запустили добавление чужих аккаунтов на Дашборд.
    Аккаунты, которые были добавлены ранее обновляются с 9 апреля. Еще не все работает корректно, но мы тестим, проверяем и вылизываем постоянно. Главная проблема сейчас в том, что оказалось намного проще выкинуть почти весь код, отвечающий за работу Инстаграм, что мы собственно и сделали. Как собираются данные, как обрабатываются, как хранятся, все новое. В чем же проблема? Категорическая нехватка времени на тестирование, поэтому частенько баги пролазят, но мы их ловим и бьем тапком.

    У некоторых пользователей никак не получается привязать бизнес-аккаунт к LiveDune, после общения с тех. поддержкой Facebook оказалось, что эти аккаунты и не совсем бизнес. А делать еще третий тип аккаунтов не очень хочется. Дальше общаемся с Facebook, ждем ответа насчет того, что с ними делать и как их превратить в полноценные бизнес-аккаунты.

  • LiveDune

    Выходные не прошли зря, мониторинг чужих аккаунтов практически восстановлен, сейчас запущена мигрирование всех чужих аккаунтов добавленных на Дашборд.
    Т.е. по сути все аккаунты проверяются на наличие бизнес-аккаунта, если есть - он начинает обновляться, если нет - удаляется с Дашборда. У меня из 90 аккаунтов удалилось только 13 и половина из них друзей, у которых по 200-300 подписчиков.

    Сегодня мы доделаем синхронизацию данных в чужих аккаунтах из старого API с новыми данными, отладим лимиты в Facebook и уже завтра, мониторинг чужих аккаунтов снова будет доступен.

    НО. Главное условие анализа чужих аккаунтов - наличие на Дашборде своего бизнес-аккаунта Инстаграм. В новых реалиях, мы имеем всего 200 запросов в час к API от одного бизнес-аккаунта, вместо 5000, как было ранее. И если раньше мы могли пулять запросами на право и на лево. то теперь это не так.

    Кстати, у своих аккаунтов заработал график Подписки/Отписки, он теперь намного более точный, но, в нем идет сдвиг примерно на 10 часов по МСК. Т.е. подписки/отписки за 9 апреля будут учитываться с 10 часов 9 апреля до 10 часов 10 апреля. Все это из-за того что Инстаграм живет совсем по другому времени и это надо принять.

  • Реклама

  • LiveDune

    Как врут биржи-блогеров, а именно GetBlogger:

    "У нас все в порядке, мы работаем в прежнем режиме, так как получаем информацию об аудитории блогера с его разрешения, а не парсим как сервисы статистики" (взято отсюда https://www.instagram.com/p/BhOTLT-BknP)

    Начнем с того, что получать список подписчиков через API нельзя, совсем, для всех. Разрешил блогер, или не разрешил - все, лавочка закрыта.
    Может они показывают статистику с нового API? https://www.instagram.com/about/legal/terms/api/ пункт A21, это строго запрещено. Пусть блогер хоть письменное разрешение дал, Инстаграм запрещает показывать эти данные третьим лицам.
    Да и судя по предоставляемой статистике, данные именно из старого API.

    Соответственно легко сделать вывод, что GetBlogger просто врет. Ситуативный маркетинг, все умерли, а у нас все хорошо - идите к нам. Но при этом, доступа к API у них нет и соответственно вся их статистика становится все менее актуальной, с каждым днем.

    Но, есть вариант, что они и вправду работают в прежнем режиме, но как? Именно делают "парсинг" аудитории блогера обходными путями, опять же нарушая политику Инстаграм.

    А еще вот такое заявление (из последнего поста https://telegram.me/dnative):
    "Платформа GetBlogger изначально строилась с учетом того, что блогеры должны самостоятельно предоставлять доступ к статистике своих аккаунтов, привязывая их к платформе."

    Предоставлять доступ, привязывать...значит все-таки API, значит все-таки врут. Или просто не заметили что ничего не работает?

  • LiveDune

    Работоспособность обновления личных бизнес-аккаунтов полностью восстановлена, синхронизируются все данные. Пришлось убрать анализ "Фильтров" с вкладки посты, но не велика потеря.
    Осталось только восстановить график подписки/отписки. Сейчас он отключен, ибо старый метод может давать результат с большой погрешностью, но мы уже придумали новый алгоритм, который даст цифры с оценочной погрешностью в 2%. Т.е. этот график будет давать очень точный результат. За выходные протестируем.

    К понедельнику также планируем восстановить в полной мере анализ чужих аккаунтов (при наличии у них бизнес-аккаунта). Но вот у чужих аккаунтов нельзя получать аватары, количество исходящих подписок и ссылки на посты (что особенно странно). И конечно же, держим кулачки, чтобы Facebook не передумал и не закрыл возможность получения и этих данных по чужим аккаунтам.
    Напомню, что Facebook также обещал в начале 2019 года дать в новом API получать информацию о любых аккаунтах, а не только тех, кто переключены в бизнес-аккаунты. Но это обещания могут не сдержать.

    Если у вас еще есть проблемы с обновлением личным аккаунтов, пишите на [email protected], только укажите что именно не обновляется.

  • LiveDune

    Отправили рассылку всем на E-mail со всеми подробностями, но из-за спешки около 5% пользователей могли получить чуть сырую версию. Если вы входите в эти 5%, то вам придет новое письмо, с более точными данными.