блэклист что это такое простыми словами
BYYD. Блог
Что такое Black list и White list в рекламе?
Забота о brand safety — важный пункт в разработке рекламной стратегии. Он предполагает, что реклама не должна появляться в контексте табуированных тем и на площадках, которые могут навредить репутации бренда. В контексте brand safety и не только рассмотрим, что такое Black list и White list в рекламе (по-другому их называют Blocklist/Allowlist) — на основе поста в блоге Inmobi.
Что такое Black list и White list?
В Black list включают площадки (сайты и мобильные приложения), на которых не должна появляться реклама. В основном причина попадания в такое «черный список» связана с brand safety или случаями мошенничества. Но не только! Например, с началом пандемии в прошлом году западные СМИ писали, что бренды отказываются размещать рекламу рядом с новостями о коронавирусе.
Также Black list можно рассматривать в контексте исследования Brand Lift. Например, мы в BYYD включаем аудиторию для ретаргетинга в Black list, когда проводится исследование среди не видевших рекламу (отслеживание такой аудитории осуществляется по Device ID).
В White list включают список площадок, на которых, наоборот, стоит размещать рекламные объявления. Причем это понятие чуть шире и не ограничивается отбором только площадок с хорошей репутацией. Whitelist-ы формируются и по категориям (например, когда в процессе рекламной кампании настраивается показ на аудиторию заинтересованных в спорте пользователей, в White list включают спортивные приложения).
Преимущества работы с Black list и White list
InMobi выделяет преимущества.
Кроме указанных преимуществ работы со списками, формирование Whitelist-ов еще и помогает таргетироваться на целевую аудиторию. Например, мы в BYYD в процессе настройки рекламных кампаний формируем списки площадок подходящих категорий, где находится целевая аудитория бренда (приложения для мамочек, спортивные, игровые).
Ведение Blacklist-ов — трудоемкий процесс (и это потенциальный минус). Такие списки нужно обновлять часто, поскольку появляются новые площадки с потенциально «опасным» контентом или ненадежной репутацией.
Почему блэклист страшнее DDos
Для начала давайте определимся в понятиях, указанных в заголовке.
Что такое DoS-атака
DoS-атака (атака типа «отказ в обслуживании», от англ. Denial of Service) — атака на вычислительную систему с целью довести её до отказа, то есть создание таких условий, при которых легальные (правомерные) пользователи системы не могут получить доступ к предоставляемым системой ресурсам (серверам), либо этот доступ затруднен. Видов DoS-атак существует много, но главный их смысл сводится к мере экономического давления: простои службы, приносящей доход, счета от провайдера и меры по уходу от атаки ощутимо бьют «цель» по карману.
Существует много способов атаки, столько же и способов их разблокировки. Простой пример: на ваш сайт идет слишком много спам-комментариев и он, только потому, что на сервер хоста будет идти слишком большая нагрузка, на какое-то время прекратит возможность доступа к ресурсу. Случалось ли у кого-то такое. Многое зависит, конечно от мощности сервера, но суть, думаю понятна.
Что такое блэклист (blacklist)
Блеклист, он же черный список — это список жалоб, которые подают пользователи интернета на зараженные вирусами сайты. Например, вы увидели, что какой-то сайт ссылается на ваш ресурс, но антивирус блокирует его:
блеклист от Google 
Здесь можно пожаловаться на фишинг. А вот здесь реабилитироваться. Аналогично — жалоба на вирусы здесь, а здесь — реабилитация (де-блеклист).
Стучать или не стучать, решайте сами. Но хочу заметить, что такой возможностью могут пользоваться и в гнусных целях: настучав на конкурента и сделав это не единожды, можно добиться нужного результата. Получить черную метку попасть в блеклист довольно легко — операция автоматизированная, а вот выйти из него — намного труднее, — это долгая ручная процедура с рассмотрением и проверки заявки. Вам это ничто не напоминает?
Вот почему блэклист страшнее DDos, ведь никто не станет успешно проводить DDos-атаки длительно — фильтры забанят ботнет, а вот блэклист — это надолго. И, в отличие от DDos, ещё и дает пятно на репутацию сайта, даже постоянные посетители станут более осторожными и могут из боязни прекратить посещение сайта.
В этой связи, я хочу привести пример, который предоставил один сайт:
однажды все форумы Рунета, как один, оказались в черном списке Гугла, да и Яндекса, причем пометка у всех отображалась в результатах поиска. Причина — кто-то загрузил на общедоступный фотохост radikal.ru картинку с кодом, напоминающим эксплойт. Это мог быть и не хакер, просто человек где-то нашел картинку и захотел вставить её в пост форума. (Менее вероятно — вирусный код был в рекламе, размещенной в партнерке на «Радикале» по заказу хакера). В результате домен этого фотохостинга попал в блэклист. И тут же в блэклист попали тысячи сайтов и форумов, отображающих на своих страницах пользовательские картинки с «Радикала». Причем хотлинк был не той пресловутой сомнительной картинки, а совершенно других изображений — просто с того же домена. Антивирусные алгоритмы по сайтам (даже используемые лидерами рынка) ещё в пеленках, они не разбирают таких тонкостей и банят все оптом. Так тысячи сайтов оказались без вины виноватыми
Как вам это нравится?
Хакер размещает баннер
К сожалению «темные силы» идут на шаг впереди антивирусов и прочих защит, а двигательной силой является деньги: ботнет — эта прибыль от продажи. Причем — весьма не маленькая. Антивирусных компании предлагают ужесточение наказаний за создание и распространение вирусов и требуют, чтобы партнеркские кампании обязательно модерировали баннеры на вредоносные коды и под страхом больших штрафов. Для того, что бы в дальнейшем никому не повадно было наживаться на ботнетах. Но, как видим, воз и ныне там… А спасание утопающих — дело рук самих утопающих.
Что надо знать о блэклистах при работе с email-рассылками?
В email-маркетинге понятие «черный список» очень актуально. Сервис email-рассылок Dashamail предлагает подробно рассмотреть все, что связано с блэклистами, в который попадают IP-адреса или доменные имена, замеченные в рассылке спама.
Почтовая репутация
На основании истории проводимых рассылок у каждого отправителя складывается своя почтовая репутация. Это такой показатель, который характеризует качество трафика и самого отправителя. Он зависит от репутации IP адресов, домена отправки, частоты рассылки, статистики отписок и жалоб на спам, процента доставленных писем, их тематики и много другого.
Каждый почтовый провайдер использует свой алгоритм для определения почтовой репутации, но все они в обязательном порядке обращаются к специальным спискам, блэклистам, в которые попадают недобросовестные отправители, замеченные ранее в рассылке СПАМа. О них сегодня и поговорим.
Публичные и частные чёрные списки в рассылках
Черных списков много, но можно выделить 2 основные группы:
Частные black-листы – допустим, вы добавили какой-то домен или адрес в почтовой программе/клиенте в черный список, и письма от указанного отправителя больше не смогут попадать в папку «Входящие». У многих серьезных компаний есть собственные листы, как черные, так и белые, в которые включаются добросовестные и нежелательные отправители рассылок по электронной почте. Частные списки менее опасные, так как их максимальное ограничение – запрет доставки писем на тот или иной домен. Подобную проблему можно решить в рамках конструктивного диалога с администратором почтового сервера.
Публичные черные списки. Такой black-лист намного опаснее, так как их любят использовать спам-фильтры и почтовые провайдеры. Что происходит, если домен или адрес IP попадают в него? Письма могут блокировать на разных адресах. Представьте, что вы попали в blacklist SpamHaus, и «санкции» будут внушительными, так как отклоняться будут все письма на таких почтовых доменах, как outlook, hotmail, gmail, а также live и msn.
Далее мы будем обсуждать именно вторую подгруппу, так как она оказывает наибольшее влияние на почтовую репутацию.
Самые популярные черные списки в Интернете
Конечно, в Сети множество блэклистов. Есть более популярные и совсем неизвестные. Среди наиболее распространенных стоит упомянуть ТОП-3:
Абсолютный лидер SpamHaus.
От него не отстает по авторитетности SpamCop.
Также нужно включить в этот «хит-парад» SORBS.
Данные списки чаще всего используются почтовыми провайдерами для анализа почтовой репутации. Попадание в один из них пагубно скажется на общей статистики доставляемости писем. Кроме того, у всех провайдеров есть свои списки, но они закрыты от любого использования извне.
Как проверить не находитесь ли вы в черном списке?
Блэклистов очень много. Чтобы не выискивать себя в каждом из них, мы рекомендуем обратиться в сервису MXToolBox. Он проверяет наличие домена и/или IP-адреса более чем в 100 блэклистах. В сервисе DashaMail с ним есть готовая интеграция: при настройке домена отправки мы автоматически проверяем его почтовую репутацию и, если обнаруживаем проблемы, даем рекомендации по их решению.
Перед запуском email-рассылок убедитесь, что вас нет в чёрных списках с помощью сервиса MXToolBox
Перед запуском рассылок обязательно проверьте не находитесь ли вы в черных списках, даже если вы никогда не делали рассылок. Возможно в нем окажется ваш IP адрес. В таком случае лучше всего обратиться к хостеру вашего сайта для решения этой проблемы.
Почему можно попасть в blacklist?
Работая в этом сегменте, мы каждый день сталкиваемся с ситуациями, когда доменные имена или IP-адреса попадают в те или иные списки, поэтому стоит разобраться, почему так происходит. Самая главная причина – это база. И здесь стоит вспомнить небольшую, но очень показательную историю:
Представьте, что абстрактная компания собирает долгие годы список адресов подписчиков, но не проводит рассылки. В этом списке однозначно есть активные поклонники, которые покупают его товары и услуги. При этом есть и те, кто оказался там случайно, так как купил около полутора лет назад какой-то продукт, но сейчас совсем не заинтересован в товарах и письмах и забыл, что подписывался на рассылки вовсе. Более того, кто-то мог уже перестать пользоваться своим ящиком, и почтовый провайдер превратил его адрес в СПАМ-ловушку! И вот компания берёт и запускает свою первую рассылку по всей этой базе. Не неё сыпятся жалобы, отписки, возвраты, почтовые провайдеры видят среди получателей СПАМ-ловушки… и блокируют отправителя, занося его в черный список.
Можно также предложить две схожие ситуации, способные влечь за собой появление «комфортабельного» места в ЧС:
Если вы берете адрес на web-сайте потенциального клиента или записываете его в свою анкету, а затем делаете рассылку на этот адрес без получения согласия.
Не менее рискованная ситуация, когда адрес вроде бы самостоятельно совершает подписку, но не подтверждает её.
Обе ситуации схожи тем, что в списке оказываются адреса, которые неизвестны вам ни с какой стороны. Вы не можете ответить ни на один вопрос:
Правильный ли указан адрес почты?
Изъявил ли владелец желание на подписку?
Не ошиблись ли вы или он, записывая email?
Не стоит недооценивать проблему, так как она стоит очень остро и затрагивает многих клиентов. Ряд почтовых провайдеров специально запускают роботов, чтобы те совершали подписку в тех формах, которые они находят во Всемирной Паутине, после чего проверяют, какие рассылки им приходят.
Помните про основное правило любой email-рассылки: ваша обязанность заключается в том, чтобы в первом же письме попросить подтверждение подписки, потому что иначе велик риск оказаться в блэклисте.
Можно ли «уйти» из black-листа и как это сделать?
Представим, что вас занесли в черный список. Рождается закономерный вопрос: как узнать об этом, когда вы уже ведете работу?
Это можно понять по логу в ответе сервера.
Также вы получите соответствующее письмо, если вы являетесь владельцем сервера.
К примеру, Hotmail может прислать ответ при попадании в черный список СпамХауса, и он выглядит таким образом:
Сообщение почтового провайдера о попадании в blacklist
Остается понять, что делать в такой ситуации:
В первую очередь устранение причины попадания в blacklist, чтобы исключить повторное внесение в него.
Проконтролируйте, на 100% ли выполнены все требования по ведению честных и прозрачных рассылок.
Теперь можно приступать к удалению. Еще раз акцентируем ваше внимание на необходимости соблюдения всех правил, так как первое удаление обычно очень простое, не несет за собой никаких проблем и последствий, ведь компании с пониманием относятся к такой ситуации. Что происходит дальше? Если отправитель вновь оказывается в ЧС, а затем снова, то есть все шансы, что антиспам-службы больше не пожелают удалять адрес из списков, и доставляемость будет под ударом, это мягко сказано.
Разберем на конкретном примере, как осуществляется удаление из известного блэклиста, упомянутого выше, из SpamHaus, который по праву считается одним из наиболее серьезных и авторитетных, так как оказывает прямое влияние на доставку письме на массу доменных имен:
Нужно войти в центр по удалению из черного списка СпамХаус, где нужно ввести свой домен или адрес IP! Если же вы владелец, то вам уже должно было прийти соответствующее уведомление о блокировке, которое выглядит таким образом:
Выявляете и устраняете проблему. В данном примере можно увидеть, что причина кроется в несанкционированной массовой рассылке по списку непроверенных адресов.
Не стоит отчаиваться, так как есть перечень рекомендаций, чтобы выйти из блэклиста и больше не попадать в него:
Используйте капчу, чтобы исключить подписку на рассылку со стороны роботов.
Настоятельно рекомендуется использовать регистрацию с подтверждением – это исключает любые нежелательные подписки.
Соблюдайте все правила ведения рассылки, так как любой обман может сыграть злую шутку.
Сам СпамХаус предлагает отправить письмо с объяснениями, что случилось, а также с указанием перечня тех действий, что были предприняты, чтобы проблема осталась в прошлом. После отправки письма в течение суток команда дает официальный ответ, в котором сообщает либо то, что адрес успешно удален из ЧС, либо дает дополнительные указания, которые надо выполнить.
Подводя итоги: правила честной рассылки, чтобы не попасть в ЧС
Предлагаем несколько основных советов, как не оказаться в черном списке:
Используйте функцию подтверждения согласия на рассылку, чтобы исключить любые ненужные и случайные подписки и регистрации со стороны роботов. Мы часто сталкивались с подобными случаями, когда пользователи попадали в black-листы, так как на их рассылку без подтверждения подписывались антиспам-службы, но так и не получали правильно настроенное письмо для подтверждения рассылки, и, напомним, что оно должно быть самым первым.
Контролируйте ситуацию и не отправляйте письма тем, кто их не читает. Если за 3-6 месяцев адрес не читает ни одного письма, значит, настало время для удаления его из базы. Денег вы не получите, зато есть реальный шанс попадания в ЧС и репутационных потерь. Соберите волю в кулак и удалите неактивных подписчиков. Это своеобразный «детокс» вашей базы. В сервисе DashaMail есть специальная функция, которая называется “оптимизация доставляемости”. Вы просто указываете через сколько времени или количество подряд неоткрытых писем следует исключить подписчика из рабочей части вашей базы, и сервис автоматически его деактивирует. Так вы сэкономите на стоимости доступа к сервису и улучшите свою почтовую репутацию. Не тратьте свои ресурсы на тех, кому неинтересны ваши письма!
И снова о подтверждении рассылки. Отдельно напомним, что оно должно быть не когда-нибудь потом, в а первом же письме, чтобы исключить отправку сообщений роботам.
И, наконец, капча. Ее многие не любят, но желательно добавить какой-то относительно простой вариант, чтобы также исключить подписки со стороны роботов.
Теперь вы можете контролировать процесс ведения рассылок и исключить неприятную вероятность попадания в черные списки, что является лучшей заботой о будущем.
Black и White листы: для чего они нужны и как их настроить
Блэк- и вайт-листы пользуются популярностью у арбитражников, потому что приводят к большему профиту. Они помогают исключить источники некачественного трафика или, наоборот, сконцентрироваться на тех площадках, где трафик целевой. Сейчас подробнее.
Black-лист
Какие сайты вносить в блэк-лист?
Ответ простой: площадки с некачественным ботовым трафиком, нецелевой аудиторией, высоким баунс-рейтом.
Шаг 1. Запускаете рекламу и откручиваете тизеры, чтобы собрать статистику. Убедитесь, что у вас проставлен макрос, который позволяет автоматически определять ID площадок.
В тизерных сетях макросы имеют различный вид. После создания ссылки со всеми необходимыми параметрами обратитесь в техподдержку вашей тизерки, для проверки правильности составления.
Шаг 3. Собираем список площадок и добавляем в блэк-лист.
Будьте внимательны: при тестировании абсолютно нового оффера или вертикали вам потребуется больше времени, чтобы собрать релевантную статистику.
Добавлять сайты в блэк-лист лучше сразу же, как только вы поняли, что результаты по площадке вас не удовлетворяют. Не ждите, что ситуация наладится, лучше отключите показ рекламы там и перераспределите бюджет.
White-лист
Обычно вайт-лист составляется по следующему принципу: рекламодатель добавляет сайты с дешевым и качественным трафиком, постепенно увеличивая стоимость. Это позволяет одновременно получать прибыль и шаг за шагом выходить на новые, более дорогие и качественные, сайты.
Как сформировать вайт-лист
Шаг 1. Запускаете объявления и так же следите за средним уровнем дохода за клик.
Шаг 2. Чтобы автоматически определять ID площадок, добавьте макрос. Тогда ID подтянутся автоматически, и вам не придется вбивать их вручную.
Стоит ли покупать блэк и вайт листы?
Мы крайне не рекомендуем скачивать такие листы в открытом доступе или, что еще хуже, покупать за деньги. Списки, как правило, создаются с использованием определенных тизеров, которые могут существенно отличаться от ваших. Да и ситуация в мире арбитража меняется с бешенной скоростью, поэтому информация даже «свежих блэк и вайт листов» может быть неактуальна спустя пару дней.
Самый лучший вариант – прошарить эту схему самому. Это поднимет ваш скилл в арбитраже и пригодится еще в дальнейшей работе.
Если тематика офферов похожа и попадает в одну ЦА, можно использовать один блэк лист. В противном случае придется попыхтеть над составление листов под каждую кампанию.
Поделитесь в комментариях, какие результаты вы получили, используя блэк- и вайт-листы.
Black/White листы: как составить, отслеживать и обновлять
Black и White листы — это черные и белые списки рекламных площадок в тизерных сетях. С их помощью можно отключить показ рекламы на площадках, не приносящих профит, и наоборот, собрать список качественных источников целевого трафика.
Методы формирования списков
По конверсии
Самый простой, но в то же время коварный способ формирования списков. Суть проста — анализируем конверсию трафика с конкретной площадки. Если денег потрачено больше двойной цены лида, а конверсии так и нет, значит площадку можно занести в Black лист. Но тут нужно быть осторожными — возможно, дело вовсе не в площадке и не в качестве трафика, а в том, что посетителям «не зашли» ваши креативы. Поэтому прежде чем приступать к составлению списков по этому методу — протестируйте лендинги и креативы.
По качеству трафика
Этот способ нужен для того, чтобы отсеять площадки, приносящие мусорный трафик — ботов или проплаченных посетителей, зарабатывающих на переходах по ссылкам. Активность ботов можно отследить с помощью трекеров и других инструментов аналитики. Характерная черта мусорного трафика — аномальное количество переходов за короткое время. Естественно, без лидов.
По поведенческим факторам
Этот метод для продвинутых арбитражников, которые хорошо знают свой трафик, потому что для одних тизеров вариантом нормы считается отказ в 5%, а для других — в 25%.
Для анализа по поведенческим факторам берут такие показатели, как среднее время на лендинге, процент отказов, пробив сайта-прокладки. Можно увеличить точность метода, если удастся дополнительно отслеживать скролы, выделения курсором, клики.
Конечно, это все имеет смысл только в том случае, если активность пользователей приносит деньги.
Black-лист
Black лист — список площадок, на которых не должна показываться ваша реклама. В него можно включить площадки с ботами, отсутствием нужной ЦА, высокими процентами отказа.
Как составить Black лист
За основу берем показатель среднего дохода за клик — EPC. Чтобы его рассчитать, нужно поделить итоговую прибыль на количество кликов. Затраты на показ тизеров не должны превышать 2-3 суммы конверсии — этого достаточно для сбора данных. Если доход с одного клика меньше его стоимости, то площадку можно заносить в Black лист.
Совет — для тестирования новой площадки лучше использовать проверенные тизеры, если они у вас есть — тогда можно уменьшить объем открутки для сбора статистики.
White лист
White лист — список площадок, где должна показываться ваша реклама. Логично, что они приносят хороший качественный трафик и, соответственно, доход. За основу анализа площадки также берется EPC — доход должен превышать стоимость клика.
Как составить White лист
Отбор площадок для демонстрации креативов. Вы отслеживаете в личном кабинете тизерной сети источники с наиболее выгодной конверсией и перенаправляете весь трафик на них.
Отбор площадок для повышения ставок. Вы выбираете самые выгодные площадки и увеличиваете ставки, чтобы повысить приоритет показа именно ваших объявлений. Здесь нужно быть осторожными и не переборщить с ценой клика.
Как отслеживать эффективность площадок
1. присваиваем партнерской ссылке субаккаунт — SubID
ссылка/sub1
2. добавляем макросы, чтобы автоматически определять ID площадок/тизеров, а не проставлять их номера вручную
ссылка/sub1=[SITE_ID]
В каждой тизерной сети свой способ формирования субаккаунтов и добавления макросов, обычно в личном кабинете есть рекомендации по их правильной настройке.
3. можно дополнительно использовать Яндекс Метрику и Google Analytics, для этого нужно будет присвоить ссылкам UTM-метки, например, для определения источника рекламы используется метка utm_source
4. Анализируем собранную статистику.
Популярные тизерные сети позволяют автоматизировать создание черных и белых списков благодаря инструментам, встроенным в личный кабинет. Есть сети, которые сами формируют такие списки. Продвинутым пользователям может быть недостаточно встроенного функционала, поэтому для более детальной статистики рекомендуем использовать трекеры, например, Binom.
Как обновлять Black и White листы?
В начале запуска новой рекламной кампании желательно отслеживать эффективность площадок и формировать листы в режиме реального времени. Особенно это касается черных списков. После того, как вы исключили источники большого количества некачественного трафика, и ситуация стабилизировалась, можно обновлять листы 1 раз в неделю.
Один Black лист для разных офферов — да или нет?
Общий блеклист для разных офферов можно создавать только в том случае, если они находятся в одной тематике и у них общая ЦА. Например, тематика «цветы» достаточно широкая, если мы рекламируем подарочный букет для девушки и средство для подкормки роз, то очевидно, что ЦА у них разная. Значит, и листы должны быть разные. А если мы берем несколько разных офферов с букетами для девушек, то в таком случае можно сделать общий блеклист.
Можно ли покупать Black листы?
Мы не рекомендуем покупать готовые Black листы или пользоваться скачанными из интернета. Лучше составлять их самостоятельно.
— Black лист делается под конкретные тизеры. Вы не знаете, что это за тизеры и не можете их проанализировать. В лучшем случае вам удастся собрать остатки трафика.
— Данные могли устареть. В тизерных сетях часто добавляются новые и удаляются старые площадки, поэтому список может быть попросту неактуальным. Вам придется заново перебирать весь лист, а это двойная трата времени и денег.
Еще важное
Совет — можно работать только с одним из списков, но мы рекомендуем сочетать Black и White листы.