Как стандартизировать данные в базе

Человеческий фактор — одна из самых больших проблем во время сбора базы. Дело в том, что люди частно случайно или намеренно ошибаются при вводе данных: имени, почты, телефона и так далее. В результате данные пользователя в сервисе рассылок записываются некорректно.

Самые частые ошибки:

— опечатки в домене имейла;
— имя (пропущена буква или написано на транслите);
— путаница в графах ФИО (пишут в графе «Имя» свою фамилию, и наоборот);
— неверный формат даты (перепутаны местами месяц и день);
— неправильное написание города («Мск» вместо «Москва»).

Получается, что в базу попадают, с одной стороны, нормальные реальные данные, а с другой — их сложно использовать для персонализации, ведь нельзя быть на 100% уверенным в их адекватности.

На этапе ввода скорректировать данные и минимизировать количество ошибок может помочь превалидация — проверка данных на этапе ввода.

Поэтому даже после того, как провалидирована старая база и с помощью подключённой превалидации (проверки введённых в форме данных на корректность) собрана новая, нужно систематизировать данные по каждому подписчику и привести их к единому виду.

Для этого и нужна стандартизация.

Опечатки в доменах имейла — одна из самых частых ошибок. Люди торопятся и пишут gamil вместо gmail, yndex вместо yandex и так далее. Мы считаем, что лучше исправлять такие ошибки сразу при добавлении адреса в базе.

Дополнительно ничего подключать или запрашивать не нужно. Если наш алгоритм заметит опечатку в доменной зоне имейла, он автоматически исправит её, а в карточке подписчика будет пометка об исправлении и указан оригинальный имейл до исправления.

Во время стандартизации имеющиеся данные о каждом пользователе проверяются на соответствие с «эталоном» — самым корректным вариантом или форматом единицы данных.

Если обнаружится несоответствие, то система или автоматически исправит его на «стандартный» вариант, или пометит эти данные как требующие дополнительной ручной проверки.

Ниже объясняем на примерах, как работает стандартизация основных данных в Mailganer.

Имя и фамилия
Исправляются не только опечатки, но и имена и фамилии идентифицируются, и «проставляются» в нужные поля (например, если при импорте ФИО было передано полностью в поле «Имя»).

Также система умеет определять пол подписчика по имени и фамилии.

Email
Проводится проверка домена на соответствие реально существующим и наличие ошибок в них. Так, адрес smbd@mil.ru будет исправлен на smbd@mail.ru.

Телефон
Подгоняются под единый стандарт написания независимо от того, как именно пользователь ввёл свой номер телефона. Распознаются российские и иностранные номера, а также определяются заведомо «плохие» телефоны, которые замечены в спаме.

Посмотрите, как выглядят данные в базе до стандартизации и после:

Шаг 1. Зайдите во вкладку «Сегменты» на панели управления и выберите сегмент, для которого нужно провести стандартизацию.

Шаг 2. В разделе «Массовые действия с подписчиками» найдите пункт «Работа с базой» и нажмите «Стандартизировать».

Шаг 3. Нажмите на кнопку «Отправить» и ознакомьтесь с расценками на стандартизацию этого конкретного сегмента, стоимость которой спишется со счёта после подтверждения.

Шаг 4. Обновите страницу и откройте уведомления на верхней панели, чтобы проверить статус стандартизации.

Способ 1: проверить активных подписчиков в сегменте, кликнув на каждого из них. В карточке клиента будут указаны уже стандартизированные данные, которые удалось распознать и обработать — имя, имейл и телефон.

Способ 2: скачать стандартизированный сегмент целиком в табличном формате, чтобы проверить исправленные данные сразу по всем контактам в сегменте.