Исправление технических проблем в системе Brand Analytics

Уважаемые коллеги!

25 марта в 02:45 в системе мониторинга и анализа социальных медиа и СМИ Brand Analytics произошел серьезный технический сбой, повлиявший на работоспособность сервиса и доступность данных.

Это действительно серьезная авария. Помимо существенно возросшей из-за ситуации с коронавирусом нагрузки, технической службой была зафиксирована внешняя атака. После устранения всех последствий аварии мы обязательно разберемся в ее причинах. А пока прикладываем максимум усилий для полного восстановления работоспособности системы.

Главное, о чем мы хотим сказать вам сейчас: на настоящий момент данные собираются в штатном режиме, доступен весь автоматический и ручной функционал для их обработки и анализа. Однако сохраняются небольшие ограничения на сбор ретроданных, а полное их восстановление займет еще некоторое время. Наши технические службы работают над восстановлением данных в круглосуточном режиме.

Мы продолжим информировать вас о ходе работ – будем обновлять информацию в этом материале (ниже) и уточнять сроки. При планировании ваших работ просим учитывать, что фактические сроки могут несколько отличаться от предполагаемых, поскольку ситуация нештатная и труднопрогнозируемая.

Спасибо за вашу поддержку и понимание!
Ваша команда Brand Analytics


13 апреля 2020

Ситуация на текущий момент:

  1. Восстановлены данные 2019 года за октябрь, ноябрь и декабрь.
  2. Прогноз по полному восстановлению 2019 года и более ранних периодов сохраняется – срок завершения до 10 дней.

9 апреля 2020

Ситуация на текущий момент:

  1. Все данные с 1 января 2020 года восстановлены в активных и остановленных темах. Восстановлено более 75% ручной разметки. На этом работы по 2020 году завершены.
  2. По 2019 году и более ранним периодам на текущий момент восстановлено 70% данных.
  3. Восстановление оставшихся данных завершится в течение 5-10 дней.

8 апреля 2020

Ситуация на текущий момент:

  1. Ручная разметка за январь и февраль восстановлена.
  2. У сообщений с восстановленной разметкой за все периоды появилась метка «восстановленная разметка».
  3. Сегодня замедлений в работе системы не планируется – основные нагрузочные процессы завершены, система работает в штатном режиме.
  4. Осталось восстановить меньшую часть данных за 2019 и предыдущие периоды, так как большая часть уже восстановлена. Будем вас информировать о сроках завершения этого процесса.

7 апреля 2020

Ситуация на текущий момент:

  1. Данные за январь и февраль 2020 в активных и остановленных темах полностью восстановлены.
  2. Ручная разметка за январь и февраль восстановится ориентировочно к 10 часам (мск) дня 8 апреля.
  3. Также ориентировочно к 10 часам 8 апреля у сообщений с восстановленной разметкой за все периоды появится метка «восстановленная разметка».
  4. До восстановления разметки (10 часов 8 апреля) могут наблюдаться замедления в работе системы из-за ускоренной закачки восстановленных данных.

6 апреля 2020

Ситуация на текущий момент:

  1. Данные за февраль (без ручной разметки) в активных и остановленных темах полностью восстановлены по всех аккаунтах.
  2. Данные за январь (без ручной разметки) в процессе восстановления, который завершится сегодня, 6 апреля.
  3. Ручная разметка за январь и февраль появится в темах до конца вторника 7 апреля.
  4. К текущему моменту за более ранние периоды во всех аккаунтах восстановлена бОльшая часть данных, включая ручную разметку. Оставшиеся данные в процессе восстановления, который может занять еще несколько дней.
  5. Признак «восстановленная разметка» для фильтрации сообщений за все периоды будет доступен в системе 8 апреля.

Фактические сроки могут отличаться от предполагаемых, поскольку ситуация нештатная и труднопрогнозируемая.


3 апреля 2020

Ситуация на текущий момент:

  1. При создании новых тем сняли ограничение на глубину сбора – доступна стандартная глубина в 30 дней.
  2. Завершена выкатка ручной разметки за период с 1 по 17 марта. Обновлены 12 млн сообщений. Однако часть разметки (примерно 40%) восстановить не получилось. К сожалению, прогнозы были верными. Никаких других действий с данными за март не планируется.
  3. В течение сегодняшнего дня, 3 апреля, станет доступен тематический фильтр «Восстановленная разметка». С его помощью можно исключить автоматически восстановленную разметку, чтобы для остальных сообщений восстановить разметку вручную.
  4. Прогнозы по срокам восстановления февраля (утро 4 апреля) и января (в течение дня 4 апреля) на текущий момент в силе.

Фактические сроки могут отличаться от предполагаемых, поскольку ситуация нештатная и труднопрогнозируемая.


2 апреля 2020

Ситуация на текущий момент:

  1. Сбор данных в режиме реального времени происходит в штатном режиме. Доступен весь функционал обработки и анализа.
  2. Данные за март во всех активных и остановленных темах рабочих аккаунтов восстановлены.
  3. Данные по ручной разметке восстановлены полностью с 18 марта.

Ориентировочные сроки восстановления оставшихся данных:

  1. Ручная разметка за 1-17 марта будет восстановлена к утру 3 апреля. У сообщений с восстановленной разметкой будет специальная метка. С помощью фильтрации по этой метке можно будет исключать данные сообщения, чтобы повторно размечать только те ручные данные, которые  не восстановлены. Будет восстановлено примерно 64% ручной разметки.
  2. Сообщения за февраль (без ручной разметки) – начнем восстанавливать в ночь на 3 апреля. Ожидаемый срок восстановления – утро 4 апреля.
  3. Планируемый срок восстановления сообщений (без разметки) за январь – через сутки, после загрузки февраля, ориентировочно до обеда 5 апреля.
  4. Сообщения за 2019 год и ранее и разметка за все периоды, кроме марта будут восстановлены в течение 1-2 недель.

Фактические сроки могут отличаться от предполагаемых, поскольку ситуация нештатная и труднопрогнозируемая.


30 марта 2020

Мы хотим, чтобы вы точно знали, что происходит: что мы уже починили и что чиним прямо сейчас.

  • Полный поток сообщений работает в штатном режиме с 13:00 25 марта.
  • Данные за март восстановлены во всех активных темах, ручная разметка восстановится до конца сегодняшнего дня, 30 марта.
  • Данные с 1 января будут восстановлены в течение 2-3 дней.
  • Данные за предыдущие годы будут восстановлены в течение 1-2 недель.

Для того, чтобы максимально оперативно восстановить работоспособность системы, мы были вынуждены ввести ряд ограничений. Архивный сбор временно недоступен. Временно ограничена глубина сбора новых тем – сейчас это 7 суток. Особые трудности возникли с восстановлением ручной разметки. К сожалению, для данных до 18 марта 2020 часть ее может быть утеряна.

Бесплатный демонстрационный доступ

Персональный консультант проведет демонстрацию и поможет протестировать систему с учетом ваших бизнес-задач.
Запись опубликована в рубрике Обновления Brand Analytics. Добавьте в закладки постоянную ссылку.