Уважаемые коллеги!
25 марта в 02:45 в системе мониторинга и анализа социальных медиа и СМИ Brand Analytics произошел серьезный технический сбой, повлиявший на работоспособность сервиса и доступность данных.
Это действительно серьезная авария. Помимо существенно возросшей из-за ситуации с коронавирусом нагрузки, технической службой была зафиксирована внешняя атака. После устранения всех последствий аварии мы обязательно разберемся в ее причинах. А пока прикладываем максимум усилий для полного восстановления работоспособности системы.
Главное, о чем мы хотим сказать вам сейчас: на настоящий момент данные собираются в штатном режиме, доступен весь автоматический и ручной функционал для их обработки и анализа. Однако сохраняются небольшие ограничения на сбор ретроданных, а полное их восстановление займет еще некоторое время. Наши технические службы работают над восстановлением данных в круглосуточном режиме.
Мы продолжим информировать вас о ходе работ – будем обновлять информацию в этом материале (ниже) и уточнять сроки. При планировании ваших работ просим учитывать, что фактические сроки могут несколько отличаться от предполагаемых, поскольку ситуация нештатная и труднопрогнозируемая.
Спасибо за вашу поддержку и понимание!
Ваша команда Brand Analytics
13 апреля 2020
Ситуация на текущий момент:
-
Восстановлены данные 2019 года за октябрь, ноябрь и декабрь.
-
Прогноз по полному восстановлению 2019 года и более ранних периодов сохраняется – срок завершения до 10 дней.
9 апреля 2020
Ситуация на текущий момент:
-
Все данные с 1 января 2020 года восстановлены в активных и остановленных темах. Восстановлено более 75% ручной разметки. На этом работы по 2020 году завершены.
-
По 2019 году и более ранним периодам на текущий момент восстановлено 70% данных.
-
Восстановление оставшихся данных завершится в течение 5-10 дней.
8 апреля 2020
Ситуация на текущий момент:
-
Ручная разметка за январь и февраль восстановлена.
-
У сообщений с восстановленной разметкой за все периоды появилась метка «восстановленная разметка».
-
Сегодня замедлений в работе системы не планируется – основные нагрузочные процессы завершены, система работает в штатном режиме.
-
Осталось восстановить меньшую часть данных за 2019 и предыдущие периоды, так как большая часть уже восстановлена. Будем вас информировать о сроках завершения этого процесса.
7 апреля 2020
Ситуация на текущий момент:
-
Данные за январь и февраль 2020 в активных и остановленных темах полностью восстановлены.
-
Ручная разметка за январь и февраль восстановится ориентировочно к 10 часам (мск) дня 8 апреля.
-
Также ориентировочно к 10 часам 8 апреля у сообщений с восстановленной разметкой за все периоды появится метка «восстановленная разметка».
-
До восстановления разметки (10 часов 8 апреля) могут наблюдаться замедления в работе системы из-за ускоренной закачки восстановленных данных.
6 апреля 2020
Ситуация на текущий момент:
- Данные за февраль (без ручной разметки) в активных и остановленных темах полностью восстановлены по всех аккаунтах.
- Данные за январь (без ручной разметки) в процессе восстановления, который завершится сегодня, 6 апреля.
- Ручная разметка за январь и февраль появится в темах до конца вторника 7 апреля.
- К текущему моменту за более ранние периоды во всех аккаунтах восстановлена бОльшая часть данных, включая ручную разметку. Оставшиеся данные в процессе восстановления, который может занять еще несколько дней.
- Признак «восстановленная разметка» для фильтрации сообщений за все периоды будет доступен в системе 8 апреля.
Фактические сроки могут отличаться от предполагаемых, поскольку ситуация нештатная и труднопрогнозируемая.
3 апреля 2020
Ситуация на текущий момент:
-
При создании новых тем сняли ограничение на глубину сбора – доступна стандартная глубина в 30 дней.
-
Завершена выкатка ручной разметки за период с 1 по 17 марта. Обновлены 12 млн сообщений. Однако часть разметки (примерно 40%) восстановить не получилось. К сожалению, прогнозы были верными. Никаких других действий с данными за март не планируется.
-
В течение сегодняшнего дня, 3 апреля, станет доступен тематический фильтр «Восстановленная разметка». С его помощью можно исключить автоматически восстановленную разметку, чтобы для остальных сообщений восстановить разметку вручную.
-
Прогнозы по срокам восстановления февраля (утро 4 апреля) и января (в течение дня 4 апреля) на текущий момент в силе.
Фактические сроки могут отличаться от предполагаемых, поскольку ситуация нештатная и труднопрогнозируемая.
2 апреля 2020
Ситуация на текущий момент:
- Сбор данных в режиме реального времени происходит в штатном режиме. Доступен весь функционал обработки и анализа.
- Данные за март во всех активных и остановленных темах рабочих аккаунтов восстановлены.
- Данные по ручной разметке восстановлены полностью с 18 марта.
Ориентировочные сроки восстановления оставшихся данных:
- Ручная разметка за 1-17 марта будет восстановлена к утру 3 апреля. У сообщений с восстановленной разметкой будет специальная метка. С помощью фильтрации по этой метке можно будет исключать данные сообщения, чтобы повторно размечать только те ручные данные, которые не восстановлены. Будет восстановлено примерно 64% ручной разметки.
- Сообщения за февраль (без ручной разметки) – начнем восстанавливать в ночь на 3 апреля. Ожидаемый срок восстановления – утро 4 апреля.
- Планируемый срок восстановления сообщений (без разметки) за январь – через сутки, после загрузки февраля, ориентировочно до обеда 5 апреля.
- Сообщения за 2019 год и ранее и разметка за все периоды, кроме марта будут восстановлены в течение 1-2 недель.
Фактические сроки могут отличаться от предполагаемых, поскольку ситуация нештатная и труднопрогнозируемая.
30 марта 2020
Мы хотим, чтобы вы точно знали, что происходит: что мы уже починили и что чиним прямо сейчас.
- Полный поток сообщений работает в штатном режиме с 13:00 25 марта.
- Данные за март восстановлены во всех активных темах, ручная разметка восстановится до конца сегодняшнего дня, 30 марта.
- Данные с 1 января будут восстановлены в течение 2-3 дней.
- Данные за предыдущие годы будут восстановлены в течение 1-2 недель.
Для того, чтобы максимально оперативно восстановить работоспособность системы, мы были вынуждены ввести ряд ограничений. Архивный сбор временно недоступен. Временно ограничена глубина сбора новых тем – сейчас это 7 суток. Особые трудности возникли с восстановлением ручной разметки. К сожалению, для данных до 18 марта 2020 часть ее может быть утеряна.