Умовна ситуація. П'ятого листопада ви показали керівництву звіт: за жовтень надійшло 1 240 нових заяв. Двадцятого листопада хтось відкриває той самий звіт за той самий жовтень і бачить 1 287. Формули ніхто не чіпав, дашборд працює, помилок немає.
Звіт просто рахує жовтень заново щоразу, коли його відкривають. А жовтень у даних продовжує змінюватися ще довго після того, як закінчився в календарі.
Чому минуле в даних змінюється
Типові причини, і всі вони цілком законні:
- Запізнілі записи. Заява подана 28 жовтня, а в систему внесена 12 листопада. Вона належить жовтню, і жовтень «виріс».
- Виправлення заднім числом. Оператор знайшов помилку в даті й виправив її. Запис переїхав з вересня в жовтень або навпаки.
- Зміна статусу. Заява, яка 5 листопада була «прийнятою», 20 листопада стала «відхиленою». У звіті за прийнятими заявами її вже немає.
- Об'єднання дублікатів. Після чистки три записи однієї людини стали одним, і минулі цифри зменшилися.
- Зміна довідників. Підрозділ перепідпорядкували іншому регіону, і вся його історія перейшла разом із ним.
Жодна з цих змін не є помилкою. Помилка в іншому: звіт не знає, що минуле змінилося, і ніхто не може сказати, яка з двох цифр «правильна».
Залишок на рахунку і виписка
Більшість облікових систем зберігає поточний стан: який зараз статус у заяви, до якого регіону зараз належить підрозділ. Звіт за минулий період фільтрує цей поточний стан за датою і тому щоразу отримує трохи інший результат.
Це як дивитися на залишок на банківському рахунку, щоб зрозуміти, скільки грошей було місяць тому. Залишок показує лише «зараз». Для минулого потрібна виписка: що сталося і коли.
Аналогія неідеальна. У банку операцію за минулий місяць майже ніколи не змінюють заднім числом, а в реєстрах це звичайна робота. Тому даним потрібна не лише виписка, а й пам'ять про те, коли саме в ній щось виправили.
Що додати в архітектуру даних
Три речі, які зазвичай знімають проблему:
- Знімок на дату зрізу. Копія даних, потрібних для звіту, такими, якими вони були на момент формування. Звіт за жовтень будується на знімку, а не на поточній таблиці.
- Дві дати в кожному записі. Дата події (коли подали заяву) і дата внесення чи зміни (коли ми про це дізналися). Без другої дати запізнілий запис не відрізнити від звичайного.
- Опубліковані цифри окремо. Цифра, яку показали керівництву чи партнерам, зберігається окремо з датою публікації і версією. Її можна відтворити через рік.
Це не обов'язково велике сховище даних. Для одного-двох ключових показників достатньо таблиці знімків, яка поповнюється раз на місяць.
Домовленість про дату зрізу
Технічна частина не працює без домовленості. Хтось має вирішити:
- на яку дату рахується звіт за місяць, наприклад на п'ятий робочий день після його закінчення;
- що робимо зі змінами, які прийшли після цієї дати: ігноруємо, переносимо в поточний місяць чи випускаємо перегляд;
- хто ухвалює рішення про перегляд опублікованої цифри.
Без цієї домовленості кожен аналітик обирає дату сам, і ми повертаємося до двох правильних, але різних цифр.
Як показувати перегляди чесно
Опублікована цифра не має змінюватися мовчки. Якщо дані за минулий період помітно змінилися, покажіть дві колонки: «опубліковано» і «зараз», і одне речення пояснення. Наприклад: «+47 заяв, внесених після дати зрізу». Цифри в прикладі умовні, але формат працює саме так.
Корисно заздалегідь домовитися про поріг: яка різниця вимагає офіційного перегляду, а яка просто фіксується в журналі.
Якщо знімків ще немає
Почати можна і без нової інфраструктури. Якщо в записах уже є дата внесення, звіт можна наблизити до «як було»: рахувати лише ті записи, які внесли не пізніше дати зрізу. Так ви хоча б відсічете запізнілі записи і побачите, скільки їх насправді.
У цього прийому є межа. Він не повертає старий статус заяви і не скасовує об'єднання дублікатів, бо поточна таблиця пам'ятає лише останню версію запису. Тому для показників, від яких залежать гроші чи рішення керівництва, тимчасовий фільтр краще швидко замінити справжнім знімком.
І ще одна практична дрібниця: підписуйте на самому звіті дату, станом на яку пораховано дані. Одне речення внизу сторінки знімає половину питань «чому у вас інша цифра».
Перевірте у себе
Візьміть ключовий показник за минулий місяць, який ви вже показували. Порахуйте його сьогодні тим самим звітом і порівняйте з опублікованим. Якщо цифри різні, спробуйте пояснити різницю. Якщо пояснити не вдається, а відтворити опубліковану цифру неможливо, вам потрібен знімок і дата зрізу. Це питання архітектури даних, а не чергового виправлення у звіті.
А хто у вас вирішує, на яку дату рахується звіт за місяць?
