Аудит и нормализация исходных данных
В электронных таблицах ячейки одного столбца могут содержать разнородные значения: даты в разных форматах, телефоны с добавочными номерами в текстовом виде или комментарии вместо статусов сделок. Перенос начинается с выгрузки всех таблиц в неизменяемый архив и проверки типов данных.
На этом шаге выявляются пропущенные обязательные поля, разорванные связи между контактами и компаниями, а также некорректная кодировка текстовых полей.
- Нормализация телефонных номеров к единому международному стандарту.
- Приведение дат и временных меток к формату ISO с учетом часовых поясов.
- Очистка текстовых полей от управляющих символов, переносов строк и лишних пробелов.
- Выделение справочников из текстовых значений статусов и типов клиентов.
Поиск и объединение дубликатов
Таблицы накапливают повторы из-за ручного ввода разными менеджерами. Один и тот же клиент может фигурировать под разными именами, но с одинаковым адресом электронной почты или ИНН.
Правила дедупликации фиксируются до запуска любых скриптов: выбирается главный идентификатор и логика слияния связанных записей, чтобы история взаимодействий не потерялась при объединении карточек.
Сопоставление полей и архитектура связей
Плоская таблица Excel объединяет в одной строке компанию, контактное лицо, сделку и комментарии. В реляционной или документоориентированной CRM эти сущности разносятся по отдельным связанным таблицам.
Составляется матрица соответствия полей: для каждого столбца исходной таблицы определяется целевая сущность, тип данных и правила валидации. Если в старых данных есть поля, не нужные для текущих бизнес-процессов, их переносят в исторический архив, а не засоряют ими рабочую схему.
Пробный импорт на изолированном окружении
Импорт никогда не запускается сразу на рабочей базе данных. Создается копия базы данных на тестовом сервере, где воспроизводится полная схема со всеми триггерами, ограничениями уникальности и внешними ключами.
Пробный запуск на выборке данных и затем на полном объеме позволяет проверить скорость выполнения скрипта, корректность создания связей и поведение системных триггеров при массовой вставке.
План отката и безопасность
Перед запуском миграции на рабочей системе создается полный снимок базы данных, а скрипт импорта размечает каждую созданную запись уникальным идентификатором сессии переноса.
Если во время переноса происходит сбой или выявляется критическое расхождение в связях, процедура отката удаляет импортированные записи по идентификатору сессии или восстанавливает базу из резервной копии без влияния на системные настройки. Платформа вокруг перенесённых данных описана в статье разработка CRM на заказ.
Параллельная работа и переключение
В период перехода менеджеры могут продолжать работу в привычных таблицах, пока идет подготовка и верификация базы CRM. Чтобы не потерять новые изменения, назначается технологическое окно заморозки изменений в старых таблицах или настраивается дельта-импорт только новых и измененных строк.
После сверки контрольных сумм и количества записей права на редактирование таблиц отзываются, и команда начинает фиксацию действий исключительно в CRM.