Сбор и консолидация данных превращает разрозненные файлы компании в один корпус с известным происхождением. Забираю выгрузки, которые у вас уже есть: CRM, заявки, переписки, таблицы, объектное хранилище, сканы. Для каждой строки фиксирую, откуда она, когда снята и кто имеет право ею пользоваться. Сбор и консолидация — первый шаг подготовки данных для AI: без карты источников очистку и дедупликацию нельзя повторить.
Не снимаю данные с систем, которыми вы не владеете, и не покупаю чужой датасет, чтобы закрыть дыру, если этой покупки нет в брифе. Токены остаются в секретах окружения. Если у источника нет выгрузки, так и говорю, а не автоматизирую браузер и не называю это конвейером. Соединение идёт по ключу, который можно объяснить, а не по случайному имени колонки.
Приёмка — опись источников, выборка, собранная по этому ключу, и скрипт, который заново собирает общую таблицу из тех же выгрузок. Один источник часто занимает 1–3 недели после появления доступа. Очистка начинается только когда таблица уже есть — см. очистку и нормализацию.
