Збір і консолідація даних перетворює розрізнені файли компанії на один корпус із відомим походженням. Забираю вивантаження, які у вас уже є: CRM, заявки, листування, таблиці, об’єктне сховище, скани. Для кожного рядка фіксую, звідки він, коли знятий і хто має право ним користуватися. Збір і консолідація — перший крок підготовки даних для AI: без карти джерел очищення і дедуплікацію не можна повторити.

Не знімаю дані з систем, якими ви не володієте, і не купую чужий датасет, щоб закрити діру, якщо цієї купівлі немає в брифі. Токени лишаються в секретах середовища. Якщо в джерела немає вивантаження, так і кажу, а не автоматизую браузер і не називаю це конвеєром. З’єднання йде за ключем, який можна пояснити, а не за випадковою назвою колонки.

Приймання — опис джерел, вибірка, зібрана за цим ключем, і скрипт, який наново збирає спільну таблицю з тих самих вивантажень. Одне джерело часто займає 1–3 тижні після появи доступу. Очищення починається лише коли таблиця вже є — див. очищення і нормалізацію.