Загрузка данных
-
Загрузка данных
- Загрузка данных — это перемещение данных между системами для их обработки.
- Традиционный ETL использует преобразование данных перед загрузкой, в то время как ELT загружает данные в исходном формате.
- Загрузка больших систем ранее занимала много времени, обычно выполнялась ночью.
-
Цели загрузки
- Получение свежих данных в системах.
- Быстрая загрузка для частого обновления данных.
-
Типы загрузки
- Полное обновление данных включает удаление существующих данных и загрузку новых.
- Постепенное обновление извлекает только новые или обновленные данные.
- Струйная загрузка обеспечивает немедленное обновление данных в целевой системе.
-
Загрузка в используемые системы
- При загрузке данных в систему, используемую другими системами, необходимо определить время обновления и действия с таблицами.
- Использование теневых таблиц может помочь в решении этой проблемы.
-
Дополнительные ресурсы
- Статья содержит ссылки на другие ресурсы, такие как база данных и хранилище данных.