Модуль выполнения заданий

Модуль выполнения заданий представляет собой сервер и отвечает за обработку данных, сбор статистики использования ресурсов сервера, оркестрацию выполняемых и заланированных заданий.

Этот модуль состоит из инструкций по обработке данных и содержит программные интерфейсы для передачи необходимой информации в другие модули и взаимодействия с рабочими процессами OneBridge.

В главах этого раздела описано устройство файлов заданий, рассказано о параметрах и метаданных, использууемых для работы и приведено описание всех компонентов, которые используются для обработки данных.

• Задания
  • Шаги
  • Рёбра
  • Метаданные
    • Формат даты и времени
  • Разделители
  • Соединения с базами данных
  • Параметры заданий
    • Внутренние и внешние
    • Защищенные параметры
  • Преобразование данных
• Алгоритмы обработки данных
  • Для чтения данных
    • FLAT_FILE_READER
    • RAW_READER
    • DATABASE_READER
    • DATA_GENERATOR
    • SPREADSHEET_READER
  • Для записи данных
    • FLAT_FILE_WRITER
    • RAW_WRITER
    • DATABASE_WRITER
    • POSTGRESQL_DATA_WRITER
    • TRASH
  • Для преобразования данных
    • EXT_SORT
    • EXT_FILTER
    • GATHER
    • SIMPLE_COPY
    • MAP
    • ROLLUP
    • DATA_INTERSECTION
    • NORMALIZER
  • Для объединения данных
    • HASH_JOIN
    • MERGE_JOIN
    • CROSS_JOIN
    • DBJOIN
  • Для управления заданиями
    • EXECUTE_GRAPH
    • GET_GOB_INPUT
    • SET_GOB_OUTPUT
    • SUCCESS
    • FAIL
    • EXECUTE_SCRIPT
  • Другие
    • NOTE
    • DBEXECUTE
    • LIST_FILES
• API OneBridge