Вступ до запитань та відповідей щодо інтерв'ю ETL
ETL означає Extract-Transform-Load. Це системний фундамент сховища даних, де дані витягуються з різних джерел, а потім дані трансформуються там, де дані застосовуються або обробляються, щоб зробити якість, узгодженість даних у відповідному форматі подання, а потім нарешті дані завантажуються у сховище даних у форматі презентації, щоб він міг допомогти кінцевому користувачеві легко отримати інформацію та прийняти рішення.
Нижче наведено найкращі питання щодо інтерв'ю ETL 2019, які часто задаються в інтерв'ю
Якщо ви шукаєте роботу, пов’язану з ETL, вам потрібно підготуватися до запитань про співбесіду ETL 2019 року. Незважаючи на те, що кожне інтерв'ю відрізняється, а сфера роботи також різна, ми можемо допомогти вам у вирішенні ETL інтерв'ю питань та відповідей, які допоможуть вам скочити та досягти успіху в інтерв'ю.
Частина 1 - Питання щодо інтерв'ю ETL (основні)
Ця перша частина охоплює основні питання та відповіді щодо інтерв'ю ETL
1. Розгорніть систему ETL у сховищі даних? Поясніть
Відповідь:
Система Extract-Transform-Load (ETL) є основою сховища даних. Правильно розроблена система ETL витягує дані з вихідних систем, застосовує стандарти якості та узгодженості даних, підтверджує дані, щоб окремі джерела можна було використовувати разом, і, нарешті, доставляє дані у форматі, готовому до презентації, щоб розробники додатків могли будувати програми та кінцевих користувачів може приймати рішення.
2. Значення системи ETL у сховищі даних?
Відповідь :
Вилучає помилки та виправляє відсутні дані. Він забезпечує документально підтверджені заходи довіри до даних. Захоплює потік транснаціональних даних для збереження. Налаштовує дані з різних джерел, які будуть використовуватися разом. Структурує дані, які використовуються інструментами кінцевих користувачів.
3. Який щоденний процес у системі ETL?
Відповідь :
Побудувати розробку / тест / виробничий набір процесів ETL. Зрозумійте компроміси різних структур даних в приміщенні, включаючи плоскі файли, нормалізовані схеми, XML-схеми та схеми з’єднання зірок (розмірності). Аналіз та вилучення вихідних даних. Побудувати комплексну підсистему очищення даних. Структуруйте дані в розмірні схеми для найефективнішої доставки кінцевим користувачам, інструментів бізнес-аналітики, інструментів видобутку даних, кубів OLAP та аналітичних програм. Ефективно доставляйте дані як до високоцентралізованих, так і до глибоко розподілених сховищ даних, використовуючи ті самі методи. Налаштуйте загальний процес ETL для досягнення оптимальної продуктивності.
Перейдемо до наступних питань щодо інтерв'ю ETL.
4. Формати даних у системі ETL?
Відповідь :
У ETL є різні формати даних, деякі з них - це плоскі файли, набори даних XML, незалежні робочі таблиці СУБД, нормалізовані схеми сутності / відносини (E / R) та розмірні моделі даних.
5. Профілювання даних у системі ETL?
Відповідь :
Профілювання даних - це систематичне вивчення якості, обсягу та контексту джерела даних, що дозволяє побудувати систему ETL. З одного боку, дуже чисте джерело даних, яке до того, як воно надійшло на сховище даних, добре підтримується, вимагає мінімальної трансформації та втручання людини для завантаження безпосередньо в таблиці кінцевих розмірів та таблиці фактів.
6. Що таке валідатор ETL?
Відповідь :
ETL Validator - це інструмент тестування даних, який значно спрощує тестування проектів інтеграції даних, сховища даних та міграції даних. Він використовує нашу запатентовану архітектуру ELV для вилучення, завантаження та перевірки даних з джерел даних, таких як бази даних, плоскі файли, XML, системи Hadoop та BI.
Частина 2 - Питання щодо інтерв'ю ETL (розширено)
Давайте тепер подивимось на передові питання щодо інтерв'ю ETL.
7. Які операції в системі ETL?
Відповідь :
Наступні три операції: Витягує дані з вашої транснаціональної системи, яка може бути Oracle, Microsoft або будь-якою іншою реляційною базою даних, трансформує дані, виконуючи операції з очищення даних. Навантаження - це процес запису даних у цільову базу даних.
8. Назвіть деякі інструменти ETL, які в основному використовуються на ринку?
Відповідь:
Існують різні інструменти ETL, які використовуються на ринку, але деякі з гідно відданих переваг інструментів ETL
• Конструктор складів Oracle (OWB)
• Послуги даних SAP.
• Інформаційний сервер IBM Infosphere.
• Управління даними SAS.
• Power Center Informatica.
• Репертуар Elixir для даних ETL.
• Мігратор даних (IBI)
• Послуги інтеграції SQL Server (SSIS)
9. Які ролі та обов'язки команди ETL?
Відповідь:
Ролі команди ETL на найвищому рівні полягають у створенні задньої кімнати сховища даних.
• Найефективніше доставляйте дані до інструментів кінцевих користувачів
• Додайте значення даних на етапах очищення та відповідності
• Захист та документування родових даних
• Витяг даних з початкових джерел
• Дані щодо забезпечення якості та очищення
• Відповідність міток та заходів у даних для досягнення
• послідовність у першоджерелах
• надання даних у фізичному форматі, які можуть використовуватися інструментами запитів,
• Повідомлення авторів звітів та інформаційних панелей.
Перейдемо до наступних питань щодо інтерв'ю ETL.
10. Яка роль аналізу впливу в системі ETL?
Відповідь:
Аналіз впливу вивчає метадані, пов’язані з об’єктом (в даному випадку - таблицею або стовпчиком), і визначає, на що впливає зміна його структури чи змісту. Зміна об'єктів встановлення даних може порушити процеси, які мають вирішальне значення для правильного завантаження сховища даних. Дозволення тимчасових змін об’єктів постановки даних шкодить успіху вашого проекту. Після того, як в області постановки буде створена таблиця, перед виконанням будь-яких змін слід виконати аналіз впливу. Багато постачальників інструментів ETL надають можливість аналізу впливу, але ця функція часто не помічається під час перевірки концепції ETL щодо продукту, оскільки це функція задньої кімнати та
Не дуже важливо, поки склад даних не працює і не починає розвиватися.
11. Як ви обробляєте плоский файл фіксованої довжини?
Відповідь:
Макет файлу фіксованої довжини повинен містити ім'я файлу, з якого починається поле; його довжина; і його тип даних (зазвичай це текст чи цифра). Іноді кінцеве положення поставляється. Якщо це не так, ви повинні обчислити кінцеве положення кожного поля виходячи з його початкового положення та довжини, якщо це вимагає ваш інструмент ETL. У більшості інструментів ETL вам, швидше за все, доведеться вручну вводити макет плоского файлу вручну. Після введення макета інструмент запам'ятовує макет і очікує того самого макета щоразу, коли він взаємодіє з фактичним плоским файлом. Якщо макет файлу змінюється або дані зміщуються з призначених позицій, процес ETL повинен бути запрограмований на збій. Обробляючи плоскі файли фіксованої довжини, спробуйте перевірити, чи є позиції даних у файлі точними. Швидка перевірка валідації позицій полягає в тестуванні будь-якого поля (або дати), щоб переконатися, що це дійсна дата. Якщо позиції зміщені, поле дати, швидше за все, містить альфа-символи або нелогічні числа. Інші поля з дуже конкретними доменами можна перевірити аналогічно. XML пропонує більш конкретні можливості перевірки. Якщо перевірка чи узгодженість даних є проблемою, спробуйте переконати постачальника даних доставити дані у форматі XML.
12.Чому в режимі реального часу ETL у сховищі даних?
Відповідь:
Склад даних необхідний для забезпечення непохитного набору даних для керівників бізнес-рішень, забезпечуючи надійний інформаційний підхід, на якому потрібно стояти. Для отримання поточної звітності з мерехтливою базою даних ділових користувачів направляли до виробничих додатків, які ведуть бізнес. Таким чином, користувачі повинні були звернутися до сховища даних для історичної картини того, що сталося в бізнесі станом на вчорашній день, і довелося подивитися багато OLTP-систем для зображення того, що відбувається сьогодні. Ділові користувачі ніколи повністю не прийняли цю поділу. Зберігання даних, безумовно, абсолютно потребують постійних потоків інформації клієнтів від певної операції, але все частіше операційні системи також покладаються на збагачення даних про клієнтів. Отже, передбачувано, що організації почали досліджувати архітектурні альтернативи, які можуть підтримувати більш узагальнені сценарії інтеграції, переміщуючи оперативні дані між додатками і одночасно на склад і виходячи зі складу з все більшою актуальністю.
Рекомендовані статті
Це було керівництвом щодо списку питань та відповідей щодо інтерв'ю ETL, щоб кандидат міг легко розбити ці запитання щодо інтерв'ю ETL. Ви також можете переглянути наступні статті, щоб дізнатися більше -
- Azure Paas vs Iaas - Особливості
- 9 Дивовижні запитання та відповіді щодо інтерв'ю MapReduce
- Топ-11 найкорисніших запитань та відповідей на інтерв'ю RDBMS
- 10 найдивовижніших питань для інтерв'ю PHP для досвідчених
- Знайте топ 5 корисних запитань та відповідей щодо інтерв'ю DBA