Меттью Скалліон, генеральний директор і засновник Matillion – Interview Series

Метью Скалліон, генеральний директор і засновник Матільйон – провідний постачальник програмного забезпечення для перетворення даних для хмарних сховищ даних.

Компанія заново винайшла перетворення даних в епоху хмари – як єдиний постачальник, що забезпечує справжнє перетворення даних у хмарі. Його унікальний підхід ELT (на відміну від ETL) використовує потужність обраного підприємством хмарного сховища даних для перетворення даних, максимізації масштабованості, швидкості та економії.

Понад 800 клієнтів Matillion включають Accenture, Amazon, Bose, Docusign, Fox, GE, Merck, Siemens, Sony, Splunk, VIstaprint і Zapier.

Метью має понад 20 років досвіду роботи на стику бізнесу та технологій, причому більшу частину своєї кар’єри він займався програмним забезпеченням та ІТ-професіоналом.

Ви підприємець протягом усього життя, заснувавши свою першу компанію, коли вам було 18 років. Якою була ця перша компанія? Озираючись назад, чи можна було щось зробити інакше, щоб збільшити шанси на успіх?

Це була маленька компанія під назвою Real Information Systems – ми розробляли та впроваджували програмне забезпечення для груп. Поки я був там як вечірній та вихідний проект, я створив ранню систему керування веб-контентом, яку нам вдалося продати кільком порядним клієнтам і яка отримала кілька нагород. На одній із церемоній нагородження ми познайомилися з великою американською фірмою, яка незабаром після цього придбала компанію.

А що б я зробив інакше? Практично все. Насправді мені було 17, коли я почав займатися цим бізнесом, і мій партнер був чудовим хлопцем (і ми досі друзі), але не дуже бізнесменом. Якби я мав набір навичок, які маю зараз, тоді, я думаю, у нас був би набагато успішніший бізнес! Здебільшого я дізнався про навички роботи з людьми – все в бізнесі (або в бізнесі знань, як програмне забезпечення) залежить від якості людей – посадити їх на потрібні місця в потрібний час – і привести їх у відповідність, а також у чудовій культурі.

Після цього першого підприємства ви 15 років працювали в комерційних ІТ та розробці програмного забезпечення в ряді британських і європейських системних інтеграторів. Які з цих ролей були?

Я працював через керівництво розробників, деякі попередні продажі до відповідальності за P&L у відділі програмного забезпечення великої європейської SI… це дало мені багато досвіду роботи з клієнтами, особливо з великими клієнтами. І я провів практику BI, програмного забезпечення, SDLC та інтеграції, що дало мені всі необхідні інструменти для Matillion.

Чи була прогалина на ринку, яку ви помітили в цих різних типах ролей, яка надихнула вас запустити Matillion?

У цій попередній фірмі я бачив силу добре реалізованої BI. І як важко було зробити це правильно. Я також бачив німецьку компанію, яка досягла справжнього успіху, створивши більш готове галузеве вертикальне рішення BI для підприємств середнього розміру. Нарешті, ми працювали з AWS і могли бачити написи на стіні для локальних рішень. Таким чином, хмарна, повністю керована BI здавалась прогалиною, яку ми могли б заповнити. Це не те, що ми робимо зараз, але це те, що ми робили на початку, і те, що спонукало нас створити Matillion ETL через роки, що зараз є основним напрямком нашого бізнесу.

Після запуску Matillion у 2011 році ви переконали трьох своїх колишніх босів інвестувати. Як пройшло це обговорення та що саме в ідеї переконало їх приєднатися?

Я вирішив залишити роботу та заснувати компанію під час відпустки в Іспанії з дружиною. Я переживав важкі часи та попереднє місце, і вона заохочувала мене це зробити. Я пішов додому і склав бізнес-план, який потім представив цим трьом людям.

Я думаю (насправді знаю), що вони вважали, що я не знаю більше, ніж вони, про хмару та BI. Але згодом вони сказали мені, що вони не підтримують бізнес-план – скоріше вони підтримують мене, оскільки вважали, що у мене є шанс досягти успіху.

Гадаю, це було результатом 10+ років, які я працював з ними та для них раніше, і хоча це завжди гарна ідея — завжди думати про свою чесність.

Як би ви описали Матилліона якомога меншою кількістю слів?

Matillion — це перетворення даних для хмарних сховищ даних.

Однією з ключових відмінностей між Matillion та іншими рішеннями є підхід Matillion ELT (extract, load, transform) проти більш поширеного ETL (Extract, transform, load). Чи могли б ви описати ці два підходи та в чому перевага ELT?

Коли продукти інтеграції даних вийшли на ринок багато років тому, вони забезпечували три сфери цінності, необхідні й сьогодні: 1) вилучення, 2) завантаження (отримання даних із вихідних систем у сховище даних) і 3) перетворення даних (об’єднання відокремлених даних, денормалізація). , додати цінність і прикрасити бізнес-логіку та показники). Іншими словами, ранні продукти робили корпоративні дані «готовими до аналітики» в складному ІТ-середовищі, масштабно та в команді.

Однак ці дохмарні застарілі продукти не створювалися для хмари. Таким чином, вони були повільними, складними в управлінні та масштабуванні, складними для закупівлі та нездатними скористатися перевагами основної потужності та особливостей хмарних платформ.

У цей час – до 2015 року – Matillion була зосереджена на створенні та управлінні сховищами даних для своїх клієнтів у хмарі. Ми були розчаровані відсутністю продуктів, які б допомагали підтримувати бізнес наших клієнтів ефективно та в масштабах. Нам потрібен був продукт, який би забезпечував простоту, швидкість, масштаб і економію, але його не існувало. Отже, ми побудували його самі. Близько п’яти років тому ми запустили Matillion ETL (extract, load, transform), інструмент, створений спеціально для хмарних сховищ даних (CDW), включаючи Amazon Redshift, Google BigQuery та Snowflake.

Дані з різних джерел можна легко зібрати, але просте завантаження їх у центральне місце в CDW не дає високоякісних даних. Дані повинні бути перетворений перш ніж його можна буде використовувати з аналітичним інструментом або будь-яким подальшим процесом, таким як машинне навчання. Нездатність трансформувати дані в першу чергу суперечить меті сховища даних, залишаючи клієнтів не в змозі створювати та керувати складними моделями даних або отримати високоякісний аналіз.

Більшість сучасних рішень усе ще витягують дані, перетворюють їх на необроблені дані, придатні для звітності та аналітики, і завантажують їх на цільову платформу (наприклад, реляційну базу даних). Отже, механізм ETL є обчислювальним ресурсом і має бути досить потужним (читай: дорогим), щоб обробляти великі обсяги даних, які будуть перетворені. Крім того, середовища, у яких працює програмне забезпечення ETL, не створені для масштабування так само, як сховища даних. Тому зі збільшенням обсягів даних ці середовища споживають більше ІТ-ресурсів, створюють вузькі місця в ланцюжку даних і можуть негативно вплинути на звітність і аналітику підприємства. Це може призвести до повільного прийняття неправильних бізнес-рішень, що призведе до втрачених можливостей.

Наш подібний, але інший підхід «витяг-завантаження-перетворення» (ELT) пропонує підвищену продуктивність і цінність завдяки обробці вилучення й завантаження одним рухом прямо на цільову платформу даних підприємства, використовуючи потужність процесів CDW для виконання перетворень після завантаження. Для здійснення перетворень у самому сховищі даних потрібна лише одна потужна частина інфраструктури. Подальший прогрес у реляційних базах даних робить перетворення даних у базі даних простішим, швидшим і економічнішим. Це призводить до економії інфраструктури, підвищення продуктивності робочих навантажень і скорочення циклів розробки. Дані підприємства швидко переносяться та одразу стають доступними для трансформації та аналізу на основі поточних бізнес-завдань і потреб.

Якщо ETL прагне покращити свою найбільшу невдачу – продуктивність, Matillion очікує, що результатом стане робочий процес ELT. Це найкращий спосіб для підприємства ефективно, рентабельно використовувати свої дані та проводити результативний аналіз для стимулювання розвитку бізнесу.

Matillion створив Matillion Data Loader, який є безкоштовним інструментом інтеграції даних на основі SaaS. Чи могли б ви детально описати цей інструмент і що робить його таким зручним для користувача?

Сьогодні бізнес має нові потреби в даних. Технологічний ландшафт змінюється. ІТ-фахівцям з обробки даних все ще потрібні потужні можливості трансформації корпоративного масштабу, і завжди будуть, але в компаніях, які конкурують за використання даних, з’явився новий тип користувачів даних, які не обов’язково працюють в ІТ. Ці користувачі можуть працювати в маркетингу, фінансах та інших галузях бізнесу. Вони хочуть використовувати дані, щоб знайти відповіді на свої бізнес-питання. Matillion Data Loader призначений для цих користувачів і підтримує підприємства на ранніх етапах їх подорожі хмарними даними. Продукт покращує швидкість і простоту інтеграції даних для цих користувачів даних. Це легке рішення SaaS, яке дозволяє фахівцям з аналізу даних і бізнес-користувачам легко переміщувати дані за допомогою потужного продукту з можливістю масштабування. За потреби клієнти можуть поступово переходити до більш витончених і глибоких (Matillion ETL).

Ми пропонуємо Matillion Data Loader безкоштовно. Це підірвало ринок і демонструє наше прагнення зустрічати та обслуговувати підприємства, де б вони не були на шляху до хмарних даних, допомагаючи їм отримувати ефективний доступ до даних для прийняття інтелектуальних бізнес-рішень.

Matillion дозволяє підприємствам використовувати всю потужність хмарних даних, щоб зробити перетворення даних простішим, швидшим і економічно ефективнішим. Чи можете ви описати деякі з цих функцій?

Matillion ETL — це хмарний інструмент, який допомагає компаніям будь-якого розміру в різних галузях за допомогою складної трансформації даних корпоративного рівня для масштабної аналітики на Amazon Redshift, Snowflake і Google BigQuery. Наші продукти можуть об’єднувати, фільтрувати, ранжувати, перетворювати, агрегувати та транспонувати дані з різних джерел, щоб полегшити міграцію та трансформацію в хмару. Вони підключаються до таких платформ, як Amazon S3 і Amazon RDS, Google Analytics, порталів керування взаємовідносинами з клієнтами, таких як Salesforce, платформ соціальних медіа (Facebook і Twitter) і навіть платіжних процесорів (Stripe, Paypal), і вони дають користувачам з відповідними дозволами імпорт і експортувати проекти або перевіряти статус поточних завдань із журналів аудиту на рівні екземпляра.

Крім того, Matillion дозволяє адміністраторам розробляти та планувати багаторазові завдання даних, керовані параметрами, і візуально оркеструвати робочі процеси з транзакціями, рішеннями та циклами, зокрема за допомогою сценаріїв Bash і Python та інструментів для створення компонентів. Можливо, ще більш корисним є те, що він дозволяє їм одним клацанням миші генерувати звіт, який можна завантажувати, у якому детально описано макет, компоненти, SQL і властивості для будь-якої роботи.

Чи є ще щось, чим ви хотіли б поділитися про Matillion?

Технологія перетворення даних Matillion є, мабуть, найбільшим внеском у корпоративні технології цього року. Matillion ETL фактично було названо «Загальним рішенням для обробки даних року» за версією Data Breakthrough Awards. Ми заново винайшли перетворення даних в епоху хмари – як тільки провайдер, що забезпечує справжнє перетворення даних у хмарі. Наша команда дуже пишається тим, що забезпечує простоту, масштабованість, швидкість і економію для сотень підприємств у всьому світі, і ми з нетерпінням чекаємо й надалі підтримувати прогрес компаній у їх подорожі даними, особливо якщо вони прагнуть використовувати дані для прогнозування на майбутнє. У нас є хороші можливості, щоб допомогти їм витримати нинішні бурхливі світові ринки та стати сильнішими з іншого боку.

Дякую за ці феноменальні відповіді. Читачі, які бажають дізнатися більше, повинні відвідати засновника Матільйон.