Начало разъема ETL

Jul 11, 2023

Присоединяйтесь к топ-менеджерам в Сан-Франциско 11–12 июля и узнайте, как лидеры интегрируют и оптимизируют инвестиции в искусственный интеллект для достижения успеха. Узнать больше

Компания Airbyte, расположенная в Сан-Франциско, выпустила более 200 бесплатных соединителей данных на своей платформе, что позволяет любому предприятию подключать практически любой источник данных к целевым платформам данных, таким как Snowflake и Google BigQuery.

Хотя платформы ETL существуют уже довольно давно, у всех них была одна серьезная проблема: отсутствие интеграции со многими более мелкими источниками на рынке. Обычно, когда кто-то использует эти платформы, он может создать конвейер данных только из таких авторитетных источников, как Salesforce или Stripe.

Основанная в 2020 году компания Airbyte решает эту проблему, предлагая платформу интеграции данных с открытым исходным кодом, которая предоставляет сотни готовых и настраиваемых коннекторов для множества небольших сервисов. Сообщается, что это решение предоставляет комплект разработки соединителей (CDK), который автоматизирует весь неспецифический код и позволяет предприятию создавать соединитель или редактировать существующий за 30 минут или меньше.

Таким образом, это способствовало созданию сообщества, в котором компании создают и поддерживают уникальные соединители (инкапсулированные в докер-контейнеры) для различных сценариев использования и поддерживают друг друга. Пользователю просто нужно выбрать исходную и целевую платформы и пройти аутентификацию, чтобы создать конвейер и переместить данные.

Трансформация 2023

Присоединяйтесь к нам в Сан-Франциско 11–12 июля, где топ-менеджеры расскажут, как они интегрировали и оптимизировали инвестиции в искусственный интеллект для достижения успеха и избежания распространенных ошибок.

В настоящее время Airbyte предлагает более 300 соединителей данных, созданных сообществом из 600 участников, но едва ли 50 из них общедоступны. Остальные, находящиеся либо на стадии альфа, либо на стадии бета-тестирования, стали бесплатными для использования в рамках новой программы бесплатного коннектора. Это означает, что если какой-либо коннектор источника или назначения является альфа- или бета-версией, весь конвейер данных предоставляется бесплатно.

«Программа бесплатных коннекторов дополняет маховик, который мы создали для коммерциализации интеграции данных», — сказал Джон Лафлер, соучредитель и главный операционный директор компании. «Чего нам не хватало, так это значительного использования всех наших разъемов с длинным хвостом — тех, которые используются реже, — чтобы помочь выявить крайние случаи, которые мы еще не полностью поддерживаем».

«Предоставляя бесплатное использование альфа- и бета-коннекторов, мы поощряем использование наших коннекторов в отрасли, одновременно помогая нам повысить их надежность. Надежность является конечной целью: мы будем взимать плату за использование Airbyte Cloud только с конвейерами данных, которые обычно доступные разъемы», — добавил он.

По данным Airbyte, общедоступные разъемы обеспечивают не менее 99% успешной синхронизации, в то время как бета-коннекторы в среднем имеют показатель успешной синхронизации 93%, а альфа-коннекторы - 90% успешности синхронизации.

С момента своего основания Airbyte привлекла более 35 000 корпоративных клиентов, включая Safegraph, Dribbble, Mercato, GraniteRock, Agridigital и Cart.com. В ходе нескольких раундов компания собрала целых 182 миллиона долларов, а также распространилась на Европу благодаря обработке данных жалоб на GDPR. Пространство коннекторов ETL — это конкурентная область, в которую входят другие игроки, такие как Fivetran, Stich Data, Informatica и Matillion.

Миссия VentureBeat должен стать цифровой городской площадкой для лиц, принимающих технические решения, где они смогут получить знания о преобразующих корпоративных технологиях и совершать сделки. Откройте для себя наши брифинги.