Что такое Таленд | Введение в инструмент Talend ETL

В сегодняшних больших данных и облачном мире организациям становится очень важно использовать свою корпоративную информацию. Таленд — это платформа для интеграции программного обеспечения с открытым исходным кодом, которая помогает вам без особых усилий превращать эти данные в бизнес-идеи.

Что такое Таленд?

Talend — это платформа для интеграции данных с открытым исходным кодом. Он предоставляет различное программное обеспечение и услуги для интеграции данных, управления данными, интеграции корпоративных приложений, качества данных, облачного хранилища и больших данных. Talend впервые появился на рынке в 2005 году как первый коммерческий поставщик программного обеспечения с открытым исходным кодом для программного обеспечения для интеграции данных. В октябре 2006 года Talend выпустила свой первый продукт – Таленд Открытая Студия который в настоящее время известен как Talend Open Studio для интеграции данных. С тех пор компания выпустила широкий спектр продуктов, которые весьма успешно используются на рынке.

Talend считается лидером нового поколения в области программного обеспечения для интеграции облачных вычислений и больших данных. Это помогает компаниям принимать решения в режиме реального времени и становиться более управляемыми данными. Используя Talend, данные становятся более доступными, их качество повышается, и их можно быстро перемещать в целевые системы.

Для простоты понимания я перечислил некоторые интригующие особенности продуктов Talend:

• Более быстрая разработка и развертывание: Talend автоматизирует задачи и в дальнейшем поддерживает их для вас.
• Меньше расходов: Talend предоставляет инструменты с открытым исходным кодом, которые можно загрузить бесплатно. Более того, по мере ускорения процессов затраты на разработку значительно снижаются.
• На будущее: Talend включает в себя все, что вам может понадобиться для удовлетворения маркетинговых требований сегодня и в будущем. Таким образом, маловероятно, что он уйдет с рынка в ближайшее время.
• Единая платформа: Talend отвечает всем нашим потребностям на общей основе для продуктов, основанных на потребностях организации.
• Огромное сообщество: Будучи программным обеспечением с открытым исходным кодом, оно поддерживается огромным сообществом. Это предпочтительное место для всех Таленд пользователи и сообщество участников, где они могут делиться информацией, опытом, сомнениями, вопросами и т. д.

В следующем разделе этого блога о том, что такое Talend, мы рассмотрим различные продукты, выпущенные Talend.

Таленд Продукты

Платформы Talend

Таленд Энтерпрайз

Таленд Открытая Студия

Среди всех этих продуктов наиболее часто используемыми продуктами являются Talend Open Studios, поскольку они доступны бесплатно, и каждый может легко загрузить и использовать их.

Преимущества Talend

Позвольте мне теперь перечислить несколько преимуществ использования Talend:

Теперь, когда вы знаете, что такое Talend и в чем его преимущества, давайте посмотрим, как Talend помогает организациям в реальной жизни.

Пример использования в реальной жизни

Промышленность: Розничная торговля и электронная коммерция

О:

Groupon — это американский рынок электронной коммерции, который связывает подписчиков с местными продавцами, предлагая различные мероприятия, путешествия, товары и услуги в 15 странах мира. К марту 2015 года он уже обслуживал около 48,1 миллиона активных клиентов и участвовал в более чем 425 000 активных сделок по всему миру в 48 странах. Бизнес-модель Groupon изменила способ взаимодействия компаний с новыми клиентами. Независимо от причин, Groupon обращается к большему количеству людей, что также более непосредственно и быстро по сравнению с любой другой средой.

Проблемы:

• Коммерческая деятельность Groupon в основном зависит от ее ИТ-инфраструктуры. Исключительный рост компании всего за несколько лет привел к тому, что значительное давление на его ИТ-инфраструктуру.
• огромное количество данных которая, как говорят, является спасательным кругом для Groupon, стала огромной проблемой. В среднем компании приходилось обрабатывать около один терабайт необработанных данных каждый деньэто тоже в реальном времени.
• Более того, они также должны были хранить это обработка информации в различных базах данных.

Где помог Talend:

Groupon использует продукты Talend Data Integration для импорта необработанных данных из разных источников в хранилище данных, затем преобразования их в желаемый формат и последующего экспорта в различные целевые системы.

Как это работает на самом деле?

Groupon собирает данные о клиентах из более чем 30 стран, которые загружаются в хранилище данных с помощью интеграционной платформы Talend. Groupon обрабатывает миллионы транзакций в день с помощью решения OLTP, работающего на PostgreSQL база данных. Затем платформа Talend реплицирует данные из системы OLTP в хранилище Teradata через каждые 5 минут. Наряду с этим данные о клиентах также загружаются из разных источников данных в решение Salesforce CRM. Ежечасно эти данные дополнительно синхронизируются с хранилищем данных, чтобы у Groupon всегда был единственный источник достоверной информации.

Таким образом, конечной целью интеграционной платформы Talend является импорт данных из различных источников, таких как CRM, системы электронного маркетинга и OLTP, и их максимально быстрое перемещение в хранилище данных. Затем эти агрегированные данные предоставляются отделу продаж для принятия стратегических решений.

Результат:

• 1 ТБ необработанных данных обрабатываются в режиме реального времени и сохраняются в различных целевых системах каждый день
• 1000 рабочих мест по интеграции данных выполняются ежедневно с использованием ETL процессы
• В каждом 5 минут Talend обновляет хранилище данных с OLTP системные данные

«С помощью Talend мы анализируем 1 терабайт данных о клиентах в режиме реального времени, что помогает нам идентифицировать
тенденции по мере их появления».

— Рафаэль Эррера, глава BI International, Groupon GmbH

Это подводит нас к концу этого блога о том, что такое Talend. Я старался изо всех сил, чтобы содержание было кратким, но информативным. Надеюсь, вам понравилось читать.

Если вы нашли этот блог информативным, вы можете проверить больше похожие блоги здесь

Есть к нам вопрос? Пожалуйста, укажите это в разделе комментариев, и мы свяжемся с вами.