В потоке: почему стартап Confluent нужен самым известным компаниям Кремниевой долины
Чтобы прикоснуться к одной из технологий будущего, нужно проехать пару миль от штаб-квартир Google и LinkedIn к одноэтажному зданию рядом со стоматологической клиникой в Маунтин-Вью. За дверью без таблички вы найдете офис Confluent. Стартапу год, он занимается потоковой обработкой данных, которые накапливают в большом количестве компании Кремниевой долины вроде Uber и LinkedIn. Команда Confluent – основатели и 17 сотрудников – помещаются в конференц-зале, где звучит раскатистый смех исполнительного директора Джея Крепса. «Мы в двух шагах от гаража», - со смехом говорит он.
Это ненадолго. Скоро Confluent переедет в сверкающий офис в Пало-Альто, более подобающий компании, разработавшей технологию, благодаря которой работает аналитика Twitter, рекомендации от Netflix и управление «пиковыми расценками» Uber. Бизнес построен на доскональном знании системы обработки данных Apache Kafka (ее бесплатная версия сегодня используется тысячами компаний и десятками тысяч пользователей). Confluent намеревается делать свой бизнес, продавая инструменты и сервисы, упрощающие работу с Kafka. Количество загрузок за первые шесть месяцев 2015 года выросло на 400%. Недавно стартап получил $24 млн от Index Ventures и Benchmark. Теперь Confluent планирует удвоить штат и в октябре «выкатить» новый большой релиз, неся благую весть о потоковой передаче данных в реальном времени большему количеству компаний, не специализирующихся на высоких технологиях.
Большие данные
Работа с большими данными стала приоритетным направлением для многих предприятий из разных сфер. Они могут помочь компании найти новую целевую аудиторию, адресатов рекламных звонков, предупреждать о пиках спроса или показывать, откуда чаще всего берутся проблемы. Но объемы данных на поверку достигают такого уровня, что перестают поддаваться контролю.
LinkedIn, к примеру, ежедневно обрабатывает более трехсот миллиардов - миллиардов! - событий пользователей.
От посещения интернет-сайтов до действий пользователей мобильных устройств — за доступ к потоку этих данных в режиме реального времени компании дерутся. Обычно данные извлекаются и обрабатываются пакетами. Но для расчета группы пакетов требуются часы. Программное обеспечение от Confluent решает проблемы со скоростью при обработке больших объемов данных. Софт обеспечивает течение данных каждого клиента непрерывным потоком, похожим на шоколадную реку на фабрике Вилли Вонка. В любой момент времени компании могут менять цены или выбирать лучшие товары для показа клиенту, просто «дергая» нужные данные прямо на ходу. Эти данные возвращаются в свой поток, делая всю систему немного «умнее». «Сегодня вы узнаете, что происходит с вашими данными один раз в день - в полночь, - говорит Ния Накхид, соосновательница, которая руководит инженерами в Confluent. - Мы подаем данные прямо в центральную нервную систему, и вы можете реагировать на события быстрее».
Идея работать с данными в потоках существовала и раньше, но практически использовалась только внутри больших хай-тек компаний, в которых уже работают инженеры, посвященные в тайны обработки данных в режиме реального времени. Трио таких людей и основали Confluent – они познакомились в 2010 году, работая в LinkedIn.
Технологии для всех
Джей Крепс, 35 лет, долго жил в Калифорнии, сделал карьеру как инженер компании LinkedIn, став ведущим специалистом по алгоритмам определения релевантности и информационным системам. Накхид приехала из Индии, получила степень магистра в технологическом институте Джорджии. В LinkedIn она работала над внутренними проектами. Уроженец Пекина, доктор философии Джан Рэо десять лет работал исследователем в компании IBM. К команде специалистов по обработке данных компании LinkedIn он присоединился в 2010 году. Сейчас занимается системой с открытым исходным кодом Kafka и ее пилотным внедрением, работает с первыми потребителями нового продукта.
Все трое, вместе с горсткой других сотрудников LinkedIn, создали базовое программное обеспечение Kafka и выпустили публичный релиз, чтобы другие компании смогли использовать продукт и участвовать в его улучшении. «Мы со всей страстью стремимся сделать это, - восклицает Рэо, - потому что инфраструктура - это средство для достижения целей во многих областях».
Kafka быстро обрел первых пользователей в компаниях Airbnb, Box, Cisco, PayPal, Square и Yahoo. Решив в начале прошлого года построить вокруг системы Kafka собственный бизнес, Крепс, Накхид и Рэо получили мощную поддержку от руководства LinkedIn: те инвестировали в Confluent, понимая перспективы темы.
Доходами стартап пока похвастать не может, но совершенно очевидно, что скоро деньги потекут рекой. Дистрибутив системы Kafka от Confluent скачивают по 50 000 раз в месяц. Не имея настоящей команды продажников, без крупных рекламных кампаний, Confluent уже имеет платежеспособных клиентов, включая крупнейшего традиционного ритейлера, одно из крупнейших в мире рекламных агентств, компанию, выпускающую кредитные карты, а также медиа-холдинг. В ближайшие несколько месяцев Confluent добавит ряд функций безопасности и справочные материалы, чтобы сделать систему понятнее для большего количества разработчиков. Майк Волпи, курировавший инвестицию Index Ventures в молодую фирму, объясняет свои мотивы: «Чем больше въездов, тем ценнее автомагистраль».
Эксперты полагают, что в следующем году выручка Confluent приблизится к $10 млн, а в 2017 году превысит $50 млн. Компания вполне может повторить недавний успех еще одного фаворита - разработчика софта с открытым кодом Docker, превратившего свой набор служебных программ, названных «контейнерами», в динамично растущий пакет для корпоративного использования (сейчас стартап оцениваеся в $1 млрд).
Confluent пока стоит, по оценкам, всего одну шестую от этой суммы. Но это ненадолго. «Каждый нанимаемый нами сотрудник приносит миллионы долларов при продажах, - говорит ранний инвестор, генеральный партнер Benchmark Эрик Вишриа. - У Confluent есть шанс стать необычайным явлением в бизнесе».