Программа для стартапов Confluent: $20 000 в виде кредитов на потоковую передачу данных

Confluent предлагает до 20 000 долларов в виде стартовых кредитов для Confluent Cloud. Для чего нужен Kafka, как изменяются затраты на потоковую передачу при масштабировании и с чем он сочетается.

ConfluentStartup CreditsApache KafkaData StreamingAI Perks
Andrew
Andrew
AI Perks Team
7,907•

Быстрый ответ

Программа стартапов Confluent предлагает кредиты до $20 000 на Confluent Cloud, полностью управляемый сервис Apache Kafka, покрывающие использование кластера, передачу данных, хранимые данные и потоковую обработку. Кластеры работают внутри облачных аккаунтов, управляемых Confluent, поэтому кредит покрывает счет за потоковую передачу, но не услуги, которые вы запускаете с его использованием. Текущие условия перечислены на getaiperks.com.

AI Perks

AI Perks предоставляет доступ к эксклюзивным скидкам, кредитам и предложениям на AI-инструменты, облачные сервисы и API, чтобы помочь стартапам и разработчикам сэкономить деньги.

AI Perks Cards

Что дает программа для стартапов Confluent

Confluent предлагает кредиты на сумму до 20 000 долларов США на использование Confluent Cloud, полностью управляемого сервиса Apache Kafka, покрывающие использование кластера, передачу данных, хранение и уровень обработки потоков данных поверх него.

AI Perks отслеживает это наряду с кредитами на сумму 7,7 млн долларов США для 194 компаний.

Структурные детали имеют большее значение, чем броские цифры. Кластеры Confluent Cloud работают внутри собственных учетных записей Confluent в облаке, а не ваших. Таким образом, кредит чисто покрывает счет за потоковую передачу, без общего счетчика, о котором можно спорить, и не покрывает вычисления, выполняющие ваших производителей и потребителей, а также частные сети, которые вы размещаете между ними. Текущие условия перечислены на getaiperks.com.


Лучшие ИИ-кредиты для стартапов

Подавайте заявки напрямую через эти проверенные программы.

Для чего на самом деле нужен Confluent

Kafka — это надежный, упорядоченный, воспроизводимый журнал, позволяющий многим независимым потребителям читать один и тот же поток событий в своем собственном темпе. Confluent — это тот журнал, которым управляют за вас, плюс уровень схемы, коннекторов и обработки потоков, который большинство команд иначе собирают самостоятельно.

Различие, которое определяет, нужен ли он вам, — это журнал или очередь. Очередь доставляет сообщение один раз одному работнику и забывает его. Журнал сохраняет события, и потребитель, который вы добавите через шесть месяцев, сможет прочитать всю историю с самого начала.

Два случая разделяют эти два случая:

  • Нужно ли нескольким системам одно и то же событие? Один производитель, четыре потребителя, ни один из которых не должен знать друг о друге. Для этого и был создан Kafka.
  • Вы когда-нибудь захотите повторить? Перестроить производную таблицу, заполнить новым хранилищем функций, переработать после ошибки. Очередь этого сделать не может. Журнал делает это рутиной.
  • Потребители выходят из строя независимо? Если остановка вашего хранилища аналитики не должна блокировать оформление заказа, вам понадобится расцепление, которое обеспечивает журнал.

Если честный ответ — нет на все три вопроса, Postgres с таблицей заданий, Redis streams или SQS покроют ваши нужды за гораздо меньшие деньги и с гораздо меньшей операционной поверхностью. Множество успешных продуктов никогда не перерастают этого. Кредит лучше потратить позже.

Другая половина решения — это разработка или покупка. Kafka — это бесплатное программное обеспечение, и лицензия никогда не была дорогой частью. Перебалансировка разделов, настройка хранения, обновления брокеров, давление на диски в 3 часа ночи и человек, который все это понимает, — вот что дорого. KRaft устранил зависимость от ZooKeeper и сделал самостоятельное размещение значительно проще, но он не устранил ротацию дежурств.


Как ценообразование Confluent Cloud ведет себя в масштабе

Confluent Cloud в основном выставляет счета по байтам: входящие данные, исходящие данные и хранимые данные. Счетчик, который удивляет основателей, — это исходящий трафик, потому что он умножается на количество групп потребителей, читающих одну и ту же тему.

СчетчикЧто им управляетЧто вызывает всплеск
Входящий трафикГБ, записанные производителямиМногословные события, отсутствие сжатия, журналы, обрабатываемые как события
Исходящий трафикГБ, прочитанные потребителямиКаждая дополнительная группа потребителей повторно читает весь поток
ХранениеГБ, хранящиеся x окно храненияБесконечное или значение по умолчанию хранение, оставленное без проверки
База кластераТип кластера и выделенная емкостьВыделенная емкость, купленная до того, как пропускная способность ее оправдает
КоннекторыРаботающие задачи плюс пропускная способностьБездействующие коннекторы, оставленные работать после завершения миграции
Обработка потоковИспользование Flink, оплачиваемое по собственному счетчикуНепрерывные задания, где расписанная пакетная обработка была бы достаточной
СетьЧастная сеть и межзонные путиPrivateLink или пиринг, добавленные для соответствия требованиям, не включенные в бюджет

Ставки различаются в зависимости от типа кластера, поставщика облачных услуг и региона, и они меняются. Проверяйте текущие цифры на странице ценообразования Confluent, прежде чем моделировать что-либо.

Арифметика, которая действительно имеет значение, — это множитель разветвления. Возьмите продукт, записывающий 50 ГБ в месяц событий. Эту тему читают четыре группы потребителей: приложение, индексатор поиска, хранилище данных и проверка на мошенничество. Это 50 ГБ входящего трафика и 200 ГБ исходящего трафика, поэтому вы учитываете примерно 250 ГБ за 50 ГБ реальных данных, множитель 5x.

Масштабируйте его, и форма сохранится. При 1 ТБ входящего трафика в месяц с теми же четырьмя потребителями вы учитываете около 5 ТБ. Введите свое собственное число в калькулятор ценообразования, а не число входящего трафика. Команды, которые составляют бюджет только на основе входящего трафика, ошибаются на величину своего разветвления, и именно поэтому грант в 20 000 долларов США действует гораздо дольше для одних продуктов, чем для других. AI Perks перечисляет условия кредита, разветвление — это ваша ответственность.

Два рычага влияют на счет больше, чем что-либо еще. Сжатие на стороне производителя уменьшает количество байтов, пересекающих провод, а zstd или lz4 на JSON-загрузках обычно обеспечивают значительное сокращение при изменении одной строки конфигурации. Хранение — это чистый множитель для хранилища, а значение по умолчанию редко является числом, которое вы бы выбрали сознательно.


Лучшие ИИ-кредиты для стартапов

Подавайте заявки напрямую через эти проверенные программы.

С чем сочетаются кредиты Confluent

Кредиты Confluent покрывают только слой потоковой передачи. Вычисления, выполняющие ваших производителей и потребителей, хранилище данных, куда приземляется поток, и модели, которые оно питает, — все это отдельные счета, что делает кредиты на потоковую передачу необычайно легко комбинируемыми.

Рабочий конвейер событий касается четырех различных поставщиков, и для каждого из них существуют гранты:

  • Облачные кредиты покрывают машины, на которых работают ваши производители и потребители, а также хранилище и исходящий трафик с вашей стороны сети.
  • Кредиты Confluent покрывают транспорт, реестр схем и обработку потоков между ними.
  • Кредиты на платформу данных покрывают хранилище данных или озеро данных, куда приземляется поток.
  • Кредиты на модели и API покрывают любые выводы, которые ваши потребители вызывают во время выполнения.

Команда, имеющая три из этих четырех, покрыла большую часть конвейера данных в реальном времени за тот же период. Знание того, какие гранты совместимы, а какие тихо исключают друг друга, — вот причина, по которой AI Perks поддерживается как список, а не папка с закладками.


Что основатели неправильно понимают о кредитах на потоковую передачу

Самая дорогая ошибка — использовать Kafka как очередь задач, потому что вы принимаете операционную модель и модель затрат журнала, не нуждаясь ни в чем, что предоставляет журнал.

Пять шаблонов сбоев, в примерном порядке их стоимости:

Использование Kafka как очереди заданий. Если один работник потребляет каждое сообщение, и никто не воспроизводит историю, вы приобрели управление разделами и перебалансировку групп потребителей для выполнения того, что уже делали таблица базы данных и cron-задание.

Слепота к разветвлению. Каждая новая группа потребителей — это полный дополнительный чтение темы. Три команды, добавляющие по одному потребителю в квартал, могут утроить счет, который никто не менял. Прежде чем добавить потребителя, спросите, не может ли существующий опубликовать производную тему вместо этого.

Потоковая передача журналов. Журналы приложений имеют большой объем, низкую ценность за байт и принадлежат платформе журналов, рассчитанной на эту форму. Передача их через Kafka — это самый быстрый способ потратить кредит на данные, которые никто не будет воспроизводить.

Преждевременное чрезмерное секционирование. Разделы — это единица параллелизма, и они не бесплатны. Команды выбирают большое число, чтобы быть в безопасности, а затем обнаруживают, что количество разделов легко увеличить и трудно уменьшить.

Планирование выхода слишком поздно. Протокол Kafka действительно портативен; то, что вы строите вокруг него, — нет. Решите, когда потреблен 70% кредита, как выглядит ваша неу субсидируемая архитектура, а не когда потреблен 100%.


Лучшие ИИ-кредиты для стартапов

Подавайте заявки напрямую через эти проверенные программы.

Как планировать работу с Confluent и другими кредитами на платформу данных

Кредит на потоковую передачу стоит столько, сколько позволяет ваша архитектура, и эти решения принимаются до того, как будет запущена первая тема.

Пять пунктов, которые стоит урегулировать заранее, в примерном порядке влияния на стоимость:

Составьте карту всего счета, а не только строки Confluent. Каталог на getaiperks.com перечисляет программы потоковой передачи, хранилищ данных и конвейеров бок о бок, представление, которое показывает, какие части конвейера данных в реальном времени покрыты, а какие остаются вашими.

Бюджетируйте облачный счет отдельно. Производители, потребители и частные сети оплачиваются AWS, Azure или Google Cloud, независимо от того, что покрывает Confluent, и эта строка не уменьшается, потому что строка потоковой передачи уменьшилась.

Установите хранение и сжатие до существования потребителей. Оба являются однострочными решениями, которые накапливаются в течение срока действия кредита, и оба становятся неудобными для изменения, как только нижестоящие системы зависят от них.

Рассматривайте каждую новую группу потребителей как решение о затратах. Разветвление — это счетчик, который растет без того, чтобы кто-либо редактировал конфигурацию, поэтому спросите, не может ли существующий потребитель опубликовать производную тему вместо этого.

Решите, где находится ваш портативный граница. Использование простого протокола Kafka перемещается. Управляемые задания Flink, коннекторы Confluent и конфигурация управления не перемещаются, поэтому с самого начала держите подвижные части чистыми.


Часто задаваемые вопросы

Сколько стоит программа для стартапов Confluent?

Кредиты на сумму до 20 000 долларов США на Confluent Cloud, покрывающие использование кластера, входящий и исходящий трафик, хранение и обработку потоков. Для продукта, передающего десятки гигабайт в месяц, это дает долгий запас на счете за потоковую передачу. Текущие суммы и критерии участия отслеживаются на getaiperks.com.

Покрывают ли кредиты Confluent мои счета AWS или Google Cloud?

Нет. Кластеры Confluent Cloud работают в собственных учетных записях Confluent в облаке, поэтому кредит компенсирует только счет Confluent. Вычисления, выполняющие ваших производителей и потребителей, ваше собственное хранилище и любую настроенную вами частную сеть оплачиваются вашим поставщиком облачных услуг. Планируйте иметь как облачный грант, так и грант Confluent.

Не является ли Kafka избыточным для стартапа на ранней стадии?

Часто да. Если один работник потребляет каждое сообщение, и вы никогда не воспроизводите историю, Postgres, Redis streams или SQS дешевле и проще. Kafka оправдывает свою стоимость, когда несколько независимых систем читают одни и те же события, когда важна воспроизведение, или когда один медленный потребитель не должен блокировать остальную часть продукта.

Почему мой счет за исходящий трафик Confluent выше, чем за входящий?

Потому что каждая группа потребителей читает полный поток. Четыре потребителя одной темы означают примерно четырехкратный объем входящего трафика в исходящем. Составляйте бюджет исходя из вашего числа, умноженного на разветвление, а не из входящего трафика, и рассмотрите возможность того, чтобы один потребитель публиковал производную тему вместо добавления пятого читателя.

Могу ли я комбинировать кредиты Confluent с другими стартовыми кредитами?

Да, и кредиты на потоковую передачу обычно комбинируются чисто, потому что счета не пересекаются. Облачные кредиты покрывают машины, Confluent покрывает транспорт, кредиты на платформу данных покрывают хранилище данных, куда он приземляется, а кредиты на модели покрывают выводы. Какие программы совместимы, отслеживается для 194 компаний на getaiperks.com.

Что происходит, когда кончаются кредиты Confluent?

Вы наследуете счет, размер которого определяется значениями хранения, сжатия и разветвления по умолчанию, выбранными, пока он был бесплатным. Установите их намеренно в начале, держите вашу интеграцию на уровне протокола Kafka, где она остается переносимой, и решите, что вы сократите при потреблении 70% кредита, а не после получения счета.


Подпишитесь на getaiperks.com →

Перемещайте события. Позвольте кому-то другому финансировать транспорт, пока вы строите на его основе.

AI Perks

AI Perks предоставляет доступ к эксклюзивным скидкам, кредитам и предложениям на AI-инструменты, облачные сервисы и API, чтобы помочь стартапам и разработчикам сэкономить деньги.

AI Perks Cards

This content is for informational purposes only and may contain inaccuracies. Credit programs, amounts, and eligibility requirements change frequently. Always verify details directly with the provider.