Cloudera 스타트업 프로그램 제공 내용
Cloudera는 Cloudera Data Platform에 대해 최대 10,000달러의 크레딧을 제공하며, 이는 데이터 웨어하우스, 데이터 엔지니어링, 스트리밍 및 머신러닝 서비스 전반의 소비를 충당합니다.
AI Perks는 194개 기업에 걸쳐 770만 달러의 크레딧과 함께 이를 추적합니다.
구조적 세부 사항은 헤드라인 수치보다 중요합니다. Cloudera의 공개 클라우드 서비스는 Cloudera의 클라우드 계정이 아닌 자체 클라우드 계정에 배포되도록 설계되었으므로, 배포 시 두 가지 청구서가 발생합니다. 하나는 Cloudera에서 청구하는 플랫폼 소비이고, 다른 하나는 AWS, Azure 또는 Google Cloud에서 청구하는 인스턴스, 객체 스토리지 및 네트워크 전송입니다.
10,000달러의 Cloudera 보조금은 이 두 가지 청구서 중 하나를 상쇄합니다. 한 가지 청구서를 예상하고 두 가지를 받으면 창립자는 계획보다 훨씬 빠르게 크레딧을 소진합니다. 패키징은 릴리스마다 변경되므로 현재 서비스 이름 및 요금은 Cloudera의 자체 가격 책정 페이지에서 확인하십시오. 현재 약관은 getaiperks.com에 나와 있습니다.
Cloudera는 실제로 무엇에 사용되는가
Cloudera는 하이브리드 데이터 플랫폼입니다. 즉, 자체 데이터 센터와 공개 클라우드에서 동일하게 작동하는 오픈 소스 엔진을 포괄하는 단일 보안, 거버넌스 및 계보 계층입니다. 차별화 요소는 쿼리 속도가 아닙니다. 동일한 테이블, 액세스 정책 및 감사 추적이 데이터 전반에 걸쳐 데이터를 추적한다는 것입니다.
그 유산은 그 형태를 설명합니다. Cloudera와 Hortonworks는 두 개의 상업용 Hadoop 배포판이었으며 2019년에 합병되었습니다. 따라서 이 플랫폼은 Spark(처리용), Hive 및 Impala(SQL용), NiFi(데이터 흐름용), HBase(조회용) 및 Iceberg(엔진 간 개방형 테이블 형식)와 같은 Apache 에코시스템을 포함하고 있습니다. 번들 및 서비스 이름은 릴리스마다 변경됩니다. 아래의 엔진이 지속 가능한 부분입니다.
세 가지 질문이 이 플랫폼 클래스가 귀하에게 적합한지 결정합니다.
- 데이터가 특정 위치에 있어야 합니까? 거주지법, 에어 갭 환경, 병원 네트워크 또는 공개 지역으로 텔레메트리를 보낼 수 없는 공장 바닥.
- 데이터가 이미 여러 곳에 있습니까? 온프레미스 + 클라우드, 인수 후 두 개의 클라우드, 또는 간헐적으로 동기화되는 엣지 계층.
- 거버넌스가 결과물입니까? 구매자의 보안 검토에서 계약 전에 열 수준 정책 및 종단 간 계보를 요구하는 경우, 해당 메커니즘이 귀하가 구매하는 제품입니다.
세 가지 질문 모두에 "아니요"라고 답하면 아직 이 카테고리가 필요하지 않을 수 있습니다. 한 지역에 200GB의 데이터를 가진 시드 스테이지 팀은 수년 동안 열 확장 기능을 갖춘 Postgres 또는 객체 스토리지의 Parquet 위 DuckDB로 잘 지원됩니다. 이것은 더 작은 데이터 플랫폼이 아니라 다른 훨씬 저렴한 것입니다. 질문 중 하나가 "예"로 바뀌면 크레딧을 사용하십시오.
Cloudera가 클라우드 네이티브 웨어하우스를 이기는 경우
Cloudera는 데이터가 단일 공개 클라우드 지역으로 모두 이동할 수 없는 곳에서 승리합니다. 클라우드 네이티브 웨어하우스는 이동할 수 있는 곳에서 승리합니다. 이 제약 조건은 두 가지를 기능 목록보다 더 안정적으로 구분합니다.
| 옵션 | 데이터 위치 | 구매하는 것 | 적용되지 않는 부분 |
|---|---|---|---|
| Postgres 또는 Parquet 위 DuckDB | 단일 데이터베이스 또는 버킷 | 단순성, 거의 제로 플랫폼 비용 | 동시성 및 거버넌스 요구 사항 |
| 클라우드 네이티브 웨어하우스 또는 레이크하우스 | 단일 공급업체 지역 | 관리형 성능, 빠른 시작 | 합법적으로 이동할 수 없는 데이터 |
| Cloudera Data Platform | 온프레미스, 클라우드 또는 둘 다 | 환경 간 이식 가능한 거버넌스 | 사용하지 않는 도달 범위에 대해 비용을 지불하는 단일 클라우드 팀 |
| 자체 호스팅 Spark 및 Iceberg | 설치하는 모든 곳 | 제어, 플랫폼 수수료 없음 | 필요한 대기 근무 |
하이브리드 행에 머물러야 하는 구조적 이유가 있는 부문은 일관적입니다. 금융 서비스, 의료, 통신, 공공 부문, 에너지 및 산업 제조입니다. 해당 분야에 판매하고 파일럿이 고객 환경 내에서 실행되는 경우, 해당 형태에 맞게 구축된 플랫폼은 더 빠른 쿼리 엔진보다 우수합니다. 전체 범위에 걸친 프로그램은 AI Perks에 나열되어 있습니다.
Cloudera 가격이 확장될 때 작동하는 방식
소비는 각 서비스가 실행되는 시간에 따라 Cloudera 자체의 컴퓨팅 단위로 측정되며, 그 아래의 인프라는 클라우드 제공업체에서 청구됩니다. 창립자를 놀라게 하는 측정기는 볼륨이 아니라 유휴 시간입니다.
| 측정기 | 무엇이 유도하는가 | 무엇이 급증하는가 |
|---|---|---|
| 데이터 웨어하우스 | 가상 웨어하우스 런타임 | 자동 일시 중지 미구성 |
| 데이터 엔지니어링 | Spark 런타임 및 실행기 크기 | 과도하게 큰 실행기, 자동 재시도 |
| 데이터 흐름 및 스트리밍 | 실행 중인 흐름 배포 | 마이그레이션 후 유휴 커넥터 |
| 머신러닝 및 AI | 세션 및 워크스페이스 런타임 | 아무도 종료하지 않은 GPU 세션 |
| 운영 데이터베이스 | 항상 켜져 있는 클러스터 용량 | 연 2회 피크에 맞춰 크기 조정 |
| 클라우드 컴퓨팅 | 계정의 인스턴스 시간 | 종료되지 않는 개발 환경 |
| 객체 스토리지 | 저장된 GB + 요청 볼륨 | 수명 주기 정책 없음, 스냅샷 확산 |
| 네트워크 전송 | 지역 간 및 사이트-클라우드 이동 | 미터링되지 않은 하이브리드 복제 |
요금은 서비스, 제공업체, 지역 및 계약에 따라 다르며 변경됩니다. 표를 청구서의 모양으로 취급하고 가격으로 취급하지 마십시오.
중요한 연산은 사용률입니다. 24시간 실행되는 가상 웨어하우스는 한 달에 약 730시간이 청구됩니다. 실제 쿼리 활동이 그 중 40시간이라면 받은 작업에 대해 약 18배를 지불한 것입니다. 이것은 10% 초과가 아니라 한 자릿수이고, 대부분의 데이터 플랫폼 크레딧이 아무도 큰 작업을 실행하지 않고 사라지는 방식입니다.
볼륨은 압축, 파티셔닝 및 파일 레이아웃이 많은 부분을 흡수하기 때문에 창립자가 예상하는 것보다 더 친절하게 작동합니다. 유휴 시간은 아무것도 흡수하지 않습니다. 다른 것을 최적화하기 전에 자동 일시 중지를 설정하십시오.
Cloudera 크레딧이 누적되는 것
Cloudera 크레딧은 플랫폼 소비만 충당하므로, 클라우드 크레딧은 선택 사항이 아니라 동일한 배포의 다른 절반이 됩니다. 서비스는 귀하의 계정에서 실행되기 때문에 클라우드 보조금 없는 Cloudera 보조금은 더 큰 청구서에 자금을 지원하지 못합니다.
작동하는 데이터 스택은 네 개의 공급업체와 접촉하며, 모든 계층에 보조금이 존재합니다.
- 클라우드 크레딧: 플랫폼이 실행되는 인스턴스, 객체 스토리지 및 전송을 충당합니다.
- Cloudera 크레딧: 플랫폼, 거버넌스 및 그 위에 있는 엔진 소비를 충당합니다.
- 수집 및 스트리밍 크레딧: 이벤트가 들어가는 것을 충당합니다.
- 모델 및 API 크레딧: 훈련하거나 제공하는 것에 대한 추론을 충당합니다.
이 네 가지 중 세 가지를 보유한 팀은 프로덕션 데이터 스택의 대부분에 자금을 지원했습니다. 어떤 프로그램이 호환되고 어떤 프로그램이 서로 조용히 배제되는지는 AI Perks가 194개 기업에 걸쳐 유지 관리하는 것입니다.
창립자들이 데이터 플랫폼 크레딧에 대해 잘못 이해하는 것
가장 비싼 실수는 실제 필요가 테이블이었을 때 플랫폼을 채택하는 것입니다. 두 번째는 플랫폼 크레딧과 인프라 청구서가 별도의 청구서라는 것을 잊어버리는 것입니다.
다섯 가지 실패 패턴(비용 순서대로):
사용하지 않는 도달 범위 구매. 하이브리드 이식성은 프리미엄 기능이며, 단일 클라우드 지역에 거주하는 팀은 구축된 경계를 절대 넘지 않습니다.
한 청구서에 자금을 지원하고 두 개를 받음. 컴퓨팅 및 스토리지는 귀하의 계정에 있으므로 플랫폼 보조금은 배포의 절반을 충당하고 클라우드 크레딧은 나머지 부분을 충당합니다.
유휴 시간 지불. 소비 측정기는 규모가 아닌 사용률을 처벌합니다. 자동 일시 중지, 예약된 환경 및 정직한 개발 티어 크기 조정은 올해의 쿼리 튜닝보다 더 많이 절약됩니다.
거버넌스를 2단계로 취급. 정책, 계보 및 감사는 이 플랫폼 클래스가 비용이 드는 이유입니다. 이를 건너뛰는 팀은 자체적으로 설치할 수 있었던 엔진을 실행하는 데 프리미엄을 지불합니다.
떠날 수 없는 형식으로 쓰기. 자체 객체 스토리지의 Iceberg 및 Parquet는 실제로 이식 가능하며, 이것이 진정한 레버리지입니다. 컨트롤 플레인, 정책 구성 및 운영 도구는 재구축할 내용입니다. 크레딧의 70%가 소모되었을 때 비보조금 스택이 어떻게 보일지 결정하십시오.
데이터 플랫폼 크레딧을 오래 사용하는 방법
크레딧은 보조금 규모가 아니라 운영 기본값으로 소비됩니다. 세 가지 설정이 10,000달러의 플랫폼 소비가 실제로 얼마나 오래 지속될지를 결정합니다.
사용률이 첫 번째이자 가장 큰 부분입니다. 모든 가상 웨어하우스에 대한 자동 일시 중지, 개발 환경에 대한 예약 종료, 정직한 개발 티어 크기 조정은 단일 쿼리가 튜닝되기 전에 청구서의 모양을 결정합니다. 이 모든 것은 엔지니어링이 아니라 구성입니다.
두 청구서 모두에 자금을 지원하는 것이 두 번째입니다. 플랫폼 소비와 그 아래의 인프라는 별도의 송장으로 제공되므로, 첫 번째 깜짝 놀라기 이후가 아니라 플랫폼 보조금 옆에 클라우드 보조금이 있어야 합니다.
테이블 형식은 세 번째입니다. 자체 객체 스토리지의 Iceberg 및 Parquet는 다른 엔진에서 읽을 수 있으므로 컨트롤 플레인이 그렇지 않더라도 데이터 계층을 이식 가능하게 유지합니다.
현재 데이터 및 인프라 프로그램은 각 프로그램의 금액과 약관과 함께 getaiperks.com에 나와 있습니다.
자주 묻는 질문
Cloudera 스타트업 프로그램의 가치는 얼마입니까?
Cloudera Data Platform에 대해 최대 10,000달러의 크레딧을 제공하며, 이는 데이터 웨어하우스, 데이터 엔지니어링, 스트리밍 및 머신러닝 서비스 전반의 소비를 충당합니다. 제대로 크기 조정된 환경을 실행하는 초기 팀에게는 플랫폼 소비에 대한 의미 있는 런웨이입니다. 현재 금액 및 자격은 getaiperks.com에서 추적됩니다.
Cloudera 크레딧이 AWS 또는 Azure 청구서를 충당합니까?
일반적으로 그렇지 않습니다. Cloudera의 공개 클라우드 서비스는 자체 클라우드 계정 내에서 실행되도록 설계되었으므로, 인스턴스, 객체 스토리지 및 네트워크 전송은 AWS, Azure 또는 Google Cloud에서 직접 청구됩니다. 인프라 측이 종종 더 큰 수치이므로 Cloudera 보조금과 함께 클라우드 보조금을 보유하십시오.
Cloudera는 그냥 Hadoop인가요?
더 이상 그렇지 않지만, 그 유산은 현실입니다. Cloudera와 Hortonworks는 2019년에 합병되었으며, 플랫폼은 Spark, Hive, Impala, NiFi, HBase 및 Iceberg와 같은 Apache 에코시스템을 계속 이어가고 있습니다. 오늘날 귀하가 구매하는 것은 온프레미스 및 클라우드 배포를 포괄하는 거버넌스, 보안 및 계보 계층입니다.
초기 스타트업은 데이터 플랫폼을 사용해야 합니까?
대부분 아직 그렇지 않습니다. 한 지역에 몇백 기가바이트의 데이터를 가지고 있다면, 열 확장 기능을 갖춘 Postgres 또는 Parquet 위 DuckDB가 더 저렴하고, 더 간단하며, 수년간 충분히 빠릅니다. 플랫폼은 데이터가 특정 위치에 있어야 하거나, 여러 환경에 있거나, 거버넌스가 고객이 구매하는 것일 때 비용을 정당화합니다.
Cloudera 크레딧을 다른 스타트업 크레딧과 결합할 수 있습니까?
예, 그리고 청구서가 겹치지 않기 때문에 계층이 깨끗하게 쌓입니다. 클라우드 크레딧은 인프라를 충당하고, Cloudera는 플랫폼을 충당하고, 수집 크레딧은 공급하는 것을 충당하며, 모델 크레딧은 그 위에 대한 추론을 충당합니다. 194개 기업에 걸친 호환성과 770만 달러의 추적된 크레딧은 getaiperks.com에 나열되어 있습니다.
Cloudera 크레딧이 소진되면 어떻게 됩니까?
무료로 제공되는 동안 선택된 사용률, 크기 조정 및 보존 기본값으로 형성된 청구서를 상속합니다. 자동 일시 중지를 조기에 설정하고, 테이블을 자체 스토리지의 Iceberg 및 Parquet에 유지하여 이식 가능하게 유지하고, 첫 번째 전체 송장 이후가 아니라 70% 소모되었을 때 무엇을 제거할지 결정하십시오.
데이터 계층을 구축하십시오. 초기 플랫폼 청구서는 다른 사람이 자금을 지원하도록 하십시오.