Chương trình Khởi nghiệp của Databricks Cung cấp những gì cho Bạn
Databricks cung cấp tới 50.000 USD tín dụng cho Nền tảng Trí tuệ Dữ liệu của họ, bao gồm tính toán Spark, kho SQL, các pipeline Delta Lake và ngăn xếp học máy Mosaic AI trên một hóa đơn nền tảng duy nhất.
Đó là một trong những khoản tài trợ lớn nhất trong danh mục nền tảng dữ liệu. AI Perks theo dõi nó cùng với 7,7 triệu USD tín dụng cho 194 công ty.
Con số thực sự quan trọng không phải là 50.000 USD. Đó là việc tín dụng bao gồm việc tiêu thụ nền tảng Databricks chứ không phải máy ảo đám mây mà nền tảng chạy trên đó, mà bạn tiếp tục trả trực tiếp cho AWS, Azure hoặc Google Cloud. Những người sáng lập bỏ lỡ cấu trúc đó sẽ lập ngân sách cho một hóa đơn và nhận hai hóa đơn. Các điều khoản khác nhau tùy theo cách thức, và các điều khoản hiện tại được liệt kê trên getaiperks.com.
Databricks Thực sự Dùng để làm gì
Databricks bán một lớp được quản lý chung cho cả phân tích và học máy của bạn, vì vậy bảng mà bảng điều khiển BI của bạn đọc và bảng mà mô hình của bạn đào tạo đều là một bảng duy nhất với các quyền giống nhau.
Mọi phần của điều đó tồn tại riêng biệt và với chi phí thấp. Postgres xử lý phân tích với quy mô đáng ngạc nhiên. dbt xử lý chuyển đổi. S3 cộng với Parquet xử lý lưu trữ. Airflow xử lý điều phối. MLflow là mã nguồn mở và bạn có thể tự lưu trữ nó.
Bạn đang mua sự kết nối giữa chúng, cộng với việc không có kỹ sư dữ liệu nào duy trì năm hệ thống bất đồng về việc khách hàng là gì. Delta Lake cung cấp cho bạn các giao dịch ACID và du hành thời gian trên bộ lưu trữ đối tượng. Unity Catalog cung cấp cho bạn một mô hình quyền duy nhất trên SQL, notebook và đào tạo mô hình.
Thử nghiệm trung thực về việc bạn có cần điều này chưa: một truy vấn mà doanh nghiệp của bạn phụ thuộc vào có mất nhiều thời gian hơn sự kiên nhẫn của bạn không, hoặc dữ liệu đào tạo của bạn đến từ một nơi khác với bảng điều khiển của bạn? Nếu cả hai đều không đúng, Postgres và dbt thực sự bao phủ bạn, và tín dụng tốt hơn nên được chi tiêu sau. Một phiên bản Postgres duy nhất xử lý hàng chục triệu hàng và hầu hết các phân tích giai đoạn hạt giống mà không gặp sự cố.
Nếu bạn đang kết hợp các luồng sự kiện với dữ liệu giao dịch, chạy các tác vụ Spark trên hàng trăm gigabyte, hoặc đào tạo trên dữ liệu phải được quản lý, bạn đã biết lý do tại sao danh mục này tồn tại.
Cách giá của Databricks hoạt động ở quy mô lớn
Databricks tính phí bằng DBUs, một đơn vị tiêu thụ mỗi giây có tỷ lệ thay đổi tùy thuộc vào sản phẩm bạn chạy công việc trên đó, và hóa đơn đó nằm trên hóa đơn cơ sở hạ tầng đám mây riêng biệt mà bạn thanh toán cho nhà cung cấp của mình.
Cùng một tác vụ Spark có chi phí khác nhau đáng kể chỉ tùy thuộc vào làn đường bạn chạy nó. Đó là điều quan trọng nhất cần hiểu trước khi bạn bật tín dụng.
| Chỉ số | Hành vi danh sách thô | Điều gì khiến nó tăng vọt |
|---|---|---|
| Tính toán Tác vụ | Khoảng 0,15 USD mỗi DBU, cấp cao cấp AWS | Hiếm khi là vấn đề, đây là làn đường giá rẻ |
| Tính toán Đa mục đích | Khoảng 0,55 USD mỗi DBU, khoảng 3,5 lần so với Tính toán Tác vụ | Các pipeline sản xuất để lại trên các cụm tương tác |
| SQL Không máy chủ | Khoảng 0,70 USD mỗi DBU | Bảng điều khiển tự làm mới, tự động dừng chưa bao giờ được cấu hình |
| Delta Live Tables | Phân cấp theo bộ tính năng | Chế độ liên tục nơi mà chế độ kích hoạt sẽ thực hiện |
| Phục vụ Mô hình | Theo giờ DBU của thông lượng được cung cấp | Các điểm cuối được giữ ấm cho lưu lượng truy cập không đến |
| Máy ảo đám mây cơ bản | Trả cho AWS, Azure hoặc GCP, không phải Databricks | Thường có cùng quy mô với khoản phí DBU |
Đó là các con số danh sách được công bố tại thời điểm viết trên cấp cao cấp AWS, và chúng thay đổi. Xác minh tỷ lệ hiện tại trước khi bạn mô hình hóa bất cứ điều gì.
Một ví dụ được giải quyết. Một cụm tác vụ bốn nút với khoảng 2 DBU mỗi giờ nút, chạy hai giờ mỗi đêm, là khoảng 480 DBU mỗi tháng, hoặc khoảng 72 USD phí nền tảng. Một kho SQL không máy chủ 2X-Small duy nhất được để trống tám giờ mỗi ngày trong tuần tiêu thụ khoảng 700 DBU, hoặc khoảng 490 USD. Thêm hóa đơn EC2 bên dưới và một dấu chân giai đoạn hạt giống sẽ gần 1.100 USD mỗi tháng, mà khoản tín dụng 50.000 USD bao phủ khoảng ba năm rưỡi.
Ngược lại là nơi các nhóm bị tổn thương. Một cụm đa mục đích năm nút với việc tắt tự động bị vô hiệu hóa sẽ đốt cháy khoảng 7.200 DBU mỗi tháng, khoảng 3.960 USD chỉ riêng DBU, cho công việc không ai làm. Không ai chọn điều đó. Nó xảy ra bởi vì ai đó đã đóng một chiếc máy tính xách tay vào thứ Sáu. AI Perks liệt kê các điều khoản tín dụng, kỷ luật là ở bạn.
Databricks Credits Kết hợp với Gì
Tín dụng Databricks bao gồm việc tiêu thụ nền tảng và các máy ảo đám mây bên dưới được nhà cung cấp của bạn thanh toán, vì vậy tín dụng đám mây và tín dụng Databricks là cặp kết hợp sạch nhất về cơ sở hạ tầng.
Điều này là bất thường. Hầu hết các chương trình tín dụng chồng chéo, và việc giữ hai chương trình thường có nghĩa là lãng phí một chương trình. Ở đây chúng thực sự bổ sung cho nhau: khoản tài trợ AWS, Azure hoặc Google Cloud của bạn hấp thụ lớp tính toán và lưu trữ, và khoản tài trợ Databricks hấp thụ lớp nền tảng trên nó. Một nhóm giữ cả hai đã bao phủ về cơ bản toàn bộ ngăn xếp dữ liệu trong cùng một khoảng thời gian.
Bức tranh đầy đủ cho một sản phẩm AI sớm:
- Tín dụng đám mây bao phủ nơi các máy chạy và nơi dữ liệu nằm
- Tín dụng Databricks bao phủ nền tảng biến bộ lưu trữ đó thành các bảng và pipeline được quản lý
- Tín dụng Mô hình và API bao phủ suy luận mà ứng dụng của bạn gọi khi chạy
- Tín dụng Khả năng Quan sát bao phủ việc biết liệu bất kỳ điều gì trong số đó có hoạt động hay không
Xem chương trình nào tương thích và chương trình nào lặng lẽ loại trừ nhau là lý do tại sao AI Perks tồn tại như một danh sách được duy trì thay vì một thư mục dấu trang.
Những điều những người sáng lập hiểu sai về Tín dụng Nền tảng Dữ liệu
Sai lầm tốn kém nhất là coi một khoản tín dụng lớn là kỹ thuật dữ liệu miễn phí thay vì một cửa sổ cố định để xây dựng thói quen chi phí mà bạn có thể chi trả sau khi nó kết thúc.
Năm kiểu thất bại, theo thứ tự đại khái về chi phí của chúng:
Chạy sản xuất trên Tính toán Đa mục đích. Các cụm tương tác là nơi bạn phát triển. Jobs Compute là nơi công việc được lên lịch thuộc về, với khoảng một phần ba tỷ lệ DBU cho kết quả tương tự. Các nhóm tạo mẫu trong một notebook, lên lịch notebook đó và trả gấp ba lần mãi mãi.
Không có tắt tự động. Một cụm nhàn rỗi tốn kém chính xác bằng một cụm bận rộn. Đặt tắt tự động mạnh mẽ trên mọi cụm đa mục đích và tự động dừng trên mọi kho SQL vào ngày bạn tạo chúng, không phải sau hóa đơn đầu tiên.
Quên hóa đơn thứ hai. Tín dụng bù đắp DBU. Nhà cung cấp đám mây của bạn vẫn tính phí cho các phiên bản, lưu trữ và egress. Lập ngân sách cả hai, và kiểm tra chương trình đám mây nào nằm cùng với chương trình này trên getaiperks.com.
Áp dụng lakehouse trước khi dữ liệu biện minh cho nó. Một khoản tín dụng loại bỏ tín hiệu giá vào đúng thời điểm nhóm của bạn đang chọn các mặc định của họ. Di chuyển sang Databricks với 5GB dữ liệu mang lại cho bạn sự phức tạp, không phải tốc độ, và bạn kế thừa mô hình vận hành sau đó.
Lập kế hoạch thoát quá muộn. Tín dụng được định giá theo giá niêm yết, vì vậy 50.000 USD tín dụng ít có giá trị hơn 50.000 USD chi tiêu đã đàm phán, và tháng nó kết thúc là một vách đá thay vì một đoạn đường nối. Quyết định khi tiêu thụ 70% những gì bạn sẽ cắt giảm, không phải khi tiêu thụ 100%.
Những gì cần quyết định trước khi bạn nhận Tín dụng Nền tảng Dữ liệu
Tín dụng nền tảng dữ liệu có giá trị nhất khi các thói quen chi phí mà nó che giấu đã là những điều bạn có thể chi trả mà không có nó.
AI Perks liệt kê Databricks cùng với các chương trình kho, phát trực tuyến và pipeline khác trong các danh mục dữ liệu và cơ sở hạ tầng, với các điều khoản và số tiền hiện tại cho mỗi chương trình, vì vậy danh mục này được đọc như một bức tranh toàn cảnh thay vì từng chương trình một.
Bốn điều đáng để quyết định trước khi đồng hồ bắt đầu chạy:
Hóa đơn thứ hai. Tiêu thụ nền tảng và cơ sở hạ tầng đám mây được thanh toán bởi các công ty khác nhau. Một khoản tài trợ Databricks một mình để lại khoảng một nửa chi phí nền tảng dữ liệu thực tế chưa được bao phủ, đó là lý do tại sao các chương trình đám mây được liệt kê ở cùng một nơi quan trọng như chương trình này.
Tuyến đường đối tác. Một phần đáng kể các khoản tín dụng cơ sở hạ tầng lớn đến các công ty khởi nghiệp thông qua các vườn ươm, nhà đầu tư và thị trường đám mây thay vì tuyến đường trực tiếp, và các điều khoản khác nhau tùy theo tuyến đường. Đáng để biết các mối quan hệ hiện có của bạn đã mở khóa những gì trước khi bạn giả định có một con đường.
Thời gian đối với khối lượng công việc. Đồng hồ tín dụng thường bắt đầu khi tài khoản được kích hoạt chứ không phải khi nó được phê duyệt. Một khoản tín dụng chạy trong khi pipeline vẫn đang được thiết kế là một khoản tín dụng tự chi tiêu vào không có gì.
Con số không được trợ cấp của bạn. Viết ra chi phí nền tảng sẽ là bao nhiêu với giá đầy đủ vào ngày đầu tiên, sau đó đặt các chính sách cụm, tắt tự động và kích thước kho để đó là nơi bạn hạ cánh khi tín dụng kết thúc thay vì nơi bạn phát hiện ra mình đang ở.
Câu hỏi thường gặp
Chương trình khởi nghiệp Databricks trị giá bao nhiêu?
Tới 50.000 USD tín dụng cho nền tảng Databricks, bao gồm các tác vụ Spark, kho SQL, các pipeline Delta Live Tables và các khối lượng công việc học máy. Đối với một nhóm giai đoạn hạt giống chi tiêu khoảng 1.100 USD mỗi tháng, đó là khoảng ba năm rưỡi thời gian hoạt động trên hóa đơn nền tảng. Các điều khoản và đủ điều kiện hiện tại được theo dõi tại getaiperks.com.
Tín dụng Databricks có chi trả hóa đơn AWS hoặc Azure của tôi không?
Thường là không. Tín dụng Databricks bù đắp việc tiêu thụ nền tảng được đo bằng DBU, trong khi máy ảo, bộ lưu trữ đối tượng và egress mạng bên dưới được nhà cung cấp đám mây của bạn thanh toán. Xác nhận các điều khoản cụ thể trước khi bạn lập ngân sách, và lên kế hoạch giữ cả một khoản tài trợ đám mây và một khoản tài trợ Databricks thay vì một khoản lớn.
Databricks có quá sức đối với một startup trước giai đoạn hạt giống không?
Thường là có. Postgres cộng với dbt xử lý hàng chục triệu hàng và hầu hết các phân tích giai đoạn hạt giống với chi phí gần như bằng không. Databricks kiếm được giá của nó khi bạn kết hợp dữ liệu sự kiện với dữ liệu giao dịch, chạy Spark trên hàng trăm gigabyte, hoặc đào tạo mô hình trên dữ liệu phải được quản lý và có thể tái lập.
DBU là gì và tại sao tỷ lệ thay đổi?
DBU là Đơn vị Databricks, một thước đo tiêu thụ xử lý mỗi giây. Tỷ lệ mỗi DBU phụ thuộc vào sản phẩm chạy công việc: Jobs Compute là làn đường rẻ nhất, All-Purpose Compute có giá cao gấp khoảng ba lần rưỡi, và SQL không máy chủ còn cao hơn nữa. Chạy công việc được lên lịch trên các cụm tương tác là khoản chi tiêu quá mức phổ biến có thể tránh được.
Tôi có thể kết hợp tín dụng Databricks với các tín dụng khởi nghiệp khác không?
Có, và sự kết hợp này đặc biệt sạch sẽ vì các hóa đơn không chồng chéo. Tín dụng đám mây bao phủ các máy, tín dụng Databricks bao phủ nền tảng và tín dụng mô hình bao phủ suy luận khi chạy. Các chương trình nào tương thích với nhau được theo dõi trên 194 công ty tại getaiperks.com.
Điều gì xảy ra khi tín dụng Databricks hết?
Bạn kế thừa một hóa đơn được định cỡ theo thói quen được hình thành khi nó còn miễn phí, với giá niêm yết thay vì tỷ lệ đã đàm phán. Giải pháp là đặt các chính sách cụm, tắt tự động và giới hạn kho sớm để dấu chân không được trợ cấp của bạn đã là dấu chân bạn đang chạy khi tín dụng hết hạn.
Xây dựng nền tảng dữ liệu. Hãy để người khác tài trợ ba năm đầu tiên của nó.