Apa yang Diberikan oleh Program Startup Databricks kepada Anda
Databricks menawarkan kredit hingga $50.000 untuk Platform Kecerdasan Data-nya, yang mencakup komputasi Spark, gudang SQL, pipeline Delta Lake, dan tumpukan machine learning Mosaic AI pada satu tagihan platform.
Itu adalah salah satu hibah terbesar dalam kategori platform data. AI Perks melacaknya bersama dengan $7,7 juta dalam bentuk kredit di 194 perusahaan.
Angka yang sebenarnya penting bukanlah $50.000. Faktanya adalah bahwa kredit tersebut mencakup konsumsi platform Databricks dan umumnya bukan mesin virtual cloud tempat platform berjalan, yang terus Anda bayar langsung ke AWS, Azure, atau Google Cloud. Pendiri yang melewatkan struktur tersebut menganggarkan satu tagihan dan menerima dua. Persyaratan bervariasi berdasarkan rute, dan yang saat ini terdaftar di getaiperks.com.
Untuk Apa Databricks Sebenarnya
Databricks menjual satu lapisan terkelola di atas analitik dan machine learning Anda, sehingga tabel yang dibaca dasbor BI Anda dan tabel tempat model Anda dilatih adalah tabel yang sama dengan izin yang sama.
Setiap bagian dari itu ada secara terpisah dan dengan biaya murah. Postgres menangani analitik hingga skala yang mengejutkan. dbt menangani transformasi. S3 ditambah Parquet menangani penyimpanan. Airflow menangani orkestrasi. MLflow adalah open source dan Anda dapat menghostingnya sendiri.
Yang Anda beli adalah sambungan di antara mereka, ditambah tidak adanya insinyur data yang memelihara lima sistem yang tidak sepakat tentang siapa pelanggan itu. Delta Lake memberi Anda transaksi ACID dan time travel pada penyimpanan objek. Unity Catalog memberi Anda satu model izin di seluruh SQL, notebook, dan pelatihan model.
Tes jujur apakah Anda membutuhkannya saat ini: apakah kueri yang diandalkan bisnis Anda memakan waktu lebih lama dari kesabaran Anda, atau apakah data pelatihan Anda berasal dari tempat yang berbeda dari dasbor Anda? Jika tidak ada yang benar, Postgres dan dbt benar-benar mencakup Anda, dan kredit lebih baik dihabiskan nanti. Satu instans Postgres menangani puluhan juta baris dan sebagian besar analitik tahap awal tanpa keluhan.
Jika Anda menggabungkan aliran peristiwa dengan data transaksional, menjalankan pekerjaan Spark di atas ratusan gigabyte, atau melatih pada data yang harus tetap terkelola, Anda sudah tahu mengapa kategori ini ada.
Bagaimana Perilaku Harga Databricks dalam Skala Besar
Databricks menagih dalam DBU, unit konsumsi per detik yang tarifnya berubah tergantung pada produk mana Anda menjalankan pekerjaan, dan tagihan tersebut berada di atas tagihan infrastruktur cloud terpisah yang Anda bayar ke penyedia Anda.
Pekerjaan Spark yang sama menghabiskan biaya yang sangat berbeda tergantung hanya pada jalur mana Anda menjalankannya. Itu adalah hal terpenting untuk dipahami sebelum Anda mengaktifkan kredit.
| Meter | Perilaku daftar kasar | Apa yang menyebabkannya melonjak |
|---|---|---|
| Komputasi Pekerjaan | Sekitar $0,15 per DBU, tingkatan Premium AWS | Jarang menjadi masalah, ini adalah jalur yang murah |
| Komputasi Serbaguna | Sekitar $0,55 per DBU, kira-kira 3,5x Komputasi Pekerjaan | Pipeline produksi yang dibiarkan di cluster interaktif |
| SQL Tanpa Server | Sekitar $0,70 per DBU | Dasbor yang diperbarui secara otomatis, berhenti otomatis tidak pernah dikonfigurasi |
| Delta Live Tables | Bertingkat berdasarkan set fitur | Mode berkelanjutan di mana dipicu akan cukup |
| Penyajian Model | Per jam DBU dari throughput yang disediakan | Titik akhir tetap hangat untuk lalu lintas yang tidak datang |
| VM cloud yang mendasarinya | Dibayar ke AWS, Azure, atau GCP, bukan Databricks | Seringkali memiliki urutan besaran yang sama dengan biaya DBU itu sendiri |
Itu adalah angka daftar yang diterbitkan saat penulisan di tingkatan Premium AWS, dan angka tersebut bergerak. Verifikasi tarif saat ini sebelum Anda memodelkan apa pun.
Contoh yang dikerjakan. Cluster pekerjaan empat node dengan sekitar 2 DBU per jam node, berjalan dua jam setiap malam, adalah sekitar 480 DBU sebulan, atau sekitar $72 dalam biaya platform. Gudang SQL tanpa server 2X-Small tunggal yang tersedia delapan jam sehari kerja mengonsumsi sekitar 700 DBU, atau sekitar $490. Tambahkan tagihan EC2 di bawahnya dan jejak tahap awal mendarat di dekat $1.100 per bulan, yang dicakup oleh kredit $50.000 selama sekitar tiga setengah tahun.
Kebalikannya adalah di mana tim terluka. Satu cluster serbaguna lima node dengan penghentian otomatis dinonaktifkan membakar kira-kira 7.200 DBU per bulan, sekitar $3.960 hanya untuk DBU, untuk pekerjaan yang tidak dilakukan siapa pun. Tidak ada yang memilih itu. Itu terjadi karena seseorang menutup laptop pada hari Jumat. AI Perks mencantumkan persyaratan kredit, disiplin ada pada Anda.
Apa yang Dibarengi dengan Kredit Databricks
Kredit Databricks mencakup konsumsi platform, dan VM cloud di bawahnya ditagih oleh penyedia Anda, sehingga kredit cloud dan kredit Databricks adalah pasangan pelengkap yang paling bersih dalam infrastruktur.
Ini tidak biasa. Sebagian besar program kredit tumpang tindih, dan memegang dua sering kali berarti membuang satu. Di sini, mereka benar-benar saling melengkapi: hibah AWS, Azure, atau Google Cloud Anda menyerap lapisan komputasi dan penyimpanan, dan hibah Databricks menyerap lapisan platform di atasnya. Tim yang memegang keduanya telah mencakup sebagian besar tumpukan data secara keseluruhan untuk periode yang sama.
Gambaran lengkap untuk produk AI awal:
- Kredit cloud mencakup tempat mesin berjalan dan di mana data berada
- Kredit Databricks mencakup platform yang mengubah penyimpanan itu menjadi tabel dan pipeline terkelola
- Kredit Model dan API mencakup inferensi yang dipanggil aplikasi Anda saat runtime
- Kredit Observabilitas mencakup mengetahui apakah salah satu dari itu berfungsi
Melihat hibah mana yang kompatibel, dan mana yang diam-diam saling mengecualikan, adalah alasan mengapa AI Perks ada sebagai daftar yang dipelihara daripada folder bookmark.
Apa yang Salah Dipahami Pendiri tentang Kredit Platform Data
Kesalahan termahal adalah memperlakukan kredit besar sebagai rekayasa data gratis alih-alih sebagai jendela tetap untuk membangun kebiasaan biaya yang Anda mampu setelah itu berakhir.
Lima pola kegagalan, dalam urutan perkiraan biaya mereka:
Menjalankan produksi di Komputasi Serbaguna. Cluster interaktif adalah tempat Anda mengembangkan. Komputasi Pekerjaan adalah tempat pekerjaan terjadwal seharusnya berada, dengan tarif DBU sekitar sepertiga untuk output yang identik. Tim membuat prototipe dalam notebook, menjadwalkan notebook, dan membayar tiga kali lipat selamanya.
Tidak ada penghentian otomatis. Cluster yang tidak aktif berharga sama persis dengan yang sibuk. Atur penghentian otomatis agresif pada setiap cluster serbaguna dan berhenti otomatis pada setiap gudang SQL pada hari Anda membuatnya, bukan setelah faktur pertama.
Lupa tagihan kedua. Kredit mengimbangi DBU. Penyedia cloud Anda masih menagih untuk instans, penyimpanan, dan egress. Anggarkan keduanya, dan periksa program cloud mana yang duduk di samping yang ini di getaiperks.com.
Mengadopsi lakehouse sebelum data membenarkannya. Kredit menghilangkan sinyal harga pada saat tim Anda memilih default mereka. Bermigrasi ke Databricks pada data 5GB memberi Anda kerumitan, bukan kecepatan, dan Anda mewarisi model operasi sesudahnya.
Merencanakan keluar terlalu terlambat. Kredit dinominasikan dengan harga daftar, jadi kredit $50.000 bernilai kurang dari $50.000 pengeluaran yang dinegosiasikan, dan bulan saat kredit berakhir adalah jurang daripada tanjakan. Putuskan pada konsumsi 70% apa yang akan Anda potong, bukan pada 100%.
Apa yang Harus Diselesaikan Sebelum Anda Mengambil Kredit Platform Data
Kredit platform data paling berharga ketika kebiasaan biaya yang disembunyikannya sudah merupakan kebiasaan yang Anda mampu tanpa itu.
AI Perks mencantumkan Databricks bersama dengan program gudang, streaming, dan pipeline lainnya dalam kategori data dan infrastruktur, dengan persyaratan dan jumlah saat ini untuk masing-masing, sehingga kategori tersebut dibaca sebagai satu gambaran daripada satu program pada satu waktu.
Empat hal yang perlu diputuskan sebelum meteran dimulai:
Tagihan kedua. Konsumsi platform dan infrastruktur cloud ditagih oleh perusahaan yang berbeda. Hibah Databricks saja menyisakan sekitar setengah dari biaya platform data riil yang belum tercakup, itulah sebabnya program cloud yang terdaftar di tempat yang sama sama pentingnya dengan yang satu ini.
Rute mitra. Sebagian besar kredit infrastruktur besar mencapai startup melalui akselerator, investor, dan pasar cloud daripada rute langsung, dan persyaratan berbeda berdasarkan rute. Perlu diketahui apa yang sudah dibuka oleh hubungan Anda yang sudah ada sebelum Anda berasumsi hanya ada satu jalur.
Pengaturan waktu terhadap beban kerja. Jam kredit umumnya dimulai saat akun diaktifkan daripada saat disetujui. Kredit yang berjalan saat pipeline masih dirancang adalah kredit yang menghabiskan dirinya sendiri untuk apa pun.
Angka Anda yang tidak disubsidi. Tuliskan berapa biaya platform Anda dengan harga penuh pada hari pertama, lalu atur kebijakan cluster, penghentian otomatis, dan ukuran gudang sehingga di situlah Anda berada saat kredit berakhir daripada di mana Anda menemukan diri Anda.
Pertanyaan yang Sering Diajukan
Berapa nilai program startup Databricks?
Hingga $50.000 dalam bentuk kredit untuk platform Databricks, mencakup pekerjaan Spark, gudang SQL, pipeline Delta Live Tables, dan beban kerja machine learning. Untuk tim tahap awal yang menghabiskan sekitar $1.100 per bulan, itu adalah sekitar tiga setengah tahun masa operasional pada tagihan platform. Persyaratan dan kelayakan saat ini dilacak di getaiperks.com.
Apakah kredit Databricks mencakup tagihan AWS atau Azure saya?
Umumnya tidak. Kredit Databricks mengimbangi konsumsi platform yang diukur dalam DBU, sementara mesin virtual, penyimpanan objek, dan egress jaringan di bawahnya ditagih oleh penyedia cloud Anda. Konfirmasikan persyaratan spesifik sebelum Anda menganggarkan, dan rencanakan untuk memegang hibah cloud dan hibah Databricks daripada satu hibah besar.
Apakah Databricks berlebihan untuk startup pra-awal?
Seringkali ya. Postgres ditambah dbt menangani puluhan juta baris dan sebagian besar analitik tahap awal dengan biaya hampir nol. Databricks mendapatkan harganya begitu Anda menggabungkan data peristiwa dengan data transaksional, menjalankan Spark di atas ratusan gigabyte, atau melatih model pada data yang harus tetap terkelola dan dapat direproduksi.
Apa itu DBU dan mengapa tarifnya berubah?
DBU adalah Unit Databricks, ukuran pemrosesan yang dikonsumsi per detik. Tarif per DBU bergantung pada produk mana yang menjalankan pekerjaan: Komputasi Pekerjaan adalah jalur termurah, Komputasi Serbaguna berharga sekitar tiga setengah kali lebih mahal, dan SQL tanpa server lebih mahal lagi. Menjalankan pekerjaan terjadwal pada cluster interaktif adalah pemborosan yang dapat dihindari yang paling umum.
Bisakah saya menggabungkan kredit Databricks dengan kredit startup lainnya?
Ya, dan kombinasinya sangat bersih karena tagihannya tidak tumpang tindih. Kredit cloud mencakup mesin, kredit Databricks mencakup platform, dan kredit model mencakup inferensi saat runtime. Program mana yang kompatibel satu sama lain dilacak di 194 perusahaan di getaiperks.com.
Apa yang terjadi ketika kredit Databricks habis?
Anda mewarisi tagihan yang ukurannya ditentukan oleh kebiasaan yang terbentuk saat gratis, dengan harga daftar daripada tarif yang dinegosiasikan. Perbaikannya adalah dengan mengatur kebijakan cluster, penghentian otomatis, dan batas gudang sejak dini sehingga jejak Anda yang tidak disubsidi sudah sesuai dengan yang Anda jalankan saat kredit berakhir.
Berlangganan di getaiperks.com →
Bangun platform data. Biarkan orang lain mendanai tiga tahun pertama.