Bobalytics
Bobalytics menyediakan analitik dan insight tentang bagaimana IBM Bob berkontribusi pada proses pengembangan software-mu. Gunakan untuk memahami dampak Bob pada codebase-mu, melacak pengeluaran Bobcoin, dan memantau adopsi tim di seluruh organisasi.
Mengakses Bobalytics
Bobalytics tersedia eksklusif untuk pengguna paket Enterprise.
Buka Bobalytics dari portal web IBM Bob.
Kunjungi bob.ibm.com dan login.
Klik Admin, lalu pilih tab Bobalytics.
Navigasi Bobalytics
Bobalytics mengorganisir analitik ke dalam tiga level:
Tampilan workspace
Tampilan workspace hanya tersedia untuk admin. Menampilkan data agregat dari semua tim di instance-mu sehingga kamu bisa memahami adopsi, nilai, dan biaya di seluruh organisasi.
Gunakan dropdown Teams untuk memfilter berdasarkan satu atau lebih tim dan mengagregasi data untuk tim-tim tersebut saja.
Tampilan tim
Tampilan tim menampilkan analitik untuk tim tertentu. Admin melihat semua grafik di tampilan tim. Pengguna biasa hanya melihat grafik yang tidak menampilkan data untuk anggota tim individual. Informasi yang mengidentifikasi pengguna dianonimkan; misalnya, alamat email diganti dengan User 1, User 2, dan seterusnya.
Tampilan pengguna
Tampilan pengguna menampilkan analitik pribadimu. Setiap pengguna memiliki akses ke tampilan penggunanya sendiri.
Admin hanya bisa melihat data mereka sendiri di halaman tampilan pengguna. Tampilan pengguna tidak memberikan akses ke data individual pengguna lain.
Memfilter data
Gunakan pemilih rentang waktu untuk mengontrol periode yang dicakup semua grafik. Grafik diperbarui secara dinamis untuk mencerminkan rentang yang dipilih. Perbandingan periode sebelumnya yang ditampilkan di setiap kartu key performance indicator (KPI) dihitung secara otomatis berdasarkan periode yang setara segera sebelum pilihanmu.
Di tampilan workspace, kamu juga bisa menggunakan dropdown Teams untuk memilih satu atau lebih tim dan mengagregasi data dari mereka.
Key performance indicator
Bobalytics diorganisir di sekitar tiga KPI: Adoption rate, Bob factor, dan pengeluaran Bobcoin. Pilih KPI untuk melihat grafik utama dan metrik pendukungnya.
Adoption rate
Adoption rate mengukur seberapa konsisten timmu menggunakan Bob. Dihitung sebagai rata-rata daily active users dibagi total jumlah kursi berlisensi. Pengguna dihitung sebagai aktif pada hari tertentu ketika mereka menerima setidaknya satu penyelesaian kode atau menyelesaikan percakapan chat.
Metrik utama:
- Team onboarding: persentase adopsi untuk tim tertentu.
- Daily active users: grafik pengguna aktif dari waktu ke waktu dengan toggle antara tampilan harian dan mingguan.
- Detail dan tren tim: Metrik adopsi, nilai, dan biaya.
Metrik pendukung:
- Usage levels: rincian pengguna berdasarkan seberapa sering mereka menggunakan Bob — beberapa kali sehari, harian, mingguan, sesekali, atau tidak aktif.
- Dampak repository Bob: Repository tempat pengguna Bob paling aktif.
Kamu bisa mengklik setiap komponen grafik untuk mempelajari lebih lanjut tentang metrik tertentu.
Jika adoption rate rendah, periksa usage levels untuk mengidentifikasi pengguna yang tidak aktif atau sesekali. Menghubungi pengguna tersebut atau meninjau onboarding mereka bisa membantu meningkatkan adopsi sebelum akhir siklus penagihan.
Bob factor
Bob factor mengukur kontribusi Bob pada codebase-mu. Dihitung sebagai persentase baris kode yang di-commit yang dibuat oleh Bob.
Formula: Baris kode yang di-commit oleh Bob ÷ total baris kode yang di-commit
Metrik utama:
- Impact dan cost: Bagaimana Bob factor setiap tim dibandingkan dengan pengeluaran Bobcoin mereka.
- Bob-assisted commits: grafik garis commit selama periode yang dipilih, dengan toggle untuk memilih per tim atau semua tim.
- Detail dan tren tim: Adopsi, biaya, dan metrik per tim.
Metrik pendukung:
- Dampak repository Bob: Repository tempat pengguna Bob aktif.
Gunakan Bob factor bersama pengeluaran Bobcoin untuk menilai efisiensi. Tim dengan Bob factor tinggi dan pengeluaran rendah menunjukkan Bob digunakan secara efektif. Pengeluaran tinggi dengan Bob factor rendah mungkin menunjukkan Bob digunakan banyak untuk task-task yang tidak menghasilkan kode yang di-commit, seperti riset, penjelasan, atau eksplorasi.
Pengeluaran Bobcoin
Pengeluaran Bobcoin melacak total Bobcoin yang dikonsumsi selama periode yang dipilih.
Metrik utama:
- Impact dan cost: Bagaimana Bob factor setiap tim dibandingkan dengan pengeluaran Bobcoin mereka.
- Daily spend: Bobcoin yang dihabiskan per hari.
- Detail dan tren tim: Adopsi, nilai, dan metrik biaya per tim.
Metrik pendukung:
- Dampak repository Bob: Repository tempat pengguna Bob aktif.
Jika sebuah tim menghabiskan Bobcoin lebih cepat dari yang diharapkan, tinjau adoption rate dan Bob factor mereka bersama pengeluaran. Pengeluaran tinggi dipasangkan dengan adopsi tinggi dan Bob factor yang kuat menunjukkan penggunaan yang efektif. Pengeluaran tinggi dengan Bob factor rendah mungkin menunjukkan peluang untuk meninjau cara penggunaan Bob di tim tersebut.
Menggunakan Bobalytics secara efektif
Tiga KPI di Bobalytics bekerja bersama untuk memberikan gambaran lengkap tentang nilai Bob di seluruh organisasimu.
| Tujuan | KPI yang perlu difokuskan |
|---|---|
| Pahami berapa banyak orang yang aktif menggunakan Bob | Adoption rate |
| Ukur kontribusi nyata Bob pada kode yang dikirimkan | Bob factor |
| Pantau dan kendalikan biaya tooling AI | Pengeluaran Bobcoin |
| Nilai efisiensi (nilai vs. biaya) | Bob factor + Pengeluaran Bobcoin bersama |
Meninjau data secara rutin
Periksa Bobalytics secara teratur — mingguan atau bulanan — untuk melihat tren sebelum menjadi masalah. Misalnya:
- Adoption rate yang menurun selama beberapa minggu mungkin menandakan pengguna perlu enablement tambahan atau workflow perlu disesuaikan.
- Lonjakan mendadak dalam pengeluaran Bobcoin bisa diselidiki dengan memfilter ke tim atau rentang waktu tertentu untuk mengidentifikasi sumbernya.
- Bob factor yang terus meningkat bersama pengeluaran yang stabil adalah sinyal kuat bahwa timmu mendapatkan nilai yang semakin meningkat dari Bob dari waktu ke waktu.
Berbagi insight dengan stakeholder
Tampilan workspace mengagregasi data dari semua tim, berguna untuk pelaporan ke pimpinan atau membenarkan investasi tooling AI. Filter berdasarkan tim tertentu untuk membuat laporan yang ditargetkan untuk pemimpin tim atau pemilik proyek.
Untuk informasi lebih lanjut tentang mengelola anggaran Bobcoin dan memahami bagaimana pengeluaran terakumulasi, lihat Bobcoins.
Privasi dan visibilitas data
Bobalytics dirancang untuk memberikan insight level tim tanpa mengekspos data pengguna individual kepada admin.
- Informasi yang mengidentifikasi pengguna, seperti alamat email, di grafik level tim dianonimkan dan ditampilkan sebagai User 1, User 2, dan seterusnya.
- Admin tidak dapat mengakses data spesifik pengguna dari grafik level tim manapun.
- Setiap pengguna bisa melihat data individual mereka sendiri di halaman tampilan Pengguna.
Skills
Buat instruction set yang bisa digunakan kembali untuk workflow khusus. Definisikan custom workflow, tambahkan file pendukung, dan ajarkan Bob task-task khusus untuk hasil yang konsisten.
Bobcoins
Bobcoins adalah metrik penagihan berbasis konsumsi yang digunakan untuk paket Bob. Metrik ini menyediakan cara yang transparan dan dapat diprediksi untuk mengukur dan menagih penggunaan Bob-mu.