OriginBlame hadir untuk atasi masalah data yang hilang dalam pelatihan AI. Gimana caranya? Simak selengkapnya!
Jadi, bayangkan kamu udah nyumbang data buat pelatihan AI, terus tiba-tiba kamu pengen data itu dihapus. Nah, di sinilah masalahnya. Pelatih model AI butuh yang namanya 'forget set' buat ngelupain data itu, tapi gak ada alat yang bisa ngelacak data mana yang harus dihapus. Ini bikin bingung banget, kan?
Banyak sistem yang ada sekarang ini cuma bisa ngelacak data di level file atau dataset. Akibatnya, bisa-bisa semua data yang berkaitan dihapus, padahal yang mau dihapus cuma sedikit. Ini namanya over-deletion, dan bisa bikin masalah besar. Nah, di sinilah OriginBlame muncul sebagai solusi.
OriginBlame adalah sistem yang bisa ngelacak data di level record dan token. Jadi, sistem ini bisa ngikutin identitas penulis data selama proses pengolahan data. Ketika ada permintaan untuk menghapus data, OriginBlame bisa ngasih tahu dengan tepat data mana yang harus dihapus, tanpa harus ngapus yang lain.
Advertisement
Slot in-article yang tampil setelah paragraf ketiga.
Hasil evaluasi di 219.555 halaman Wikipedia menunjukkan bahwa OriginBlame bisa mengurangi over-deletion dari 101 kali jadi cuma 1,3 kali. Ini artinya, sistem ini jauh lebih efisien dalam ngelola data dibanding sistem yang ada sebelumnya. Gak heran kalau banyak yang mulai melirik teknologi ini!
Tapi, ada sedikit catatan nih. Integrasi OriginBlame ini nambahin sedikit overhead ke throughput, antara 1,3-4,0% di HuggingFace dan 2,1-19,0% di Datatrove. Meskipun begitu, peningkatan efisiensi dalam ngelola data ini jelas lebih besar dibandingkan dengan biaya tambahan tersebut.
Jadi, buat kamu yang penasaran dengan perkembangan teknologi AI dan pengolahan data, OriginBlame ini bisa jadi salah satu inovasi yang patut dicatat. Dengan sistem ini, kita bisa lebih aman dalam menggunakan data tanpa khawatir hilang sembarangan.
AI Updates lagi bergerak cepat, jadi jangan cuma lihat headline.
arXiv CS.AI
Catatan redaksi
Kalau lo cuma ambil satu hal dari artikel ini
AI Updates update dari arXiv CS.AI.
Sumber asli
Artikel ini merupakan rewrite editorial dari laporan arXiv CS.AI.
Baca artikel asli di arXiv CS.AI→