Zuckerberg mengungkap kemajuan baru dalam visi komputer AI di SIGGRAPH

milik Meta Platforms Inc. Tim peneliti kecerdasan buatan telah menindaklanjuti dengan sekuel model pembelajaran mesin Segment Anything yang populer yang dirilis musim panas lalu.

Segmentasikan Apa Saja 2 dulu diumumkan oleh Kepala Eksekutif Meta Mark Zuckerberg selama obrolan santai dengan CEO Nvidia Corp. Jensen Huang di TANDA TANGAN 2024 acara hari ini. Ini merupakan peningkatan signifikan dari model asli, yang dirancang untuk mengidentifikasi objek dan hal tertentu dalam gambar, sehingga menghadirkan kemampuan yang sama pada video.

SA2, seperti yang dikenal, adalah “model segmentasi,” yang merupakan jenis khusus model visi komputer yang dapat melihat gambar dan menjelaskan apa yang dilihatnya. Jadi, model ini dapat mengidentifikasi seekor anjing yang sebagian tertutup pohon, atau ember yang menampung air hujan dari atap yang bocor, misalnya.

Perbedaan antara SA1 dan SA2 adalah bahwa SA2 dapat diaplikasikan pada video, bukan hanya gambar, sehingga menjadi langkah maju yang signifikan bagi bidang visi komputer.

Zuckerberg mengatakan para ilmuwan sering menggunakan model semacam ini untuk mempelajari hal-hal seperti terumbu karang dan habitat alami. “Namun, dengan melakukan ini dalam video dan menjadikannya nyata, kita dapat melihat bahwa model-model ini sangat penting.” tembakan nol dan katakan apa yang Anda inginkan, itu cukup keren,” katanya.

Fakta bahwa SA2 dapat melakukan ini untuk video merupakan bukti kemajuan dalam industri AI, khususnya dalam hal daya pemrosesan. Zuckerberg mengatakan, hanya setahun yang lalu, penerapan segmentasi gambar pada video tidak mungkin dilakukan.

Model SA2 sedang dibuka sumbernya dan dapat diunduh dari Bahasa Indonesia: GitHubdan ada demo gratis Tersedia disini.

Zuckerberg mengatakan model tersebut dilatih pada sejumlah besar data, dan perusahaan telah merilis basis data beranotasi sekitar 50.000 video yang dibuat khusus untuk melatih SA2. Akan tetapi, ia mengatakan model tersebut juga dilatih pada basis data kedua dengan lebih dari 100.000 video, tetapi yang satu itu tidak dipublikasikan. Zuckerberg tidak mengatakan alasannya, tetapi masuk akal untuk berasumsi bahwa video-video itu kemungkinan besar merupakan konten yang dibuat pengguna dari Facebook dan Instagram.

Dalam obrolan tersebut, Zuckerberg mengakui kepada Huang bahwa, meskipun sebagian besar penelitian AI milik perusahaan dibuat bersumber terbuka, perusahaan itu tetap mengutamakan kepentingan komersial.

“Kami tidak melakukan ini karena kami orang yang altruistik, meskipun saya pikir ini akan bermanfaat bagi ekosistem — kami melakukannya karena kami pikir ini akan membuat hal yang sedang kami bangun menjadi yang terbaik,” katanya.

Kembaran digital bagi para influencer

Dalam diskusi tersebut, Zuckerberg juga berbicara tentang visinya tentang masa depan di mana Facebook dan Instagram mungkin dapat menghasilkan AI menggandakan dari influencer media sosial dan pembuat konten yang bertindak seperti “agen atau asisten yang dapat berinteraksi dengan komunitas mereka.”

Ia menjelaskan bahwa beberapa kreator tidak memiliki cukup waktu dalam sehari untuk berinteraksi dengan pengikut mereka dengan cara yang mereka inginkan. Dengan menggunakan kembaran digital mereka sendiri, para influencer dapat terlibat dalam pengiriman pesan langsung dengan pengikut mereka, katanya.

Daripada berbicara langsung kepada pengikut mereka, “hal terbaik berikutnya adalah memungkinkan orang untuk membangun agen digital yang terlatih dengan materi yang mewakili mereka dengan cara yang mereka inginkan,” kata Zuckerberg.

Sasaran akhir Meta dalam hal ini adalah mampu menarik semua konten pengguna dan dengan cepat membentuk semacam agen bisnis guna “berinteraksi dengan pelanggan dan melakukan penjualan serta dukungan pelanggan,” tambahnya.

Gambar: Meta Platform