Google akhirnya mengumumkan
PaLM 2 pada keynote IO tahun 2023, dan menyebutnya sebagai ”
design bahasa besar generasi berikutnya yang dibangun berdasarkan penelitian terobosan Google
dalam pembelajaran mesin dan AI yang bertanggung jawab.” PaLM 2 adalah jawaban Google terhadap GPT-4 OpenAI, sebuah
LLM yang lebih baik dari PaLM sebelumnya yang unggul dalam tugas-tugas penalaran tingkat lanjut, termasuk kode dan
matematika, klasifikasi dan menjawab pertanyaan, terjemahan dan kemahiran multibahasa,
PaLM 2 dibuat untuk berfungsi sebagai
model bahasa besar Google yang dapat ditumpuk sambil menunggu rilis version bahasa besar generasi berikutnya
, Gemini. PaLM 2 mendukung Google Bard, dan serangkaian alat AI Generatif yang diumumkan
di IO yang saya bahas dalam video ini. Model hand 2 menghadirkan kemampuan dasar yang menarik
dalam berbagai ukuran yang disebut Gecko, Otter, Bison, dan Unicorn. Gecko adalah
versi paling ringan dari hand 2 yang mampu bekerja di perangkat seluler dan cukup cepat
HAND 2 merupakan lompatan signifikan di atas PaLM dan
hal ini ditunjukkan beberapa kali di seluruh Laporan Teknis. HAND 2 melakukan banyak hal
lebih baik dibandingkan GPT-4 namun masih tertinggal jauh.Dimulai dengan fungsi intinya, PaLM 2 memiliki variasi yang sangat ideal sehingga unggul dan berkembang dalam kasus penggunaan dan industri tertentu yang tidak dapat dilakukan oleh GPT-4. Seperti Med-PaLM yang dirancang untuk domain name medis oleh tim Google Deepmind yang akan saya bahas di video clip lain, dan Sec-PaLM yang dirancang untuk meningkatkan keamanan siber dengan AI generatif di Google Cloud. Dibandingkan secara langsung dengan GPT-4, PaLM 2 secara obyektif lebih baik dalam bidang Matematika, namun penting untuk dicatat bahwa cara Google menguji LLM-nya berbeda dengan OpenAI dengan Google yang menggunakan teknik dorongan ' rantai pemikiran ' dan pembacaan konsistensi diri untuk pengujiannya, yang pada dasarnya berarti, respons akhir PaLM 2 dipilih berdasarkan jawaban yang paling konsisten dari beberapa keluaran. Namun GPT-4 tidak menggunakan strategi ini sehingga untuk sebagian besar pengujian non-khusus yang kinerjanya lebih baik, saya secara obyektif berpendapat bahwa tidak adil untuk mengklaim bahwa ini lebih baik daripada GPT-4. [Multibahasa di PaLM 2] Namun apa sebenarnya yang bisa dilakukan PaLM 2 dengan lebih baik? Sebagai permulaan, HAND 2 dilatih secara mendalam mengenai teks multibahasa, yang mencakup lebih dari seratus bahasa yang telah meningkatkan kemampuannya secara signifikan untuk memahami, menghasilkan, dan menerjemahkan teks yang berbeda dalam berbagai bahasa tersebut. Faktanya, HAND 2 lebih buruk dalam interaksi dalam bahasa Inggris dibandingkan GPT-4, namun sepenuhnya menghilangkan GPT-4 dalam hal perintah dan interaksi non-Bahasa Inggris. PaLM 2 mengungguli Google Terjemahan dan
PaLM dalam hal terjemahan kontekstual dan nuansa untuk bahasa tertentu, termasuk saat membuat kode. Kemampuan PaLM 2 ini diterapkan pada Bard yang kini tersedia untuk umum dan responsif terhadap permintaan bahasa Korea dan Jepang, sementara Google berupaya untuk menyediakan 40 bahasa tambahan sebelum akhir tahun 2023. Saya tidak memiliki akses ke GPT-4 sehingga tidak dapat melakukannya perbandingan langsung dalam perintah multibahasa, namun alih-alih menggunakan teks laporan teknis hand 2 sebagai bukti, Saluran YouTube, AI Dijelaskan, melakukan pengujian dan inilah hasilnya.” Saya dapat menguji Bard dalam bahasa Korea pada pertanyaan yang diterjemahkan melalui Google Terjemahan dari kumpulan data NMLU. Perusahaan ini menjawab pertanyaan dengan tepat di setiap drafnya. Sebaliknya, GPT-4 tidak hanya menjawab pertanyaan dalam bahasa Korea, saat pertama kali saya mengujinya untuk video GPT pintar saya, pertanyaannya juga salah dalam bahasa Inggris. “Location existed di mana hand 2 meningkat secara signifikan dibandingkan PaLM adalah dalam penalaran, yaitu kemampuan LLM untuk menguraikan tugas kompleks menjadi subtugas
yang lebih sederhana dan memahami nuansa bahasa manusia. Menurut saya pribadi
, PaLM 2 secara. obyektif lebih baik daripada GPT-4 dalam hal penalaran, mengingat, sekali lagi,.
teknik-teknik yang digunakan dalam laporan ini dan laporan tersebut bahkan mengatakan bahwa. PaLM 2 setara dan konsisten dengan performa GPT-4 yang.
artinya belum tentu lebih baik.Namun dalam penalaran matematis,.
HAND 2 diuji bersama GPT-4 dengan.
MATH, GSM8K, dan MGSM. Hasilnya menarik karena PaLM 2 mengungguli GPT-4 dalam.
Peningkatan inti ketiga dari Hand 2 adalah. Dalam video clip Sparks of AGI. Untuk PaLM 2, Google telah menyempurnakan.
versi kecil hand 2 untuk pengkodean yang disebut hand 2-S * yang dilatih pada campuran information multibahasa yang lebih luas
, penuh kode, dan multibahasa. sehingga Google dapat secara signifikan meningkatkan kemampuan pengkodean PaLM 2 tanpa. mengorbankan kemampuannya pemahaman bahasa alami. Google mengevaluasi kemampuan
pengkodean. version pengkodean PaLM 2-S * dengan serangkaian tolok ukur termasuk ARCADE, tugas penyelesaian Note pad Jupyter.
yang” mengharuskan design untuk menyelesaikan sel berikutnya dalam buku catatan yang diberi.
deskripsi tekstual dan sel buku catatan sebelumnya. “Version pengkodean PaLM 2 mengungguli.
version pengkodean pendahulunya, PaLM-540B-Coder … [sejujurnya. baiklah,. mereka harus mengerjakan nama ini], tetapi model ini mengungguli PaLM-540B-Code meskipun. jauh lebih kecil dan jauh lebih murah. Google mengumumkan di IO bahwa. Poet kini tidak hanya mampu menulis dan menerjemahkan kode yang rumit, namun pengembang kini dapat mengekspornya. ke system seperti Replit dengan ekstensi baru PaLM 2. Saya tahu ekstensi semacam ini. sudah digunakan dengan API GPT-4 OpenAI, namun kami belum melihatnya digunakan sepenuhnya,. jadi saya bahkan tidak bisa membuat perbandingan di sini. Codey, yang saya asumsikan adalah nama merek untuk. HAND 2-S * versi perusahaan, model pengkodean PaLM 2, juga diumumkan di IO dan hanya. tersedia di system Vertex AI Google Cloud. [PaLM 2 Masih Tertinggal
] Jujur saja, GPT-4 masih mendominasi hand 2 bahkan pada. perhitungan yang sama seperti
yang diklaim oleh laporan teknis hand 2 bahwa kini kinerjanya sangat baik. Kenyataannya adalah,.
PaLM 2 jauh lebih kecil daripada PaLM yang memiliki sekitar 540 miliar parameter,.
masih lebih kecil dari GPT-3.5. PaLM 2 sangat mengesankan dan kekuatannya,. menurut saya, terletak pada infrastruktur 4 ukuran yang dimilikinya, dan Gecko, model kerja offline,. mungkin bisa membantu Google memenangkan kontes
popularitas dalam membangun. aplikasi AI generatif interaktif di ponsel cerdas. Tonton video clip ini mengenai semua. pengumuman AI yang dibuat di Google IO 2023, dan video ini menjelaskan bocoran. dokumen inner Google yang berjudul ‘Kami Tidak Memiliki Parit, Begitu pula OpenAI’. Terima kasih telah.
menonton dan jangan lupa berlangganan.
HAND 2 merupakan lompatan signifikan di atas Hand dan
Namun apa sebenarnya yang bisa dilakukan Hand 2 dengan lebih baik? PaLM 2-S * versi perusahaan, model pengkodean Hand 2, juga diumumkan di IO dan hanya. PaLM 2 jauh lebih kecil daripada Hand yang memiliki sekitar 540 miliar specification,. HAND 2 sangat mengesankan dan kekuatannya,.