Hai teman-teman, selamat datang di buletin AI reguler TechCrunch. Jika Anda ingin ini masuk ke kotak masuk Anda setiap hari Rabu, daftar di sini.
Pada hari Senin, CEO Anthropic Dario Amodei mengikuti wawancara podcast selama lima jam dengan influencer AI Lex Fridman. Keduanya membahas berbagai topik, mulai dari garis waktu kecerdasan super hingga kemajuan teknologi andalan Anthropic berikutnya.
Agar Anda tidak perlu mengunduh, kami telah mengeluarkan poin-poin penting.
Meskipun terdapat bukti sebaliknya, Amodei percaya bahwa “peningkatan” model masih merupakan jalan yang layak menuju AI yang lebih mumpuni. Dengan meningkatkan skala, Amodei mengklarifikasi bahwa yang dimaksudnya adalah meningkatkan tidak hanya jumlah komputasi yang digunakan untuk melatih model, tetapi juga ukuran model — dan ukuran set pelatihan model.
“Mungkin, penskalaan ini akan terus berlanjut, dan ada keajaiban yang belum kami jelaskan secara teoritis,” kata Amodei.
Amodei juga tidak berpendapat bahwa kekurangan data akan menjadi tantangan bagi pengembangan AI, tidak seperti beberapa ahli. Baik dengan menghasilkan data sintetis atau melakukan ekstrapolasi dari data yang ada, pengembang AI akan “mengatasi” keterbatasan data, katanya. (Masih harus dilihat apakah masalah dengan data sintetis dapat diselesaikan, saya akan mencatatnya di sini.)
Amodei melakukannya mengakui bahwa komputasi AI kemungkinan akan menjadi lebih mahal dalam waktu dekat, sebagian karena konsekuensi dari penskalaan. Dia memperkirakan perusahaan akan menghabiskan miliaran dolar untuk…