Jalan ke depan bukanlah membangun "dewa dalam kotak", tetapi untuk menciptakan sistem cerdas yang terintegrasi dengan proses yang ada, khususnya sains dan manusia pada umumnya, untuk memberdayakan dan mempercepatnya.

Makalah "Model Penalaran Hierarkis" telah beredar akhir-akhir ini, mengumpulkan puluhan ribu suka di Twitter di lusinan utas semi-viral, yang sangat tidak biasa untuk makalah penelitian. Makalah ini mengklaim akurasi 40,3% pada ARC-AGI-1 dengan model kecil (27 juta parameter) yang dilatih dari awal tanpa data pelatihan eksternal - jika nyata, ini akan mewakili terobosan penalaran utama. Saya baru saja menyelam lebih dalam pada kertas dan basis kode... Ini bagus dibaca, detail namun mudah diikuti. Saya pikir ide-ide yang disajikan cukup menarik dan arsitekturnya kemungkinan berharga. Konsep ini mengingatkan saya pada banyak ide berbeda yang saya temui selama "masa keemasan" penelitian arsitektur DL, sekitar 2016-2018. Jenis penelitian ini belum populer untuk sementara waktu, jadi senang melihat minat baru pada arsitektur alternatif. Namun, pengaturan eksperimental tampaknya sangat cacat, yang berarti bahwa saat ini kita tidak memiliki sinyal empiris (setidaknya dari ARC-AGI) apakah arsitekturnya benar-benar membantu atau tidak. Eksperimen ARC-AGI-1 melakukan hal berikut, berdasarkan pembacaan saya tentang kode persiapan data: 1. Berlatih pada 876.404 tugas, yang merupakan varian yang dihasilkan augmentasi dari 960 tugas asli: ... 400 dari ARC-AGI-1/kereta api ... 400 dari ARC-AGI-1/eval ... 160 dari ConceptARC 2. Uji pada 400 tugas (ARC-AGI-1/eval), dengan menambah setiap tugas menjadi ~1000 varian (pada kenyataannya hanya 368.151 secara total karena keanehan proses augmentasi), menghasilkan prediksi untuk setiap varian, dan mengurangi prediksi menjadi N=2 melalui pemungutan suara mayoritas. Singkatnya: mereka berlatih pada data pengujian. Anda mungkin bertanya, tunggu, mengapa akurasinya 40%, bukan 100%? Apakah modelnya sangat kurang bugar? Itu karena data pelatihan dan data pengujian mewakili tugas asli yang sama *dalam variasi yang berbeda*. Augmentasi data diterapkan secara independen ke tugas evaluasi dalam data pelatihan dan tugas evaluasi dalam data pengujian. Jadi apa yang diukur oleh eksperimen, secara kasar, adalah bagaimana model berhasil menggeneralisasi ke varian yang dihasilkan secara prosedural dari tugas yang sama (yaitu apakah model dapat belajar untuk membalikkan serangkaian transformasi grid statis yang tetap). Jadi -- jangan terlalu bersemangat dulu. Tapi saya pikir penelitian arsitektur semacam ini berharga (bila disertai dengan sinyal validasi empiris yang tepat) dan bahwa ide HRM sangat menarik. Juga, untuk lebih jelasnya, saya tidak berpikir penulis memiliki niat menyesatkan dan menyembunyikan masalah eksperimental - mereka mungkin tidak menyadari apa arti sebenarnya dari pengaturan pelatihan mereka.

Pertemuan komunitas Keras dimulai sekarang -- bergabunglah di sini:

Bahasa mengikuti distribusi hukum kekuasaan. Ada... ~7000 bahasa hidup dengan lebih dari 1000 penutur ~400 dengan lebih dari 1 juta speaker ~100 dengan lebih dari 10 juta speaker 14 dengan lebih dari 100 juta speaker

Karena AI adalah disiplin teknik dan bukan bidang ilmiah, tidak pernah mungkin untuk sepenuhnya memisahkan sifat-sifat pendekatan tertentu dari implementasi spesifiknya. Artefak adalah metodenya.

Berikut adalah BlockDL, GUI gratis & open-source yang memungkinkan Anda mendesain jaringan saraf Keras secara visual dan mempelajari ML.

Ciri khas kecerdasan manusia adalah kapasitas untuk adaptasi cepat, memecahkan masalah baru dengan cepat dalam kondisi baru dan asing. Bagaimana kita bisa membuat mesin untuk melakukannya? Dalam pracetak baru kami, kami mengusulkan bahwa setiap sistem kecerdasan umum harus memiliki model dunia adaptif, yaitu mereka harus dapat dengan cepat membangun atau menyempurnakan representasi internal mereka melalui interaksi dan eksplorasi - sebuah proses yang kami sebut "induksi model dunia". Kami mengusulkan peta jalan untuk mengevaluasi model dunia adaptif dalam mesin berdasarkan kelas khusus game yang kami sebut "game baru".

Kecerdasan bukanlah kumpulan keterampilan. Ini adalah efisiensi yang digunakan untuk memperoleh dan menerapkan keterampilan baru. Ini adalah rasio efisiensi. Dan itulah mengapa skor tolok ukur bisa sangat menyesatkan tentang kecerdasan sebenarnya dari sistem AI.

Dari 20 perusahaan teknologi AS teratas berdasarkan kapitalisasi pasar, hanya 1 yang berkantor pusat di SF (Salesforce). Itu kurang dari Austin (yang memiliki 2). Sebagian besar perusahaan teknologi AS berkantor pusat di Santa Clara county (11 dari 20 teratas). Kota besar terdekat (banyak) adalah San Jose. SF berjarak lebih dari 1 jam (hingga 2 jika ada lalu lintas).

Kasus penggunaan favorit saya untuk pembuatan video sejauh ini: gunakan untuk mengubah cerita anak Anda menjadi klip animasi Anak-anak merasa sangat wajar bahwa komputer dapat membuat video, dan mereka suka melihat apa yang mereka gambarkan menjadi hidup - ini seperti melihat imajinasi Anda divalidasi, menjadi nyata