Tällä viikolla Complex Systems -ohjelmassa olin innoissani voidessani toivottaa tervetulleeksi METR:n @joel_bkr keskustella siitä, kuinka mittaamme tarkasti LLM:ien edistymistä, mielenkiintoisesta tutkimustuloksesta, jonka Joel ja tiimi saavuttivat äskettäin, ja pienestä osasta ohjelmistosuunnittelun teollista organisaatiota.