我覺得在每個階段的改進上,GPT2 -> GPT3、GPT3 -> GPT4 和 GPT4 -> GPT5 的步驟都非常相似。只是大部分 GPT4 -> GPT5 的改進已經在 o3 中實現,而從那裡到 GPT5 的步驟並不大。
53.06K