上周,OpenAI 前首席科学家 Ilya Sutskever 在NeurIPS 2024 发表了观点:大模型预训练方式将走向终结。即人类只有一个互联网,而互联网的数据已经被大模型学的差不多了。