08
10
2023
打破大模型黑盒，彻底分解神经元！OpenAI对头Anthropic击破AI不可解释性障碍
多年来，我们一直无法理解人工智能是如何做出决策和产生输出的模型开发人员只能决定算法、数据，最后得到模型的输出结果，而中间部分——模型是怎么根据这些算法和数据输出结果，就成为了不可见的「黑箱」。所以就出...
29
09
2023
重温图灵原理，感受反证法的力量
算法已经无处不在，似乎对于每一个可以用精确的数学术语表达的问题，都有相应的算法。然而，事实并非如此，实际上有些看似简单的问题永远无法通过算法解决计算机科学家中的先驱艾伦・图灵，曾在近一个世纪前的一篇论...
22
07
2023
微软新出热乎论文：Transformer扩展到10亿token
当大家不断升级迭代自家大模型的时候，LLM（大语言模型）对上下文窗口的处理能力，也成为一个重要评估指标。比如明星大模型GPT-4支持32ktoken，相当于50页的文字；OpenAI前成员创立的Ant...