向60个LLM提出20个问题

向60个LLM提出20个问题

作者编写了一个脚本来向60多个语言模型提出20个问题,以测试它们的基本推理、指令遵循能力和创造力。问题包括类似让语言模型用俳句的形式论证和反对在Kubernetes中使用这个技术,以及用简洁的要点形式提出反对Münchhausen三难困境的论点，还有一些问题需要从文本中提取信息,比如从发票中提取供应商名称,和判断客户评论是积极还是消极。此外还有一些创造性的提示,例如提供一个笑脸的SVG代码,以及用E大调写一串12小节布鲁斯和弦进程。最后,作者指出这个脚本还不完善,他计划在未来进一步改进。