金融文本分析测评：Llama 3是最强开源模型吗？
创建于 更新于
摘要
本报告针对Meta发布的Llama 3开源大模型，构建基于金融研报的阅读问答评测体系，系统对比包括Llama 3、GPT4、ChatGLM 3及其他主流开源模型在文本解析和问答准确度的表现。结果显示，尽管Llama 3在多个基准测试中领先部分开源模型，但其回答存在中文表达不完整和逻辑推理偏差，且上下文窗口容量较小限制了长文本处理能力。GPT4整体表现最佳，准确率和逻辑推理接近人类标准，InternLM和Baichuan则存在较高错误率和回答拒绝情况。测评为投资者在选择金融文本分析模型时提供了有价值的参考。 [page::0][page::1][page::6]
