ChatGPT-Sentiment-Evaluation

测测ChatGPT懂不懂你的情绪

这是一个针对ChatGPT情感理解能力的初步评测项目。它通过一系列测试用例，评估ChatGPT能否准确理解文本中的观点、情感和情绪。项目提供了标准化的评测流程和数据集，帮助研究者和开发者量化ChatGPT在情感分析任务上的表现，并对比其与人类判断的差异。核心能力包括：构建情感标注测试集、设计评测指标、自动化运行评测并输出结果。目前处于早期阶段，代码和文档相对简洁。

开源 free 开源模型
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 54
维护状态 低维护
是否开源 是
定价模式 free

项目数据

分类开源模型
开发团队NUSTM
所属国家
官网地址
GitHubhttps://github.com/NUSTM/ChatGPT-Sentiment-Evaluation
定价模式free
价格说明开源项目，本地部署，完全免费。
访问状态
是否开源是
开源协议
主要语言Python
技术栈/模型aspect-based-sentiment-analysis,chatgpt,emotion-analysis,emotion-cause-analysis,emotion-cause-extraction,emotion-cause-pair-extraction,large-language-models,llm,open-domain,open-domain-sentiment-analysis,polarity-shifting,sentiment-analysis
GitHub 星标★ 54
30天Star增速
HF 下载量
上线时间2023-02-28 00:00:00
最近更新2025-11-27 00:00:00
维护状态低维护
中文支持
访问方式
移动端支持
综合评分
收录时间2026-08-09
浏览次数7

使用教程

核心亮点

  • 聚焦ChatGPT情感理解这一具体能力，评测目标明确
  • 提供可复现的评测流程，便于对比不同模型版本
  • 代码简洁，易于扩展新的测试用例

不足之处

  • 测试集规模较小，覆盖场景有限
  • 文档和社区支持待观察

适用场景

  • 评估ChatGPT在客服场景中的情感识别能力
  • 对比不同AI模型的情感分析准确率
  • 为情感分析任务选择模型提供参考

替代项目

OpenAI Evals、lm-evaluation-harness、SentEval

项目介绍

ChatGPT-Sentiment-Evaluation 是评测安全领域的开源项目，由 NUSTM 开发，2023 年首次发布。

它收录于评测安全分类，该分类目前共有 458 个项目，GitHub 星标数为 54。

项目已超过三个月没有代码更新，维护节奏明显放缓，最近一次代码更新于 2025-11-27。本地部署，完全免费。

它主要面向的使用场景是：评估ChatGPT在客服场景中的情感识别能力。同类可对比的替代方案包括 OpenAI Evals、lm-evaluation-harness、SentEval。

上一篇：InfiniteBench

下一篇：Awesome-Prompting-on-Vision-Language-Model

同类项目推荐

akto 开源

给 AI 应用做安全体检，防提示注入和数据泄露

Akto is the fastest growing AI Security platform for your teams to secure AI agents,···

★ 1517 2026-08-20
XSafeClaw 开源

给 AI 智能体装上安全盾，自动红队测试找漏洞

Introducing XSafeClaw: The Open-Source Agent Safety Platform from Fudan University

★ 164 2026-08-10
deepteam 开源

自动模拟越狱攻击，提前测出 LLM 安全漏洞

DeepTeam is a framework to red team LLMs and AI agents.

★ 2937 2026-09-12
Tracely-ai 开源

把生产事故变成回归测试，合并前自动拦截 AI 故障

Trace-native CI/CD for AI agents — production failures become regression tests that···

★ 1362 2026-08-24