ChatGPT-Sentiment-Evaluation

测测ChatGPT懂不懂你的情绪

开源 🏷️完全免费 🔧 仅开源项目，无在线服务，需自行部署 开源模型 🍴 复刻 5 👀 关注 3
GitHub ↗
GitHub 星标 ★ 54
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目，本地部署，完全免费。

项目预览

ChatGPT-Sentiment-Evaluation 项目界面预览图
图片来源：GitHub 官方仓库名片

项目数据

分类开源模型
开发团队NUSTM
GitHubhttps://github.com/NUSTM/ChatGPT-Sentiment-Evaluation
定价模式🏷️完全免费
价格说明开源项目，本地部署，完全免费。
访问状态🔧 仅开源项目，无在线服务，需自行部署
是否开源是
主要语言Python
技术栈/模型aspect-based-sentiment-analysis,chatgpt,emotion-analysis,emotion-cause-analysis,emotion-cause-extraction,emotion-cause-pair-extraction,large-language-models,llm,open-domain,open-domain-sentiment-analysis,polarity-shifting,sentiment-analysis
GitHub 星标★ 54
上线时间2023-02-28 00:00:00
代码更新2024-09-23
仓库体积6.9 MB
本站数据更新2026-11-10
维护状态低维护
收录时间2026-08-09
浏览次数8

项目介绍

这是一个针对ChatGPT情感理解能力的初步评测项目。它通过一系列测试用例，评估ChatGPT能否准确理解文本中的观点、情感和情绪。项目提供了标准化的评测流程和数据集，帮助研究者和开发者量化ChatGPT在情感分析任务上的表现，并对比其与人类判断的差异。核心能力包括：构建情感标注测试集、设计评测指标、自动化运行评测并输出结果。目前处于早期阶段，代码和文档相对简洁。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化，观测越久曲线越完整

数据来源：GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 54

核心亮点

  • 聚焦ChatGPT情感理解这一具体能力，评测目标明确
  • 提供可复现的评测流程，便于对比不同模型版本
  • 代码简洁，易于扩展新的测试用例

不足之处

  • 测试集规模较小，覆盖场景有限
  • 文档和社区支持待观察

适用场景

  • 评估ChatGPT在客服场景中的情感识别能力
  • 对比不同AI模型的情感分析准确率
  • 为情感分析任务选择模型提供参考

替代项目

OpenAI Evals、lm-evaluation-harness、SentEval

上一篇：InfiniteBench

下一篇：Awesome-Prompting-on-Vision-Language-Model

同类项目推荐

MarkDiffusion 开源

给扩散模型生成图加水印，统一接口做嵌入、提取与评测

[JMLR] MarkDiffusion: An Open-Source Toolkit for Generative Watermarking of Latent D···

★ 334 2026-10-29
spelltest 开源

用 AI 模拟用户，自动测试你的 LLM 应用，提前发现坑

AI-to-AI Testing | Simulation framework for LLM-based applications

★ 138 2026-08-09
coir 开源

给代码检索模型做全面体检，一张卷子测出真实力。

(ACL 2025 Main) A Comprehensive Benchmark for Code Information Retrieval.

★ 157 2026-08-09
gpt_jailbreak_status 开源

追踪 GPT 越狱动态，掌握 AI 安全薄弱点

This is a repository that aims to provide updates on the status of jailbreaking the ···

★ 931 2026-08-09
contextcheck 开源

用 YAML 配置测试用例，把 LLM 测试塞进 CI 流水线，自动跑完收工。

MIT-licensed Framework for LLMs, RAGs, Chatbots testing. Configurable via YAML and i···

★ 98 2026-08-09
SREGym 开源

用真实生产事故考题，测出 AI Agent 会不会排障

Can AI agents resolve production incidents?

★ 407 2026-09-12
aws-bench 开源

给AI智能体在真实AWS云上打分的基准测试

aws-bench measures how well AI agents and model combinations perform on real AWS wor···

★ 145 2026-08-09
FDAbench 开源

给数据智能体打分，看谁更会分析异构数据

[KDD’26] Official repository for the paper “FDABench: A Benchmark for Data Agents ···

★ 84 2026-08-09
llamator 开源

给聊天机器人找茬，提前揪出安全漏洞

Red Teaming python-framework for testing chatbots and GenAI systems.

★ 225 2026-08-09