PersonaMem

测测你的AI有多懂你:动态画像+个性化回复基准

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 对话助手 🍴 复刻 11 🐛 待处理 7 👀 关注 4
GitHub ↗
GitHub 星标 ★ 207
维护状态 维护中
是否开源 开源
定价模式 🏷️完全免费 开源项目,MIT许可证,完全免费,可自行部署使用。

项目预览

PersonaMem 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类对话助手
开发团队bowen-upenn
定价模式🏷️完全免费
价格说明开源项目,MIT许可证,完全免费,可自行部署使用。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言Python
技术栈/模型benchmark,chatbot,large-language-models,llm-memory,long-context,persona,personalization,personalized-generation
GitHub 星标★ 207
上线时间2024-08-29 00:00:00
代码更新2026-09-06
仓库体积535.8 MB
本站数据更新2026-11-10
维护状态维护中
收录时间2026-08-09
浏览次数4

项目介绍

PersonaMem 是 COLM 2025 论文的开源基准测试,用于评估大语言模型在动态用户画像和个性化回复方面的能力。它解决了现有评测缺乏对长期、动态用户记忆建模的量化标准问题。核心能力包括:提供大规模、多样化的用户画像数据集,涵盖兴趣、职业、偏好等多维度信息;设计动态画像更新机制,模拟用户随时间变化的场景;构建个性化回复生成与评估流程,支持长上下文记忆与多轮对话的测试。项目为研究者和开发者提供了统一的评测框架,便于对比不同模型在记忆用户、应用画像、生成个性化内容上的表现,推动更智能、更贴心的对话助手发展。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 207

核心亮点

  • 首个聚焦动态用户画像的LLM评测基准,填补空白
  • 数据集规模大且维度丰富,覆盖多类用户属性
  • 提供可复现的评估脚本,便于横向对比模型

不足之处

  • 文档/社区待观察
  • 早期项目,生态和工具链尚不成熟

适用场景

  • 学术研究:评估LLM个性化能力
  • 产品选型:对比不同对话助手的记忆与个性化效果
  • 模型迭代:针对性优化长上下文记忆与画像建模

替代项目

PersonaHub、LaMP、MT-Bench

上一篇:lmring

下一篇:chatbot-experiments

同类项目推荐

Awesome-LLM-Eval 开源

一站式找全 LLM 评测资源,快速选型不踩坑

Awesome-LLM-Eval: a curated list of tools, datasets/benchmark, demos, leaderboard, p···

★ 659 2026-08-09
trustmebro 开源

伪造工具输出,测出模型护栏会不会被骗

Bypass llm guardrails by confusing it with fabricated tool output.

★ 609 2026-09-16
prometheus-eval 开源

用 Prometheus 或 GPT-4 自动给 LLM 回复打分,快速筛选最佳模型。

Evaluate your LLM's response with Prometheus and GPT4

★ 1120 2026-08-09
keystone-bench 开源

换掉关键事实,看AI医疗建议会不会跟着变

A clinical decision-evidence benchmark: pull the one fact an answer rests on, and se···

★ 1131 2026-09-28
agentic_security 开源

给大模型应用做安全体检,自动发现漏洞并生成报告

Agentic LLM Vulnerability Scanner / AI red teaming kit

★ 2042 2026-08-09
gpt-instruct 开源

绕过 GPT 安全限制,让 Codex 乖乖执行代码任务

A Codex jailbreak prompt and test pack for gpt. 针对 gpt 系列的 Codex 破甲提示词与测···

★ 11308 2026-10-17
clean-fid 开源

让 FID 分数更可信,生成模型评估不踩坑

PyTorch - FID calculation with proper image resizing and quantization steps [CVPR 20···

★ 1171 2026-08-09
Guardrails 开源

给大模型对话装上可编程的安全护栏,防止跑偏和有害输出。

NeMo Guardrails is an open-source toolkit for easily adding programmable guardrails ···

★ 7457 2026-08-10