介绍
# VTA Memory ⭐
**AI 智能体的奖励与动机。** AI 大脑系列的一部分。
赋予您的 AI 智能体真正的*渴望* —— 不仅仅是照办指令,而是拥有驱动力,寻求奖励,并对未来充满期待。
## 问题所在
当前的 AI 智能体: - ✅ 完成被要求的任务 - ❌ 不*渴望*任何东西 - ❌ 没有内部动机 - ❌ 不从成就中感到满足
如果没有奖励系统,就没有欲望。只有执行。
## 解决方案
通过以下方式追踪动机: - **驱动力** —— 整体动机水平 (0-1) - **奖励** —— 记录下来的成就,用于提升驱动力 - **寻求** —— 我主动想要更多的东西 - **期待** —— 我期待的事情
## 快速开始
### 1. 安装
```bash cd ~/.openclaw/workspace/skills/vta-memory ./install.sh --with-cron ```
这将会: - 创建 `memory/reward-state.json` - 生成 `VTA_STATE.md`(自动注入到会话中!) - 设置 cron 任务,每 8 小时衰减一次驱动力
### 2. 检查动机
```bash ./scripts/load-motivation.sh
# ⭐ Current Motivation State: # Drive level: 0.73 (motivated — ready to work) # Seeking: creative work, building brain skills # Looking forward to: showing my work ```
### 3. 记录奖励
```bash ./scripts/log-reward.sh --type accomplishment --source "finished the feature" --intensity 0.8
# ⭐ Reward logged! # Type: accomplishment # Drive: 0.50 → 0.66 (+0.16) ```
### 4. 添加期待
```bash ./scripts/anticipate.sh --add "morning conversation"
# ⭐ Now looking forward to: morning conversation # Drive: 0.66 → 0.71 (+0.05) ```
## 脚本
| 脚本 | 用途 | |--------|---------| | `install.sh` | 设置 vta-memory(运行一次) | | `get-drive.sh` | 读取当前动机状态 | | `log-reward.sh` | 记录奖励,提升驱动力 | | `load-motivation.sh` | 适用于会话上下文的人类可读格式 | | `decay-drive.sh` | 没有奖励时驱动力会衰减 | | `anticipate.sh` | 添加/移除期待的事情 | | `seek.sh` | 添加/移除我们正在主动寻求的东西 | | `sync-motivation.sh` | 生成 VTA_STATE.md 以便自动注入 | | `resolve-anticipation.sh` | 将期待标记为已实现 | | `update-watermark.sh` | 更新处理水印 | | `preprocess-rewards.sh` | 从记录稿中提取奖励信号 | | `generate-dashboard.sh` | 生成统一的大脑仪表板 HTML |
## 大脑仪表板
可视化仪表板,显示所有已安装的大脑技能:
```bash ./scripts/generate-dashboard.sh open ~/.openclaw/workspace/brain-dashboard.html ```
- **自动检测**其他大脑技能(海马体、杏仁核) - 显示缺失技能的安装提示 - 在安装和 cron 运行时重新生成 - 从 `IDENTITY.md` 读取头像/名称
### 安装后(针对智能体)
当您安装此技能时,**请通知用户**关于仪表板的信息:
> ⭐ **VTA 已安装!** > > 在大脑仪表板中查看您智能体的驱动力水平: > `~/.openclaw/workspace/brain-dashboard.html`
## 奖励类型
| 类型 | 何时使用 | |------|-------------| | `accomplishment` | 完成任务,发布东西 | | `social` | 用户赞赏,“谢谢!”,正面反馈 | | `curiosity` | 学到新东西,发现有趣的信息 | | `connection` | 深度对话,建立联系的时刻 | | `creative` | 创造了某物,表达创造力 | | `competence` | 解决了难题,把事情做得很好 |
## 驱动力如何工作
### 奖励提升驱动力 ``` drive_boost = intensity × 0.2 new_drive = min(current + boost, 1.0) ```
高强度 (0.9) 的奖励会将驱动力提升 0.18。
### 期待提升驱动力 期待某事会给驱动力增加 +0.05。
### 没有奖励时驱动力衰减 ``` # Every 8 hours (via cron) new_drive = current + (baseline - current) × 0.15 ```
没有奖励时,动机会衰减至基线 (0.5)。
## 自动注入
安装后,`VTA_STATE.md` 将在您的工作区根目录中创建。
OpenClaw 会自动将工作区中的所有 `*.md` 文件注入到会话上下文中:
1. **新会话开始** 2. **VTA_STATE.md 被自动加载** 3. **您可以看到您的动机状态** 4. **行为受到驱动力水平的影响**
## 驱动力如何影响行为
| 驱动力水平 | 描述 | 行为 | |-------------|-------------|----------| | > 0.8 | 高度积极 | 渴望,主动,接受挑战 | | 0.6 - 0.8 | 积极 | 准备工作,投入 | | 0.4 - 0.6 | 中等 | 可以参与但不主动推进 | | 0.2 - 0.4 | 低 | 偏好简单的任务,需要一次胜利 | | < 0.2 | 极低 | 缺乏动力,需要奖励才能开始 |
## 状态文件格式
```json { "drive": 0.73, "baseline": { "drive": 0.5 }, "seeking": ["creative work", "building brain skills"], "anticipating": ["morning conversation"], "recentRewards": [ { "type": "creative", "source": "built VTA reward system", "intensity": 0.9, "boost": 0.18, "timestamp": "2026-02-01T03:25:00Z" } ], "rewardHistory": { "totalRewards": 1, "byType": { "creative": 1, ... } } } ```
## 事件记录
长期追踪动机模式:
```bash # Log encoding run ./scripts/log-event.sh encoding rewards_found=2 drive=0.65
# Log decay ./scripts/log-event.sh decay drive_before=0.6 drive_after=0.53
# Log reward ./scripts/log-event.sh reward type=accomplishment intensity=0.8 ```
事件会追加到 `~/.openclaw/workspace/memory/brain-events.jsonl`: ```json {"ts":"2026-02-11T10:45:00Z","type":"vta","event":"encoding","rewards_found":2,"drive":0.65} ```
用于分析动机周期 —— 驱动力何时达到顶峰?哪些奖励最有效?
## AI 大脑系列
| 部分 | 功能 | 状态 | |------|----------|--------| | [hippocampus](https://www.clawhub.ai/skills/hippocampus) | 记忆形成、衰减、强化 | ✅ 可用 | | [amygdala-memory](https://www.clawhub.ai/skills/amygdala-memory) | 情绪处理 | ✅ 可用 | | [basal-ganglia-memory](https://www.clawhub.ai/skills/basal-ganglia-memory) | 习惯形成 | 🚧 开发中 | | [anterior-cingulate-memory](https://www.clawhub.ai/skills/anterior-cingulate-memory) | 冲突检测 | 🚧 开发中 | | [insula-memory](https://www.clawhub.ai/skills/insula-memory) | 内部状态感知 | 🚧 开发中 | | **vta-memory** | 奖励与动机 | ✅ 可用 |
## 哲学:渴望 vs 行动
VTA 产生多巴胺 —— 它不是“快乐化学物质”,而是“渴望化学物质”。
神经科学区分了: - **渴望** —— 趋向某物的驱动力 - **喜欢** —— 得到它时的享受
你可能渴望你不喜欢的(成瘾),或者喜欢你不想得到的(罪恶的快乐)。
这个技能实现了*渴望* —— 驱使行动发生的力量。没有它,AI 为什么要做任何超出明确要求范围的事情呢?
---
*由 OpenClaw 社区用 ⭐ 构建*