LINE の AI 秘書に専用の Obsidian を持たせて、会話を全部覚えさせた
はじめに
LINE で話せる AI の秘書を2つ作りました。中の AI が Claude のものと、Codex(OpenAI)のものです(LINE で AI の秘書を作ってみた ― Hermes Agent を家のサーバーから LINE につなぐ、LINE の AI 秘書を Codex 版でもう1つ作り、Claude の意見も聞けるようにした)。
しばらく使って、物足りないところが見えてきました。秘書なのに、前に話したことを覚えていないのです。
AI の Bot を動かしている Hermes Agent は、「使ううちに覚えて育つ」のが売りです。それなのに、記憶のファイルを見ると空でした。
調べて分かったのは、Hermes Agent の「覚える」は、秘書に覚えてほしいこととは別物だということです。そこで、秘書には Obsidian(メモのアプリ)の専用の保管庫 を持たせ、LINE の会話を全部残して、そこから探して答えるようにしました。
- 試した版:Hermes Agent v0.23.1、Obsidian 1.15.1(2026年11月時点)
- 動かした場所:家のサーバーの、AI 用の仮想マシン(Ubuntu 24.04)
Hermes Agent の「覚える」は、秘書の記憶とは違う
Hermes Agent の記憶は、次の2つです。
| 記憶 | 中身 | 大きさ |
|---|---|---|
| 自分のメモ | 環境のこと・作業のコツなど、Bot が仕事をうまくこなすためのメモ | 2,200文字まで(初期設定) |
| 利用者のメモ | 話し方の好みなど | 1,375文字まで(初期設定) |
どちらも、何を残すかは AI が決めます。「覚えておく価値がある」と判断したときだけ書くので、雑談や予定の話はほとんど残りません。私の Bot も、記憶のファイルは空のままでした。
これは、Bot が賢くなるための記憶です。秘書に求めるのは、言ったことを全部メモしておいて、聞かれたら探して答えることです。人の秘書も、手帳に全部書いておいて、それを見て答えます。
もう1つ、Hermes Agent には前の会話を探す機能もあります。ただ、それは Hermes の中のデータベースにしまわれていて、自分で読み返したり手で直したりするのには向きません。
そこで、秘書の記録は Obsidian に置くことにしました。Obsidian ならただの Markdown のファイルなので、自分でも読めて、探せて、直せます。
作った仕組み

AI 用の仮想マシンでは、もともと Obsidian を動かしていました。そこに秘書専用の保管庫(Vault)を新しく作りました。中はこう分けています。
LINE秘書/
├── はじめに.md
├── 執事/ ← Codex 版の秘書
│ ├── 会話/2026-11-19.md LINE のやりとりの全部(日ごと)
│ ├── まとめ/2026-11-19.md その日の要点
│ └── メモ/予定.md など 頼まれて残すメモ
└── 秘書/ ← Claude 版の秘書(中は同じ)
1. 会話は、仕組みで全部残す
いちばん大事なのは「全部残す」ことです。何を残すかを AI に任せると、必ず残し漏れが出ます。
そこで、AI とは別の小さなプログラムを2分ごとに動かしています。Hermes Agent のデータベースから LINE のやりとり(自分の発言と秘書の返事)を取り出し、日ごとのノートに書き足します。作る前の 11/17 からの会話も、まとめて書き出せました。
2. 毎日のまとめと、頼まれたメモ
- まとめ:毎晩 23:50 に、秘書自身にその日の会話を読ませ、要点を「予定・約束」「頼まれたこと」「覚えておくこと」の見出しで書かせます。試しに前日の分を作らせたら、25秒で旅行の予定や店の場所が整理されました。
- メモ:予定・頼まれごと・好み・人の名前などが出たら、秘書が
メモ/の中のノートに要点を書き足します。返事の最後に「(メモしました)」と付けます。
3. 思い出すとき
「前に言った〇〇は?」と聞かれたら、秘書は次の順で探します。
- 秘書の保管庫(会話・まとめ・メモ)を探す。言葉を変えて2〜3回
- 見つからなければ、ふだん使っている Obsidian(メモや日記の保管庫)も探す(読むだけ)
- どちらにも無ければ「記録に見当たらない」と答える。推測で埋めない
答えには「11/18 の会話から」のように、どの記録から答えたかを添えさせます。
秘書には、消させない
秘書は AI なので、まちがった指示に従ってしまうことがあります。そこで、保管庫のファイルを秘書が直接さわれないようにしました。
- 保管庫のファイルは、別の専用ユーザーのものにする。秘書のユーザーでは、ファイルを直接は読めない
- 秘書は、小さな窓口(仮想マシンの中だけで受け付ける、鍵付きの HTTP)を通してだけ使う。窓口で通すのは「読む・一覧・探す・追記」の4つだけ
- 追記できるのは
執事/・秘書/の下だけ。会話/には書けない(会話の記録は仕組みだけが書く) - 上書きと削除は、どこにもできない
試したところ、会話の記録への追記・保管庫の外への書き込み・削除は、すべて窓口で断られました。
秘書が使うのは、hisho という小さなコマンドです。
hisho search "札幌 ホテル" 探す(新しいノートから順に)
hisho read "執事/会話/2026-11-18.md" 読む
hisho today 執事 今日の会話
printf "%s" "本文" | hisho append "執事/メモ/予定.md" 追記(無ければ作る)
保管庫は Google ドライブで同期していないので、毎日の控え(30日分)も取っています。
「メモしないで」も効くようにした
全部を残すと、残したくない話まで残ります。そこで、「メモしないで」「記録しないで」「オフレコ」と言ったやりとりは、会話の記録に中身を残さず「記録しない指定」とだけ書くようにしました。
ただし、Hermes Agent 自身のデータベースには残ります。消えるのは、保管庫の中身だけです。パスワードやカードの番号は、頼まれても書かない決まりにしています。
使ってみた
前の日に話した札幌の予定を聞いてみました。

- ホテルの場所と食事会の予約者を、「11/18 の会話記録から」と言って答えた
- 「日曜の朝9時の町内会のクリーン作戦を覚えておいて」には、日付を 11/22 に直して「(メモしました)」と返した。メモのノートにも入っていた
思い出すのも、メモするのも、ねらいどおりに動きました。
つまずき:AI の利用上限に届いた
このすぐ後、Codex 版の秘書が「AI モデルサービスがリクエストをレート制限しています。少し待ってから /retry を使ってください。」と返してきました。
ChatGPT のプランの利用上限です。原因の1つは、会話の長さでした。秘書は 11/17 から同じ会話をずっと続けていて、短い一言にも、過去のやりとり約100件分(約15万トークン)を毎回 AI に送っていました。同じ日に動画づくりで Codex をたくさん使っていたので、それも重なったようです。
上限は時間がたてば戻るので、戻ってから /retry を送れば続きから答えます。待つ間は、Claude 版の秘書を使えば話せます。
そこで、秘書の会話を 毎朝4時で区切って新しくする ようにしました。前の話は保管庫から探せるので、会話を新しくしても困りません。保管庫に全部残しているからこそ、できることです。
ところが、Hermes Agent の本体からは、この「時間で区切る」機能がすでに外されていました(いまは /new で手で区切るだけ)。続けて使うには、カタログのプラグイン hermes-session-reset-policy を入れます。他の人が作ったもの(community)なので、入れる前に中身を読みました。外への通信もコマンドの実行もなく、/new と同じ処理で区切るだけのものでした。
hermes -p 〈プロファイル〉 plugins install hermes-session-reset-policy
hermes plugins enable hermes-session-reset-policy
プロファイルの config.yaml に、次を書きます。
session_reset:
mode: daily
at_hour: 4
注意:いくつものプロファイルを1つの Gateway でまとめて動かしているときは、起動元(default)のプロファイルでもプラグインを有効にする必要がありました。有効にしていないと、Gateway の記録に「session_reset は使われていない」という警告が出ます。
まとめ
- Hermes Agent の「覚える」は、Bot が賢くなるための小さなメモ。秘書の記憶には向かない
- 秘書には専用の Obsidian の保管庫を持たせ、会話は仕組みで全部残し、探して答えさせる
- 秘書には「読む・探す・追記」だけを許し、消させない
- 全部残しているので、会話を毎朝新しくしても困らない。AI の利用上限にも届きにくくなる

