git.giacomolli.uk - onechat/blob - README.rst

   1 #########
   2  OneChat
   3 #########
   4
   5 OneChat is one AI agent in a single chat that never ends. A daemon owns
   6 the agent and its files, and a terminal client and a Telegram bot talk
   7 to it. It is in early development. Linux is supported.
   8
   9 ****************
  10  Data directory
  11 ****************
  12
  13 OneChat keeps its data and its token file in one directory. It uses the
  14 first of these:
  15
  16 #. ``ONECHAT_DIR``, when it is set.
  17 #. ``$XDG_DATA_HOME/onechat``, when ``XDG_DATA_HOME`` is an absolute
  18    path. A relative value is ignored.
  19 #. ``~/.local/share/onechat``. With no home directory, OneChat exits
  20    with an error.
  21
  22 OneChat creates the directory with mode 0700.
  23
  24 ***************
  25  Configuration
  26 ***************
  27
  28 ``config.json`` in the data directory holds the settings. OneChat does
  29 not create it. A missing file or field takes the default, and an unknown
  30 field is an error.
  31
  32 .. code:: json
  33
  34    {
  35      "endpoint": "chatgpt",
  36      "compactor": {"model": "gpt-6.1-sol", "effort": "high"}
  37    }
  38
  39 ``endpoint``
  40    ``chatgpt`` (the default) sends model calls to the ChatGPT backend
  41    with the subscription login. ``api`` sends them to the OpenAI API
  42    with the key in ``OPENAI_API_KEY``, which must then be set. With
  43    ``chatgpt``, OneChat ignores ``OPENAI_API_KEY``.
  44
  45 ``compactor``
  46    The model and the reasoning effort of the summaries. The defaults are
  47    ``gpt-6.1-sol`` and ``high``.
  48
  49 *******
  50  Login
  51 *******
  52
  53 The ``chatgpt`` endpoint needs a login with a ChatGPT account:
  54
  55 .. code:: console
  56
  57    onechat login
  58
  59 The command shows a link and a code. Open the link on any device, enter
  60 the code, and approve the login. Device code login must be allowed in
  61 the ChatGPT security settings. OneChat writes the tokens to
  62 ``auth.json`` in the data directory, with mode 0600, and refreshes them
  63 before they expire. The file belongs to OneChat only. Do not share it
  64 with the Codex CLI, because each program rotates the refresh token and
  65 logs the other out.
  66
  67 *******
  68  Agent
  69 *******
  70
  71 Start the daemon, and then the client in another terminal:
  72
  73 .. code:: console
  74
  75    onechat daemon
  76    onechat chat
  77
  78 The daemon owns the root agent in ``agent/`` in the data directory and
  79 listens on the Unix socket ``onechat.sock`` there. In the client, each
  80 line is a message to the agent, the line ``/stop`` interrupts the
  81 running turn, and Ctrl-D ends the client. The client shows the replies,
  82 the tool calls, and the first lines of each tool result as they happen.
  83 It also shows each message that the user sends from another client, with
  84 the client as a mark, such as ``[telegram] text``. The daemon is the
  85 only process that uses the token file while it runs, so ``onechat
  86 login`` and ``onechat probe`` refuse to start until it stops.
  87
  88 The agent runs commands with bash as the user in its working directory,
  89 with no sandbox. It has the rights of the user, also on the token file.
  90
  91 When the user asks for it, the agent starts subagents for long tasks.
  92 Each subagent has a name, such as ``GreenOtter``, and runs in the
  93 background while the agent answers other messages. It gets the view of
  94 the agent and its task, and it runs its tools as the agent does, in
  95 ``agent/subagents/NAME/work``. A task in a repository gives the path of
  96 the repository. The steps of a subagent go to its own log in
  97 ``agent/subagents/NAME``, not to the chat, and its final reply comes
  98 back to the agent as one message that starts with ``[NAME]``. Each model
  99 call of a subagent has the name in the ``agent`` field of
 100 ``agent/usage.jsonl``.
 101
 102 ``agent/config.json`` holds the settings of the agent. The first start
 103 writes it with the defaults and a random ID. Do not change the ID: the
 104 prompt cache key comes from it.
 105
 106 .. code:: json
 107
 108    {
 109      "name": "OneChat",
 110      "id": "0123456789abcdef0123456789abcdef",
 111      "model": "gpt-6.1-sol",
 112      "effort": "medium",
 113      "workdir": "/home/user"
 114    }
 115
 116 ``workdir`` is an absolute path, and its default is the home directory.
 117 ``agent/instructions.md`` holds the user's instructions: who they are,
 118 how their files are organized, and how they want work done. The prompt
 119 ends with them, and a change applies at the next call.
 120
 121 **********
 122  Telegram
 123 **********
 124
 125 The daemon also connects the agent to a Telegram bot when
 126 ``telegram.json`` exists in the data directory. It polls the Bot API for
 127 new messages, so it needs no open port.
 128
 129 #. Make a bot with BotFather and keep its token.
 130
 131 #. Find your numeric Telegram user ID.
 132
 133 #. Write the token and the ID to ``telegram.json``, and give the file
 134    mode 0600, because the token is a secret. The daemon refuses the file
 135    with any other mode.
 136
 137 #. Start the daemon, open a private chat with the bot, and write.
 138
 139 .. code:: json
 140
 141    {"token": "123456:ABC-token-from-BotFather", "owner": 123456789}
 142
 143 The bot reads only the private chat of the owner and ignores all other
 144 updates. Each text message goes to the agent as a user message, and the
 145 line ``/stop`` interrupts the running turn. The bot sends the replies in
 146 parts of at most 4096 characters, with their Markdown as Telegram
 147 formats: bold, italic, strikethrough, code, code blocks, links, and
 148 headings as bold text. When Telegram refuses the formats of a part, the
 149 bot sends the part again as plain text. Each error goes as a short
 150 message in plain text. It shows the typing action while a turn runs. It
 151 does not send the tool calls. It sends each message that the user types
 152 in the terminal client, with the mark ``[terminal]``.
 153
 154 ``agent/telegram-offset.json`` holds the ID of the next update. The bot
 155 moves it past an update only after the message is durable in the log, so
 156 a restart of the daemon does not lose a message. A crash just after the
 157 write of a message can make the message repeat once. A network failure
 158 or a rate limit makes the bot wait and try again, and does not stop the
 159 daemon.
 160
 161 *******
 162  Probe
 163 *******
 164
 165 ``onechat probe LOG COUNT [BUILDS]`` measures the compactor on a log. It
 166 appends the first COUNT messages of LOG, one JSON object ``{"kind",
 167 "text"}`` on each line, to a new chat in ``probe/`` in the data
 168 directory, and builds its tree with real model calls. The calls use the
 169 quota of the account. The run stops at the first failed call, after 660
 170 calls, or when the used percent of a quota window grows by more than 15
 171 points. At the end it reports the calls per message, the cached share of
 172 the input tokens, the retries, the line sizes, and the quota at the
 173 first and the last call. BUILDS, from 1 to 8, limits the model calls at
 174 once in the run.
 175
 176 A test writes a generated log of readable made-up messages:
 177
 178 .. code:: console
 179
 180    ONECHAT_PROBE_LOG=probe.jsonl go test -run TestProbeLogHasTheSyntheticMix
 181
 182 *************
 183  Development
 184 *************
 185
 186 Nix supplies the Go toolchain and all tools. Enter the development shell
 187 with direnv:
 188
 189 .. code:: console
 190
 191    direnv allow
 192
 193 Or enter it directly:
 194
 195 .. code:: console
 196
 197    nix develop
 198
 199 The shell sets ``ONECHAT_DIR`` to ``.devenv/onechat`` in the checkout,
 200 unless it is already set. Development data goes there, and Git ignores
 201 ``.devenv``.
 202
 203 Build and run:
 204
 205 .. code:: console
 206
 207    nix build
 208    ./result/bin/onechat
 209
 210 Format and check all files:
 211
 212 .. code:: console
 213
 214    bin/format
 215    bin/check
 216    nix flake check
 217
 218 ``bin/check`` and ``nix build`` run a short replay of the synthetic log.
 219 ``nix flake check`` also runs the full replay of 100,000 messages.