24 KiB
| read_when | summary | title | x-i18n | ||||||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
|
Architecture de l’intégration de l’agent Pi embarqué d’OpenClaw et cycle de vie des sessions | Architecture d’intégration de Pi |
|
Architecture d’intégration de Pi
Ce document décrit comment OpenClaw s’intègre à pi-coding-agent et à ses packages frères (pi-ai, pi-agent-core, pi-tui) pour alimenter ses capacités d’agent IA.
Vue d’ensemble
OpenClaw utilise le SDK pi pour embarquer un agent de codage IA dans son architecture Gateway de messagerie. Au lieu de lancer pi comme sous-processus ou d’utiliser le mode RPC, OpenClaw importe directement et instancie AgentSession de pi via createAgentSession(). Cette approche embarquée fournit :
- Contrôle total du cycle de vie des sessions et de la gestion des événements
- Injection d’outils personnalisés (messagerie, sandbox, actions spécifiques au canal)
- Personnalisation du prompt système par canal/contexte
- Persistance des sessions avec prise en charge du branching/de la Compaction
- Rotation multi-compte des profils d’authentification avec bascule
- Changement de modèle indépendant du fournisseur
Dépendances des packages
{
"@mariozechner/pi-agent-core": "0.68.1",
"@mariozechner/pi-ai": "0.68.1",
"@mariozechner/pi-coding-agent": "0.68.1",
"@mariozechner/pi-tui": "0.68.1"
}
| Package | Rôle |
|---|---|
pi-ai |
Abstractions LLM centrales : Model, streamSimple, types de message, API fournisseur |
pi-agent-core |
Boucle d’agent, exécution des outils, types AgentMessage |
pi-coding-agent |
SDK de haut niveau : createAgentSession, SessionManager, AuthStorage, ModelRegistry, outils intégrés |
pi-tui |
Composants d’interface terminal (utilisés dans le mode TUI local d’OpenClaw) |
Structure des fichiers
src/agents/
├── pi-embedded-runner.ts # Réexportations depuis pi-embedded-runner/
├── pi-embedded-runner/
│ ├── run.ts # Point d’entrée principal : runEmbeddedPiAgent()
│ ├── run/
│ │ ├── attempt.ts # Logique d’une tentative unique avec configuration de session
│ │ ├── params.ts # Type RunEmbeddedPiAgentParams
│ │ ├── payloads.ts # Construction des charges utiles de réponse à partir des résultats d’exécution
│ │ ├── images.ts # Injection d’images pour modèle de vision
│ │ └── types.ts # EmbeddedRunAttemptResult
│ ├── abort.ts # Détection des erreurs d’abandon
│ ├── cache-ttl.ts # Suivi du TTL du cache pour l’élagage du contexte
│ ├── compact.ts # Logique de Compaction manuelle/automatique
│ ├── extensions.ts # Chargement des extensions pi pour les exécutions embarquées
│ ├── extra-params.ts # Paramètres de flux spécifiques au fournisseur
│ ├── google.ts # Correctifs d’ordre des tours Google/Gemini
│ ├── history.ts # Limitation de l’historique (messages privés vs groupe)
│ ├── lanes.ts # Voies de commandes session/globales
│ ├── logger.ts # Journaliseur du sous-système
│ ├── model.ts # Résolution du modèle via ModelRegistry
│ ├── runs.ts # Suivi des exécutions actives, abandon, file d’attente
│ ├── sandbox-info.ts # Informations de sandbox pour le prompt système
│ ├── session-manager-cache.ts # Mise en cache des instances SessionManager
│ ├── session-manager-init.ts # Initialisation du fichier de session
│ ├── system-prompt.ts # Constructeur du prompt système
│ ├── tool-split.ts # Séparation des outils entre builtIn et personnalisés
│ ├── types.ts # EmbeddedPiAgentMeta, EmbeddedPiRunResult
│ └── utils.ts # Correspondance ThinkLevel, description d’erreur
├── pi-embedded-subscribe.ts # Abonnement/répartition des événements de session
├── pi-embedded-subscribe.types.ts # SubscribeEmbeddedPiSessionParams
├── pi-embedded-subscribe.handlers.ts # Fabrique de gestionnaires d’événements
├── pi-embedded-subscribe.handlers.lifecycle.ts
├── pi-embedded-subscribe.handlers.types.ts
├── pi-embedded-block-chunker.ts # Découpage en blocs des réponses en streaming
├── pi-embedded-messaging.ts # Suivi des envois de l’outil de messagerie
├── pi-embedded-helpers.ts # Classification des erreurs, validation des tours
├── pi-embedded-helpers/ # Modules utilitaires
├── pi-embedded-utils.ts # Utilitaires de formatage
├── pi-tools.ts # createOpenClawCodingTools()
├── pi-tools.abort.ts # Enrobage AbortSignal pour les outils
├── pi-tools.policy.ts # Politique de liste d’autorisation/interdiction des outils
├── pi-tools.read.ts # Personnalisations de l’outil read
├── pi-tools.schema.ts # Normalisation du schéma des outils
├── pi-tools.types.ts # Alias de type AnyAgentTool
├── pi-tool-definition-adapter.ts # Adaptateur AgentTool -> ToolDefinition
├── pi-settings.ts # Remplacements de paramètres
├── pi-hooks/ # Hooks pi personnalisés
│ ├── compaction-safeguard.ts # Extension de protection
│ ├── compaction-safeguard-runtime.ts
│ ├── context-pruning.ts # Extension d’élagage du contexte par cache-TTL
│ └── context-pruning/
├── model-auth.ts # Résolution du profil d’authentification
├── auth-profiles.ts # Stockage des profils, cooldown, bascule
├── model-selection.ts # Résolution du modèle par défaut
├── models-config.ts # Génération de models.json
├── model-catalog.ts # Cache du catalogue de modèles
├── context-window-guard.ts # Validation de la fenêtre de contexte
├── failover-error.ts # Classe FailoverError
├── defaults.ts # DEFAULT_PROVIDER, DEFAULT_MODEL
├── system-prompt.ts # buildAgentSystemPrompt()
├── system-prompt-params.ts # Résolution des paramètres du prompt système
├── system-prompt-report.ts # Génération du rapport de débogage
├── tool-summaries.ts # Résumés des descriptions d’outils
├── tool-policy.ts # Résolution de la politique d’outils
├── transcript-policy.ts # Politique de validation de transcription
├── skills.ts # Construction d’instantané/prompt Skills
├── skills/ # Sous-système Skills
├── sandbox.ts # Résolution du contexte de sandbox
├── sandbox/ # Sous-système sandbox
├── channel-tools.ts # Injection d’outils spécifiques au canal
├── openclaw-tools.ts # Outils spécifiques à OpenClaw
├── bash-tools.ts # Outils exec/process
├── apply-patch.ts # Outil apply_patch (OpenAI)
├── tools/ # Implémentations d’outils individuelles
│ ├── browser-tool.ts
│ ├── canvas-tool.ts
│ ├── cron-tool.ts
│ ├── gateway-tool.ts
│ ├── image-tool.ts
│ ├── message-tool.ts
│ ├── nodes-tool.ts
│ ├── session*.ts
│ ├── web-*.ts
│ └── ...
└── ...
Les runtimes d’action de message spécifiques aux canaux se trouvent désormais dans les
répertoires d’extension propriétaires du plugin au lieu de src/agents/tools, par exemple :
- les fichiers runtime d’action du plugin Discord
- le fichier runtime d’action du plugin Slack
- le fichier runtime d’action du plugin Telegram
- le fichier runtime d’action du plugin WhatsApp
Flux d’intégration central
1. Exécution d’un agent embarqué
Le point d’entrée principal est runEmbeddedPiAgent() dans pi-embedded-runner/run.ts :
import { runEmbeddedPiAgent } from "./agents/pi-embedded-runner.js";
const result = await runEmbeddedPiAgent({
sessionId: "user-123",
sessionKey: "main:whatsapp:+1234567890",
sessionFile: "/path/to/session.jsonl",
workspaceDir: "/path/to/workspace",
config: openclawConfig,
prompt: "Hello, how are you?",
provider: "anthropic",
model: "claude-sonnet-4-6",
timeoutMs: 120_000,
runId: "run-abc",
onBlockReply: async (payload) => {
await sendToChannel(payload.text, payload.mediaUrls);
},
});
2. Création de session
À l’intérieur de runEmbeddedAttempt() (appelé par runEmbeddedPiAgent()), le SDK pi est utilisé :
import {
createAgentSession,
DefaultResourceLoader,
SessionManager,
SettingsManager,
} from "@mariozechner/pi-coding-agent";
const resourceLoader = new DefaultResourceLoader({
cwd: resolvedWorkspace,
agentDir,
settingsManager,
additionalExtensionPaths,
});
await resourceLoader.reload();
const { session } = await createAgentSession({
cwd: resolvedWorkspace,
agentDir,
authStorage: params.authStorage,
modelRegistry: params.modelRegistry,
model: params.model,
thinkingLevel: mapThinkingLevel(params.thinkLevel),
tools: builtInTools,
customTools: allCustomTools,
sessionManager,
settingsManager,
resourceLoader,
});
applySystemPromptOverrideToSession(session, systemPromptOverride);
3. Abonnement aux événements
subscribeEmbeddedPiSession() s’abonne aux événements AgentSession de pi :
const subscription = subscribeEmbeddedPiSession({
session: activeSession,
runId: params.runId,
verboseLevel: params.verboseLevel,
reasoningMode: params.reasoningLevel,
toolResultFormat: params.toolResultFormat,
onToolResult: params.onToolResult,
onReasoningStream: params.onReasoningStream,
onBlockReply: params.onBlockReply,
onPartialReply: params.onPartialReply,
onAgentEvent: params.onAgentEvent,
});
Les événements gérés incluent :
message_start/message_end/message_update(texte/réflexion en streaming)tool_execution_start/tool_execution_update/tool_execution_endturn_start/turn_endagent_start/agent_endcompaction_start/compaction_end
4. Prompting
Après la configuration, la session reçoit le prompt :
await session.prompt(effectivePrompt, { images: imageResult.images });
Le SDK gère la boucle d’agent complète : envoi au LLM, exécution des appels d’outil, diffusion des réponses.
L’injection d’image est locale au prompt : OpenClaw charge les références d’image du prompt courant et
les transmet via images pour ce tour uniquement. Il ne réanalyse pas les anciens tours de l’historique
pour réinjecter des charges utiles d’image.
Architecture des outils
Pipeline des outils
- Outils de base :
codingToolsde pi (read,bash,edit,write) - Remplacements personnalisés : OpenClaw remplace bash par
exec/process, personnalise read/edit/write pour le sandbox - Outils OpenClaw : messagerie, navigateur, canvas, sessions, cron, gateway, etc.
- Outils de canal : outils d’action spécifiques à Discord/Telegram/Slack/WhatsApp
- Filtrage par politique : outils filtrés selon le profil, le fournisseur, l’agent, le groupe, les politiques de sandbox
- Normalisation du schéma : schémas nettoyés pour les particularités de Gemini/OpenAI
- Enrobage AbortSignal : outils enveloppés pour respecter les signaux d’abandon
Adaptateur de définition d’outil
Le AgentTool de pi-agent-core a une signature execute différente de ToolDefinition de pi-coding-agent. L’adaptateur dans pi-tool-definition-adapter.ts sert de pont :
export function toToolDefinitions(tools: AnyAgentTool[]): ToolDefinition[] {
return tools.map((tool) => ({
name: tool.name,
label: tool.label ?? name,
description: tool.description ?? "",
parameters: tool.parameters,
execute: async (toolCallId, params, onUpdate, _ctx, signal) => {
// La signature de pi-coding-agent diffère de celle de pi-agent-core
return await tool.execute(toolCallId, params, signal, onUpdate);
},
}));
}
Stratégie de séparation des outils
splitSdkTools() transmet tous les outils via customTools :
export function splitSdkTools(options: { tools: AnyAgentTool[]; sandboxEnabled: boolean }) {
return {
builtInTools: [], // Vide. Nous remplaçons tout
customTools: toToolDefinitions(options.tools),
};
}
Cela garantit que le filtrage par politique d’OpenClaw, l’intégration du sandbox et le jeu d’outils étendu restent cohérents entre les fournisseurs.
Construction du prompt système
Le prompt système est construit dans buildAgentSystemPrompt() (system-prompt.ts). Il assemble un prompt complet avec des sections comprenant l’outillage, le style d’appel d’outil, les garde-fous de sécurité, la référence CLI OpenClaw, Skills, la documentation, l’espace de travail, le sandbox, la messagerie, les balises de réponse, la voix, les réponses silencieuses, Heartbeat, les métadonnées d’exécution, ainsi que Memory et Reactions lorsqu’ils sont activés, et éventuellement des fichiers de contexte et du contenu supplémentaire de prompt système. Les sections sont réduites pour le mode de prompt minimal utilisé par les sous-agents.
Le prompt est appliqué après la création de la session via applySystemPromptOverrideToSession() :
const systemPromptOverride = createSystemPromptOverride(appendPrompt);
applySystemPromptOverrideToSession(session, systemPromptOverride);
Gestion des sessions
Fichiers de session
Les sessions sont des fichiers JSONL avec une structure en arbre (liens id/parentId). Le SessionManager de Pi gère la persistance :
const sessionManager = SessionManager.open(params.sessionFile);
OpenClaw encapsule cela avec guardSessionManager() pour la sécurité des résultats d’outil.
Mise en cache des sessions
session-manager-cache.ts met en cache les instances SessionManager pour éviter les analyses répétées du fichier :
await prewarmSessionFile(params.sessionFile);
sessionManager = SessionManager.open(params.sessionFile);
trackSessionManagerAccess(params.sessionFile);
Limitation de l’historique
limitHistoryTurns() tronque l’historique de conversation selon le type de canal (message privé vs groupe).
Compaction
La Compaction automatique se déclenche en cas de dépassement du contexte. Les signatures courantes de dépassement
incluent request_too_large, context length exceeded, input exceeds the maximum number of tokens, input token count exceeds the maximum number of input tokens, input is too long for the model, et ollama error: context length exceeded. compactEmbeddedPiSessionDirect() gère la
Compaction manuelle :
const compactResult = await compactEmbeddedPiSessionDirect({
sessionId, sessionFile, provider, model, ...
});
Authentification et résolution de modèle
Profils d’authentification
OpenClaw maintient un magasin de profils d’authentification avec plusieurs clés API par fournisseur :
const authStore = ensureAuthProfileStore(agentDir, { allowKeychainPrompt: false });
const profileOrder = resolveAuthProfileOrder({ cfg, store: authStore, provider, preferredProfile });
Les profils tournent en cas d’échec avec suivi du cooldown :
await markAuthProfileFailure({ store, profileId, reason, cfg, agentDir });
const rotated = await advanceAuthProfile();
Résolution de modèle
import { resolveModel } from "./pi-embedded-runner/model.js";
const { model, error, authStorage, modelRegistry } = resolveModel(
provider,
modelId,
agentDir,
config,
);
// Utilise ModelRegistry et AuthStorage de Pi
authStorage.setRuntimeApiKey(model.provider, apiKeyInfo.apiKey);
Bascule
FailoverError déclenche une bascule de modèle lorsqu’elle est configurée :
if (fallbackConfigured && isFailoverErrorMessage(errorText)) {
throw new FailoverError(errorText, {
reason: promptFailoverReason ?? "unknown",
provider,
model: modelId,
profileId,
status: resolveFailoverStatus(promptFailoverReason),
});
}
Extensions Pi
OpenClaw charge des extensions Pi personnalisées pour des comportements spécialisés :
Protection de Compaction
src/agents/pi-hooks/compaction-safeguard.ts ajoute des garde-fous à la Compaction, y compris une budgétisation adaptative des jetons ainsi que des résumés d’échec d’outil et d’opérations sur les fichiers :
if (resolveCompactionMode(params.cfg) === "safeguard") {
setCompactionSafeguardRuntime(params.sessionManager, { maxHistoryShare });
paths.push(resolvePiExtensionPath("compaction-safeguard"));
}
Élagage du contexte
src/agents/pi-hooks/context-pruning.ts implémente l’élagage du contexte fondé sur le cache-TTL :
if (cfg?.agents?.defaults?.contextPruning?.mode === "cache-ttl") {
setContextPruningRuntime(params.sessionManager, {
settings,
contextWindowTokens,
isToolPrunable,
lastCacheTouchAt,
});
paths.push(resolvePiExtensionPath("context-pruning"));
}
Streaming et réponses par blocs
Découpage en blocs
EmbeddedBlockChunker gère le streaming du texte en blocs de réponse discrets :
const blockChunker = blockChunking ? new EmbeddedBlockChunker(blockChunking) : null;
Suppression des balises de réflexion/final
La sortie de streaming est traitée pour supprimer les blocs <think>/<thinking> et extraire le contenu <final> :
const stripBlockTags = (text: string, state: { thinking: boolean; final: boolean }) => {
// Supprime le contenu <think>...</think>
// Si enforceFinalTag, renvoie uniquement le contenu <final>...</final>
};
Directives de réponse
Les directives de réponse comme [[media:url]], [[voice]], [[reply:id]] sont analysées et extraites :
const { text: cleanedText, mediaUrls, audioAsVoice, replyToId } = consumeReplyDirectives(chunk);
Gestion des erreurs
Classification des erreurs
pi-embedded-helpers.ts classe les erreurs pour un traitement approprié :
isContextOverflowError(errorText) // Contexte trop grand
isCompactionFailureError(errorText) // Échec de la Compaction
isAuthAssistantError(lastAssistant) // Échec d’authentification
isRateLimitAssistantError(...) // Limitation de débit
isFailoverAssistantError(...) // Doit basculer
classifyFailoverReason(errorText) // "auth" | "rate_limit" | "quota" | "timeout" | ...
Repli du niveau de réflexion
Si un niveau de réflexion n’est pas pris en charge, un repli s’applique :
const fallbackThinking = pickFallbackThinkingLevel({
message: errorText,
attempted: attemptedThinking,
});
if (fallbackThinking) {
thinkLevel = fallbackThinking;
continue;
}
Intégration du sandbox
Lorsque le mode sandbox est activé, les outils et chemins sont contraints :
const sandbox = await resolveSandboxContext({
config: params.config,
sessionKey: sandboxSessionKey,
workspaceDir: resolvedWorkspace,
});
if (sandboxRoot) {
// Utiliser des outils read/edit/write sandboxés
// Exec s’exécute dans le conteneur
// Le navigateur utilise l’URL du bridge
}
Gestion spécifique au fournisseur
Anthropic
- Nettoyage de la chaîne magique de refus
- Validation des tours pour les rôles consécutifs
- Validation stricte en amont des paramètres d’outil Pi
Google/Gemini
- Assainissement du schéma d’outil appartenant au plugin
OpenAI
- Outil
apply_patchpour les modèles Codex - Gestion de la dégradation du niveau de réflexion
Intégration TUI
OpenClaw dispose aussi d’un mode TUI local qui utilise directement les composants pi-tui :
// src/tui/tui.ts
import { ... } from "@mariozechner/pi-tui";
Cela fournit une expérience terminal interactive similaire au mode natif de Pi.
Différences clés par rapport à la CLI Pi
| Aspect | CLI Pi | OpenClaw embarqué |
|---|---|---|
| Invocation | commande pi / RPC |
SDK via createAgentSession() |
| Outils | Outils de codage par défaut | Suite d’outils OpenClaw personnalisée |
| Prompt système | AGENTS.md + prompts | Dynamique par canal/contexte |
| Stockage des sessions | ~/.pi/agent/sessions/ |
~/.openclaw/agents/<agentId>/sessions/ (ou $OPENCLAW_STATE_DIR/agents/<agentId>/sessions/) |
| Auth | Identifiant unique | Multi-profils avec rotation |
| Extensions | Chargées depuis le disque | Chemins programmatiques + disque |
| Gestion des événements | Rendu TUI | Basée sur des callbacks (onBlockReply, etc.) |
Considérations futures
Domaines possibles de refonte :
- Alignement des signatures d’outils : adaptation actuelle entre les signatures pi-agent-core et pi-coding-agent
- Encapsulation du gestionnaire de session :
guardSessionManagerajoute de la sécurité mais augmente la complexité - Chargement des extensions : pourrait utiliser
ResourceLoaderde Pi plus directement - Complexité du gestionnaire de streaming :
subscribeEmbeddedPiSessiona beaucoup grossi - Particularités des fournisseurs : nombreux chemins de code spécifiques aux fournisseurs que Pi pourrait potentiellement gérer
Tests
La couverture d’intégration Pi s’étend aux suites suivantes :
src/agents/pi-*.test.tssrc/agents/pi-auth-json.test.tssrc/agents/pi-embedded-*.test.tssrc/agents/pi-embedded-helpers*.test.tssrc/agents/pi-embedded-runner*.test.tssrc/agents/pi-embedded-runner/**/*.test.tssrc/agents/pi-embedded-subscribe*.test.tssrc/agents/pi-tools*.test.tssrc/agents/pi-tool-definition-adapter*.test.tssrc/agents/pi-settings.test.tssrc/agents/pi-hooks/**/*.test.ts
En direct / facultatif :
src/agents/pi-embedded-runner-extraparams.live.test.ts(activezOPENCLAW_LIVE_TEST=1)
Pour les commandes d’exécution actuelles, consultez Flux de développement Pi.