Compare commits

...
7 Commits
Author SHA1 Message Date
duffyduckandClaude Opus 4.7 9ea7908fe4 docs: README + issue — Proxy-Tool-Use-Patch + Trigger-Reply-Push dokumentiert
Co-Authored-By: Claude Opus 4.7 (1M context) <noreply@anthropic.com>
2026-05-12 01:52:04 +02:00
duffyduckandClaude Opus 4.7 7237f05344 fix(trigger): Trigger-Antworten landen jetzt im Chat — Brain → Bridge Push
Bug: Wenn der Brain-Background-Loop einen Timer/Watcher feuert, ruft
er agent.chat() direkt im eigenen Prozess. Die Antwort wurde nur ins
Trigger-Log geschrieben — kein RVS-Broadcast, kein TTS, nichts in
App/Diagnostic sichtbar.

Fix: Bridge ↔ Brain bekommen einen internen HTTP-Push-Kanal.

Bridge (Port 8090, nicht exposed, nur aria-net intern):
  asyncio.start_server-basierter HTTP-Listener.
  POST /internal/trigger-fired
    body: {reply, trigger_name, type, events}
  → _handle_trigger_fired feuert Side-Channel-Events
    (trigger_created/skill_created/location_tracking) erst,
    dann _process_core_response(reply) — exakt der gleiche Pfad
    wie normale Chat-Antworten (Chat-Bubble + TTS + chat_backup).

Brain background.py:
  Nach agent.chat() in _fire wird agent.pop_events() ausgelesen
  und zusammen mit dem Reply via urllib an aria-bridge:8090
  gepostet (run_in_executor damit es den asyncio-Loop nicht
  blockiert). Failures werden geloggt, der Trigger selbst bleibt
  trotzdem als 'fired' markiert.

Co-Authored-By: Claude Opus 4.7 (1M context) <noreply@anthropic.com>
2026-05-12 01:50:32 +02:00
duffyduckandClaude Opus 4.7 e26226f370 feat(proxy): Tool-Use durchreichen — eigene Adapter-Files ueberschreiben npm-Version
Der claude-max-api-proxy ignoriert das OpenAI-tools-Feld komplett:
openai-to-cli.js wandelt nur messages in einen String, manager.js
spawnt 'claude --print' ohne Tools. Claude Code nutzt dann ihre
internen Tools (Bash, etc.) — bei 'Timer in 2min' macht sie ein
'sleep 120' intern und meldet 'erledigt' ohne dass wir je einen
trigger_timer-Call sehen.

Fix: zwei eigene Adapter-Files unter proxy-patches/ die zur
Container-Startzeit ueber die npm-Version kopiert werden:

  openai-to-cli.js:
    - tools-Feld wird als <system>-Block mit Tool-Schemas + klarer
      Anweisung "Antworte <tool_call name=...>{json}</tool_call>"
      in den Prompt injiziert
    - role=tool messages werden als <tool_result>-Blocks eingewoben
      → Claude sieht den ganzen Tool-Use-Loop
    - assistant tool_calls werden als <tool_call>-Bloecke
      re-serialisiert, damit History-Roundtrips funktionieren
    - Multimodal-content (Array von text-Parts) unveraendert
      unterstuetzt (Original-sed-Patch eingebaut)

  cli-to-openai.js:
    - parsed <tool_call name="X">{json}</tool_call> aus result.result
    - liefert OpenAI-konforme tool_calls + finish_reason=tool_calls
    - Pre-Tool-Text bleibt im content erhalten
    - normalizeModelName null-safe (Original-sed-Patch eingebaut)

docker-compose.yml: zwei sed-Patches die jetzt in den Files leben
sind raus, dafuer ein /proxy-patches:ro-Mount + zwei cp-Kommandos.

Smoke-Tests mit Node lokal alle gruen (single + multi tool_calls,
mit/ohne Pre-Text, History-Replay mit tool_result).

Co-Authored-By: Claude Opus 4.7 (1M context) <noreply@anthropic.com>
2026-05-12 01:42:05 +02:00
duffyduckandClaude Opus 4.7 0d13118f7e debug(brain): Proxy-Response loggen — finish_reason + raw-msg + tool_calls-Anzahl
Diagnose-Log um Trigger-Hang zu klaeren: warum legt ARIA keinen Timer
an, obwohl trigger_timer als Tool definiert ist? Wir loggen jetzt nach
jedem Proxy-Call:
  - finish_reason
  - alle Keys aus der message
  - tool_calls-Anzahl + content-Laenge
  - die rohe message (truncated 1500 chars)

So sehen wir ob der Proxy tool_calls leer liefert (Proxy schluckt
tools-Feld?), ob Claude ignoriert (Anthropic-Native-Format statt
OpenAI?), oder ob unser Dispatch falsch parsed.

Co-Authored-By: Claude Opus 4.7 (1M context) <noreply@anthropic.com>
2026-05-12 01:34:12 +02:00
duffyduck b1796520b8 release: bump version to 0.1.2.7 2026-05-12 01:23:18 +02:00
duffyduckandClaude Opus 4.7 0ff44d99c4 docs: README + issue — Aktuelle-Zeit-Block + in_seconds dokumentiert
Co-Authored-By: Claude Opus 4.7 (1M context) <noreply@anthropic.com>
2026-05-12 01:22:14 +02:00
duffyduckandClaude Opus 4.7 8c74b3fed8 fix(brain): Timer in 2min funktioniert wieder — Zeit im Prompt + in_seconds-Param
ARIA wusste nicht wieviel Uhr es ist (kein Bash, kein Time-Tool, kein
Timestamp im System-Prompt) und konnte fires_at als ISO-UTC schlicht
nicht ausrechnen. Zwei Fixes:

1. prompts.py: build_time_section() injiziert UTC + lokale Zeit
   (Europa/Berlin Sommer/Winter-Heuristik) als '## Aktuelle Zeit'-Block
   oben in den System-Prompt. Hilft auch beim Einordnen von
   Watcher-Conditions wie hour_of_day == 8.

2. agent.py trigger_timer-Tool: neuer Parameter `in_seconds` als
   Alternative zu fires_at. Bei relativen Angaben ('in 2 Minuten')
   rechnet jetzt der Server den absoluten Timestamp aus — keine
   Rechnerei in der LLM noetig. fires_at bleibt fuer feste Termine.
   required nur noch name + message.

Diagnostic-API (/triggers/timer) bleibt absolute-only, da der Browser
selbst datetime hat.

Co-Authored-By: Claude Opus 4.7 (1M context) <noreply@anthropic.com>
2026-05-12 01:21:23 +02:00
12 changed files with 574 additions and 24 deletions
+11 -7
View File
@@ -216,11 +216,14 @@ Der Proxy-Container (`node:22-alpine`) installiert bei jedem Start:
- `@anthropic-ai/claude-code` — Claude Code CLI
- `claude-max-api-proxy` — OpenAI-kompatible API
Danach werden per `sed` vier Patches angewendet:
1. **Host-Binding**: Server hoert auf `0.0.0.0` statt localhost
2. **Model-Fallback**: Undefined Model → `claude-sonnet-4`
3. **Content-Format**: Array → String Konvertierung fuer die CLI
4. **Tool-Permissions**: `--dangerously-skip-permissions` Flag injizieren
Danach wird der Proxy gepatcht:
1. **Host-Binding** (sed): Server hoert auf `0.0.0.0` statt localhost
2. **Tool-Permissions** (sed): `--dangerously-skip-permissions` Flag injizieren
3. **Tool-Use-Adapter** (Datei-Overwrite aus [`proxy-patches/`](proxy-patches/)):
- `openai-to-cli.js` injiziert das OpenAI-`tools`-Feld als `<system>`-Block mit Schema-Beschreibungen + Anweisung `<tool_call name="X">{json}</tool_call>` als Antwortformat. `role=tool`-Messages werden als `<tool_result>`-Bloecke eingewoben. Multimodal-Content (Array von Parts) bleibt String-kompatibel.
- `cli-to-openai.js` parsed `<tool_call>`-Bloecke aus Claudes Antwort und liefert sie als echte OpenAI `tool_calls` mit `finish_reason="tool_calls"`. Pre-Tool-Text bleibt im `content`. Mehrere parallele Calls werden korrekt aufgeteilt. Model-Name null-safe.
**Warum?** Die npm-Version des Proxys ignoriert das `tools`-Feld komplett und reicht nur einen Prompt-String an die CLI weiter. Claude Code nutzt dann ihre internen Tools (Bash, Read, …) und „simuliert" Aktionen — z.B. `sleep 120` statt `trigger_timer`. Mit den eigenen Adaptern landen ARIA-Tools wieder auf der Linie und Side-Effects (Trigger anlegen, Skills aufrufen, GPS-Tracking schalten) funktionieren.
**Wichtige Umgebungsvariablen im Proxy:**
- `HOST=0.0.0.0` — API von aussen erreichbar (Docker-Netz)
@@ -315,7 +318,7 @@ Erreichbar unter `http://<VM-IP>:3001`. Teilt das Netzwerk mit der Bridge.
- **Main**: Brain/RVS/Proxy-Status, Chat-Test, "ARIA denkt..."-Indikator, End-to-End-Trace, Container-Logs
- **Gehirn**: Memory-Browser (Vector-DB), Suche + Filter, Edit/Add/Delete, Konversation-Status mit Destillat-Trigger, **Token/Call-Metrics mit Subscription-Quota-Tracking**, Bootstrap & Migration (3 Wiederherstellungs-Wege), Gehirn-Export/Import (tar.gz). Info-Buttons () ueberall mit Modal-Erklaerung.
- **Skills**: Liste aller Skills mit Logs pro Run, Activate/Deactivate, Export/Import als tar.gz, "von ARIA"-Badge fuer selbst gebaute
- **Trigger**: passive Aufweck-Quellen. **Timer** (einmalig, ISO-Timestamp) + **Watcher** (recurring, mit Condition + Throttle). Liste aktiver Trigger + Logs pro Feuer-Event. Modal mit Type-Dropdown, Live-Anzeige aller verfuegbaren Condition-Variablen (`disk_free_gb`, `hour_of_day`, `current_lat/lon`, `last_user_message_ago_sec`, …) und Condition-Funktionen (`near(lat, lon, m)` fuer GPS-Geofencing). Sicherer Condition-Parser via Python `ast` (Whitelist, kein `eval`).
- **Trigger**: passive Aufweck-Quellen. **Timer** (einmalig, ISO-Timestamp oder via `in_seconds` als Server-Berechnung) + **Watcher** (recurring, mit Condition + Throttle). Liste aktiver Trigger + Logs pro Feuer-Event. Modal mit Type-Dropdown, Live-Anzeige aller verfuegbaren Condition-Variablen (`disk_free_gb`, `hour_of_day`, `current_lat/lon`, `last_user_message_ago_sec`, …) und Condition-Funktionen (`near(lat, lon, m)` fuer GPS-Geofencing). Sicherer Condition-Parser via Python `ast` (Whitelist, kein `eval`). Der System-Prompt enthaelt zusaetzlich einen `## Aktuelle Zeit`-Block (UTC + Europa/Berlin) damit ARIA Timer-Zeitpunkte korrekt setzen kann.
- **Dateien**: Browser fuer `/shared/uploads/` mit Multi-Select + "Alle markieren" + Bulk-Download (ZIP bei 2+) + Bulk-Delete. Live-Update der Chat-Bubbles beim Delete.
- **Einstellungen**: Reparatur (Container-Restart fuer Brain/Bridge/Qdrant), Komplett-Reset, Betriebsmodi, Sprachausgabe + Voice-Cloning + F5-TTS-Tuning + Voice Export/Import, Whisper, Sprachmodell (brainModel), Onboarding-QR, App-Cleanup
@@ -862,7 +865,8 @@ docker exec aria-brain curl localhost:8080/memory/stats
- [x] **Phase B Punkt 2:** Migration aus `aria-data/brain-import/` → atomare Memory-Punkte (Identity / Rule / Preference / Tool / Skill, idempotent ueber migration_key) + Bootstrap-Snapshot Export/Import (nur pinned)
- [x] **Phase B Punkt 3:** Brain Conversation-Loop (Single-Chat UI, Rolling Window 50 Turns, Schwelle 60 → automatisches Destillat, manueller Trigger)
- [x] **Phase B Punkt 4:** Skills-System (Python-only via local-venv, skill_create als Tool, dynamische run_<skill> Tools, Diagnostic Skills-Tab mit Logs/Toggle/Export/Import, skill_created Live-Notification in App+Diagnostic, harte Schwelle "pip → Skill")
- [x] **Phase B Punkt 5:** Triggers-System (passive Aufweck-Quellen — Timer + Watcher mit safe Condition-Parser, GPS-near(), Diagnostic Trigger-Tab, kontinuierliches GPS-Tracking in der App fuer Use-Cases wie Blitzer-Warner)
- [x] **Phase B Punkt 5:** Triggers-System (passive Aufweck-Quellen — Timer + Watcher mit safe Condition-Parser, GPS-near(), Diagnostic Trigger-Tab, kontinuierliches GPS-Tracking in der App fuer Use-Cases wie Blitzer-Warner). Inklusive Brain → Bridge HTTP-Push (Port 8090 intern) damit Trigger-Antworten ueber RVS in App + Diagnostic + TTS landen.
- [x] **Proxy Tool-Use durchreichen**: claude-max-api-proxy patcht via eigene Adapter (`proxy-patches/`) den `tools`/`tool_calls`-Roundtrip — Claude Code rief vorher ihre internen Tools (Bash, sleep) statt der ARIA-Brain-Tools (trigger_timer, skill_*, ...). Jetzt funktioniert Tool-Use End-to-End.
- [x] Sprachmodell-Setting wieder funktional (brainModel in runtime.json statt aria-core)
- [x] App-Chat-Sync: kompletter Server-Sync bei Reconnect (Server = Source of Truth) + chat_cleared Live-Update. Lokal-only Bubbles (Skill-Notifications, laufende Voice ohne STT) bleiben erhalten.
- [x] App: Chat-Suche mit Next/Prev Navigation statt Filter
+2 -2
View File
@@ -79,8 +79,8 @@ android {
applicationId "com.ariacockpit"
minSdkVersion rootProject.ext.minSdkVersion
targetSdkVersion rootProject.ext.targetSdkVersion
versionCode 10206
versionName "0.1.2.6"
versionCode 10207
versionName "0.1.2.7"
// Fallback fuer Libraries mit Product Flavors
missingDimensionStrategy 'react-native-camera', 'general'
}
+1 -1
View File
@@ -1,6 +1,6 @@
{
"name": "aria-cockpit",
"version": "0.1.2.6",
"version": "0.1.2.7",
"private": true,
"scripts": {
"android": "react-native run-android",
+31 -9
View File
@@ -97,26 +97,35 @@ META_TOOLS = [
"function": {
"name": "trigger_timer",
"description": (
"Lege einen Timer-Trigger an — feuert EINMALIG zum angegebenen Zeitpunkt "
"und ruft dich selbst auf (Push-Nachricht an Stefan). "
"Use-Case: 'erinnere mich in 10min', 'sag mir um 14:30 Bescheid'."
"Lege einen Timer-Trigger an — feuert EINMALIG und ruft dich dann selbst auf "
"(Push-Nachricht an Stefan). Use-Case: 'erinnere mich in 10min', "
"'sag mir um 14:30 Bescheid'. Genau EINES von `in_seconds` ODER `fires_at` "
"muss gesetzt sein."
),
"parameters": {
"type": "object",
"properties": {
"name": {"type": "string", "description": "kurzer kebab-case-Name, a-z 0-9 - _"},
"in_seconds": {
"type": "integer",
"description": (
"Relativ ab jetzt in Sekunden. Bevorzugt bei Angaben wie "
"'in 2 Minuten' (=120), 'in 1 Stunde' (=3600). "
"Server berechnet daraus den absoluten Feuer-Zeitpunkt."
),
},
"fires_at": {
"type": "string",
"description": (
"Absoluter ISO-Timestamp UTC, z.B. '2026-05-12T14:30:00Z'. "
"Berechne aus relativer Angabe ('in 10min') selbst — die "
"aktuelle Zeit findest du im System-Prompt nicht, also nutze "
"Bash: `date -u -d '+10 minutes' --iso-8601=seconds`."
"Absoluter ISO-Timestamp UTC fuer feste Termine, z.B. "
"'2026-05-12T14:30:00Z'. Die aktuelle Zeit findest du im "
"System-Prompt unter '## Aktuelle Zeit'. Fuer relative Angaben "
"lieber `in_seconds` nutzen."
),
},
"message": {"type": "string", "description": "Was soll bei der Erinnerung gesagt werden"},
},
"required": ["name", "fires_at", "message"],
"required": ["name", "message"],
},
},
},
@@ -389,9 +398,22 @@ class Agent:
out += f"\nstderr:\n{err}"
return out
if name == "trigger_timer":
fires_at_iso = arguments.get("fires_at")
in_seconds = arguments.get("in_seconds")
if not fires_at_iso and in_seconds is not None:
from datetime import datetime as _dt, timezone as _tz, timedelta as _td
try:
secs = int(in_seconds)
except (TypeError, ValueError):
return "FEHLER: in_seconds muss eine ganze Zahl sein."
if secs < 1:
return "FEHLER: in_seconds muss >= 1 sein."
fires_at_iso = (_dt.now(_tz.utc) + _td(seconds=secs)).isoformat(timespec="seconds")
if not fires_at_iso:
return "FEHLER: entweder `in_seconds` ODER `fires_at` muss gesetzt sein."
t = triggers_mod.create_timer(
name=arguments["name"],
fires_at_iso=arguments["fires_at"],
fires_at_iso=fires_at_iso,
message=arguments["message"],
author="aria",
)
+37
View File
@@ -14,7 +14,11 @@ Feuern bedeutet:
from __future__ import annotations
import asyncio
import json
import logging
import os
import urllib.error
import urllib.request
from datetime import datetime, timezone
from typing import Optional
@@ -24,6 +28,34 @@ import watcher as watcher_mod
logger = logging.getLogger(__name__)
TICK_SEC = 30
BRIDGE_URL = os.environ.get("BRIDGE_URL", "http://aria-bridge:8090")
def _push_to_bridge(reply: str, trigger_name: str, ttype: str, events: list) -> None:
"""POSTed eine Trigger-Antwort an die Bridge fuer RVS-Broadcast + TTS.
Synchron via urllib — wird per run_in_executor aus dem async-Loop
gerufen. Failures werden geloggt, brechen aber nicht ab.
"""
payload = json.dumps({
"reply": reply,
"trigger_name": trigger_name,
"type": ttype,
"events": events or [],
}).encode("utf-8")
url = f"{BRIDGE_URL}/internal/trigger-fired"
try:
req = urllib.request.Request(
url, data=payload, method="POST",
headers={"Content-Type": "application/json"},
)
with urllib.request.urlopen(req, timeout=15) as resp:
if resp.status != 200:
logger.warning("[trigger-push] Bridge hat %s zurueckgegeben", resp.status)
except urllib.error.URLError as exc:
logger.warning("[trigger-push] Bridge unerreichbar (%s): %s", url, exc)
except Exception as exc:
logger.warning("[trigger-push] Push fehlgeschlagen: %s", exc)
def _now_iso() -> str:
@@ -114,8 +146,13 @@ async def _fire(trigger: dict, agent_factory) -> None:
try:
agent = agent_factory()
reply = agent.chat(prompt, source="trigger")
events = agent.pop_events()
logger.info("[trigger] %s gefeuert → ARIA-Reply: %s", name, reply[:80])
triggers_mod.append_log(name, {"event": "reply", "text": reply[:500]})
# Reply an die Bridge pushen, damit App + Diagnostic + TTS sie kriegen.
# Ohne diesen Push wuerde die Antwort nur im Brain-Log landen.
loop = asyncio.get_event_loop()
await loop.run_in_executor(None, _push_to_bridge, reply, name, ttype, events)
except Exception as e:
logger.exception("Trigger %s feuern fehlgeschlagen: %s", name, e)
triggers_mod.append_log(name, {"event": "error", "error": str(e)[:300]})
+25 -1
View File
@@ -15,10 +15,34 @@ mit dem Conversation-Loop in spaeteren Phasen.
from __future__ import annotations
from datetime import datetime, timezone, timedelta
from typing import List
from memory import MemoryPoint
def build_time_section() -> str:
"""Aktueller Zeitstempel — damit ARIA Timer korrekt anlegen kann
und Watcher-Conditions mit hour_of_day etc. einordenbar bleiben."""
now_utc = datetime.now(timezone.utc)
# Europa/Berlin: Sommerzeit CEST = UTC+2, Winterzeit CET = UTC+1.
# Wir nehmen den simplen Fall (kein zoneinfo-Import noetig im Brain-Image):
# Stefans VM laeuft auf UTC, die Bridge in der Wohnung — Anzeige reicht.
local_offset_h = 2 if 3 <= now_utc.month <= 10 else 1
local = now_utc + timedelta(hours=local_offset_h)
lines = [
"## Aktuelle Zeit",
f"- UTC: {now_utc.isoformat(timespec='seconds')}",
f"- Lokal (Europa/Berlin, UTC+{local_offset_h}): "
f"{local.strftime('%Y-%m-%d %H:%M:%S')} ({local.strftime('%A')})",
"",
"Nutze das fuer Trigger-Timestamps und um Watcher-Conditions wie "
"`hour_of_day == 8` einzuordnen. Fuer relative Angaben "
"('in 10min', 'in 2 Stunden') nutze beim `trigger_timer` den "
"`in_seconds`-Parameter — Server rechnet dann selbst.",
]
return "\n".join(lines)
TYPE_HEADINGS = {
"identity": "## Wer du bist",
"rule": "## Sicherheitsregeln & Prinzipien",
@@ -177,7 +201,7 @@ def build_system_prompt(
condition_funcs: List[dict] | None = None,
) -> str:
"""Kompletter System-Prompt: Hot + Cold + Skills + Triggers."""
parts = [build_hot_memory_section(pinned)]
parts = [build_hot_memory_section(pinned), "", build_time_section()]
if skills:
parts.append("")
parts.append(build_skills_section(skills))
+14
View File
@@ -111,6 +111,20 @@ class ProxyClient:
msg = choices[0].get("message") or {}
finish_reason = choices[0].get("finish_reason", "")
# Diagnose: was hat der Proxy zurueckgegeben?
# Wir loggen die rohe message + finish_reason damit wir sehen ob
# tool_calls da sind, leer oder schlicht weggeschnitten werden.
logger.info("Proxy ← finish=%s keys=%s tool_calls=%d content_len=%d",
finish_reason,
sorted(msg.keys()),
len(msg.get("tool_calls") or []),
len(msg.get("content") or "") if isinstance(msg.get("content"), str)
else sum(len(p.get("text", "")) for p in (msg.get("content") or []) if isinstance(p, dict)))
try:
logger.info("Proxy ← raw-msg=%s", json.dumps(msg)[:1500])
except Exception:
logger.info("Proxy ← raw-msg(non-serial)=%s", str(msg)[:1500])
content = msg.get("content") or ""
if isinstance(content, list):
content = "".join(
+141
View File
@@ -2392,6 +2392,145 @@ class ARIABridge:
logger.exception("Fehler in der Audio-Schleife")
await asyncio.sleep(1)
# ── Internal HTTP (Brain → Bridge: Trigger-Feuer-Push) ───
async def _serve_internal_http(self) -> None:
"""Kleiner asyncio HTTP-Listener auf Port 8090.
Empfaengt Push-Events vom Brain wenn ein Trigger feuert. Nicht
nach aussen exposed — nur erreichbar im docker-internen aria-net.
Endpoint:
POST /internal/trigger-fired
{ "reply": "...", "trigger_name": "...", "type": "timer",
"events": [{"type":"trigger_created",...}, ...] }
"""
host, port = "0.0.0.0", 8090
async def _send_response(writer, status: int, payload: dict) -> None:
body = json.dumps(payload).encode("utf-8")
status_text = "OK" if status == 200 else "Error"
writer.write(
f"HTTP/1.1 {status} {status_text}\r\n"
f"Content-Type: application/json\r\n"
f"Content-Length: {len(body)}\r\n"
f"Connection: close\r\n\r\n".encode("utf-8")
)
writer.write(body)
await writer.drain()
async def handle(reader: asyncio.StreamReader, writer: asyncio.StreamWriter) -> None:
try:
request_line = await asyncio.wait_for(reader.readline(), timeout=10)
if not request_line:
return
try:
method, path, _ver = request_line.decode("utf-8", "ignore").strip().split(" ", 2)
except ValueError:
await _send_response(writer, 400, {"error": "bad request line"})
return
headers: dict[str, str] = {}
while True:
line = await asyncio.wait_for(reader.readline(), timeout=5)
if not line or line in (b"\r\n", b"\n"):
break
name, _, value = line.decode("utf-8", "ignore").partition(":")
headers[name.strip().lower()] = value.strip()
content_length = int(headers.get("content-length", "0") or "0")
body = await reader.readexactly(content_length) if content_length else b""
if method == "POST" and path == "/internal/trigger-fired":
try:
data = json.loads(body.decode("utf-8", "ignore"))
except Exception as exc:
await _send_response(writer, 400, {"error": f"bad json: {exc}"})
return
reply = (data.get("reply") or "").strip()
trigger_name = data.get("trigger_name", "")
ttype = data.get("type", "trigger")
events = data.get("events") or []
logger.info("[bridge ← brain] Trigger '%s' (%s) gefeuert, reply=%d chars, events=%d",
trigger_name, ttype, len(reply), len(events))
# Async-spawn — HTTP-Antwort nicht durch RVS-Broadcast blockieren
asyncio.create_task(
self._handle_trigger_fired(reply, trigger_name, ttype, events)
)
await _send_response(writer, 200, {"ok": True})
elif method == "GET" and path == "/health":
await _send_response(writer, 200, {"ok": True, "service": "bridge-internal"})
else:
await _send_response(writer, 404, {"error": "not found"})
except asyncio.TimeoutError:
logger.warning("[bridge http] Timeout beim Request-Lesen")
except Exception as exc:
logger.exception("[bridge http] Fehler: %s", exc)
try:
await _send_response(writer, 500, {"error": str(exc)[:200]})
except Exception:
pass
finally:
try:
writer.close()
await writer.wait_closed()
except Exception:
pass
try:
server = await asyncio.start_server(handle, host, port)
logger.info("[bridge] Internal HTTP-Listener auf %s:%d (Brain-Push)", host, port)
async with server:
await server.serve_forever()
except Exception:
logger.exception("[bridge] Internal HTTP-Listener konnte nicht starten")
async def _handle_trigger_fired(self, reply: str, trigger_name: str,
ttype: str, events: list) -> None:
"""Spiegelt eine Brain-Trigger-Antwort wie eine normale ARIA-Antwort.
Side-Channel-Events zuerst (trigger_created, location_tracking, ...),
dann _process_core_response (Chat-Bubble, TTS, chat_backup).
"""
# Side-Channel-Events erst (gleich wie in send_to_core)
for event in events or []:
etype = event.get("type")
try:
if etype == "skill_created":
await self._send_to_rvs({
"type": "skill_created",
"payload": event.get("skill", {}),
"timestamp": int(asyncio.get_event_loop().time() * 1000),
})
elif etype == "trigger_created":
await self._send_to_rvs({
"type": "trigger_created",
"payload": event.get("trigger", {}),
"timestamp": int(asyncio.get_event_loop().time() * 1000),
})
elif etype == "location_tracking":
await self._send_to_rvs({
"type": "location_tracking",
"payload": {
"on": bool(event.get("on")),
"reason": event.get("reason") or "",
},
"timestamp": int(asyncio.get_event_loop().time() * 1000),
})
except Exception:
logger.exception("[trigger-fire] Side-Channel-Event %s fehlgeschlagen", etype)
if not reply:
logger.info("[trigger-fire] Trigger '%s' hat leeren Reply — nichts zu broadcasten",
trigger_name)
return
# Reply wie eine normale ARIA-Antwort behandeln
try:
await self._process_core_response(
reply,
{"metadata": {"trigger_name": trigger_name, "trigger_type": ttype}},
)
except Exception:
logger.exception("[trigger-fire] _process_core_response fehlgeschlagen")
# ── Run & Shutdown ───────────────────────────────────────
async def run(self) -> None:
@@ -2405,6 +2544,8 @@ class ARIABridge:
# connect_to_core entfaellt — Bridge ruft jetzt aria-brain ueber
# HTTP (siehe send_to_core). Keine persistente WS-Verbindung mehr.
asyncio.create_task(self.connect_to_rvs()),
# Interner HTTP-Listener — empfaengt Trigger-Feuer-Pushes vom Brain.
asyncio.create_task(self._serve_internal_http()),
]
if self.audio_available:
+3 -3
View File
@@ -11,15 +11,15 @@ services:
npm install -g @anthropic-ai/claude-code claude-max-api-proxy &&
DIST=$$(find /usr/local/lib -path '*/claude-max-api-proxy/dist' -type d | head -1) &&
sed -i 's/startServer({ port })/startServer({ port, host: process.env.HOST || \"127.0.0.1\" })/' $$DIST/server/standalone.js &&
sed -i 's/if (model\.includes/if ((model||\"claude-sonnet-4\").includes/g' $$DIST/adapter/cli-to-openai.js &&
sed -i '1i\\function _t(c){return typeof c===\"string\"?c:Array.isArray(c)?c.filter(function(b){return b.type===\"text\"}).map(function(b){return b.text||\"\"}).join(\"\"):String(c)}' $$DIST/adapter/openai-to-cli.js &&
sed -i 's/msg\\.content/_t(msg.content)/g' $$DIST/adapter/openai-to-cli.js &&
sed -i 's/\"--no-session-persistence\",/\"--no-session-persistence\",\"--dangerously-skip-permissions\",/' $$DIST/subprocess/manager.js &&
cp /proxy-patches/openai-to-cli.js $$DIST/adapter/openai-to-cli.js &&
cp /proxy-patches/cli-to-openai.js $$DIST/adapter/cli-to-openai.js &&
claude-max-api"
volumes:
- ~/.claude:/root/.claude # Claude CLI Auth (Credentials in /root/.claude/.credentials.json)
- ./aria-data/ssh:/root/.ssh # SSH Keys fuer VM-Zugriff (aria-wohnung, rw fuer ARIA)
- aria-shared:/shared # Shared Volume fuer Datei-Austausch (Uploads von App)
- ./proxy-patches:/proxy-patches:ro # Tool-Use-Adapter (ueberschreibt npm-Version, read-only)
environment:
- HOST=0.0.0.0
- SHELL=/bin/bash # Claude Code Bash-Tool braucht bash (nicht nur sh/ash)
+4 -1
View File
@@ -55,6 +55,9 @@ Wichtige Mechanismen:
### Bugs / Fixes
- [x] **Trigger-Antworten landen jetzt im Chat** (App + Diagnostic + TTS): Wenn der Brain-Background-Loop einen Timer/Watcher feuert, ruft er `agent.chat()` direkt im eigenen Prozess. Die Antwort wurde nur ins Trigger-Log geschrieben — kein RVS-Broadcast, nichts sichtbar. Fix: Bridge hat jetzt einen kleinen asyncio HTTP-Listener auf Port 8090 (intern, nicht exposed). Brain pusht nach jedem Trigger-Feuer per `urllib.request.urlopen` an `http://aria-bridge:8090/internal/trigger-fired` mit `{reply, trigger_name, type, events}`. Bridge ruft `_handle_trigger_fired` → Side-Channel-Events (skill_created/trigger_created/location_tracking) + `_process_core_response` — exakt derselbe Pfad wie normale Chat-Antworten (Bubble + TTS + chat_backup)
- [x] **Tool-Use im Proxy durchgereicht** (claude-max-api-proxy): Der Proxy nahm das OpenAI-`tools`-Feld an, ignorierte es aber komplett — `openai-to-cli.js` wandelte nur `messages` zu einem String, `manager.js` rief `claude --print` ohne Tools. Claude Code nutzte ihre internen Tools (Bash, Read, ...) und „simulierte" Aktionen wie `sleep 120` statt `trigger_timer` zu rufen. Fix: zwei eigene Adapter-Files unter `proxy-patches/`, die zur Container-Startzeit ueber die npm-Version kopiert werden. `openai-to-cli.js` injiziert die `tools` als `<system>`-Block mit Schema-Beschreibungen und der Anweisung `<tool_call name="X">{json}</tool_call>` als Antwortformat zu verwenden; weiterhin verarbeitet sie `role=tool`-Messages als `<tool_result>`-Bloecke fuer den Loop-Replay. `cli-to-openai.js` parsed die `<tool_call>`-Bloecke aus dem Result-Text zurueck zu OpenAI `tool_calls` mit `finish_reason=tool_calls`. Mehrere Tool-Calls + Pre-Tool-Text werden korrekt aufgeteilt
- [x] **Timer "in 2 Minuten" wird wieder angelegt**: ARIA hatte keine Moeglichkeit die aktuelle Zeit zu kennen — kein Bash-Tool, kein Time-Tool, kein Timestamp im System-Prompt. Die Tool-Beschreibung von `trigger_timer` empfahl sogar `date -u -d '+10 minutes'` via Bash, aber Bash gab's nicht. Folge: LLM liess den Tool-Call entweder weg oder riet einen Cutoff-Zeitstempel (Vergangenheit) → Background-Loop feuerte beim naechsten 30s-Tick sofort statt in 2min. Fix: (1) `build_time_section()` in `prompts.py` injiziert UTC + lokale Europa/Berlin-Zeit als `## Aktuelle Zeit`-Block oben im System-Prompt. (2) `trigger_timer` akzeptiert jetzt `in_seconds` als Alternative zu `fires_at` — Server rechnet den absoluten Timestamp, ARIA muss nicht ISO-rechnen
- [x] **"ARIA denkt..." haengt nach Brain-Antwort** (App + Diagnostic): `send_to_core` schickte `thinking` direkt via `_send_to_rvs`, hat aber `_last_activity_state` nicht gepflegt — der spaetere `_emit_activity("idle")` wurde dedupliziert und verschluckt. Fix: durchgehend `_emit_activity` fuer beide Zustaende
- [x] **Such-Scroll in App-Chat springt jetzt zur Treffer-Bubble**: `scrollToIndex` wurde zu frueh gerufen + `viewPosition: 0.4` schoss vorbei. Fix: `requestAnimationFrame` + `viewPosition: 0.5` + `onScrollToIndexFailed`-Fallback mit averageItemLength-Schaetzung + 250ms-Retry
- [x] **STT-Bubble bekommt den Text jetzt sofort** (nicht erst mit ARIAs Antwort): `_process_app_audio` rief erst `send_to_core` (blockt synchron) und DANN STT-Broadcast. Fix: Reihenfolge getauscht — STT raus, dann Core-Call
@@ -275,6 +278,7 @@ Skills mit Tool-Use.
- [x] **Activity-Persistenz**: `/shared/state/activity.json` traegt User-Message-Zeitstempel, damit `last_user_message_ago_sec` als Variable verfuegbar ist
- [x] **`trigger_cancel`** + **`trigger_list`** als Tools — ARIA kann eigene Trigger verwalten
- [x] **Triggers-Block im System-Prompt**: aktive Trigger + verfuegbare Variablen + Funktionen werden bei jedem Chat-Turn injiziert, dazu Hinweis dass GPS-Watcher `request_location_tracking` mit-aufrufen sollen
- [x] **Aktuelle-Zeit-Block im System-Prompt**: UTC + lokale Europa/Berlin-Zeit (Sommer/Winter-Heuristik) wird bei jedem Chat-Turn oben mit-injiziert, damit Timer-fires_at und Watcher mit `hour_of_day` ueberhaupt sinnvoll sind. `trigger_timer` akzeptiert zusaetzlich `in_seconds` (Server rechnet) — ARIA muss bei relativen Angaben ('in 2 Minuten') nicht selbst ISO-rechnen
### Diagnostic / App Features (drumherum)
@@ -299,6 +303,5 @@ Skills mit Tool-Use.
- [ ] RVS Zombie-Connections endgueltig loesen
- [ ] Gamebox: kleine Web-Oberflaeche fuer Credentials/Server-Config oder zentral aus Diagnostic per RVS push
- [ ] Erste Skills bauen lassen (yt-dlp, pdf-extract, image-resize, etc.) — durch normale Anfragen, ARIA legt sie selbst an
- [ ] Tool-Use-Verifikation: Live-Test ob claude-max-api-proxy `tools` und `tool_calls` sauber durchreicht
- [ ] Heartbeat (periodische Selbst-Checks)
- [ ] Lokales LLM als Waechter (Triage vor Claude-Call)
+146
View File
@@ -0,0 +1,146 @@
/**
* ARIA-patched cli-to-openai adapter.
*
* Erweitert die npm-Version von claude-max-api-proxy:
* - normalizeModelName ist null-safe (Original-Patch der vorher per sed lief).
* - Parser fuer <tool_call name="X">{json}</tool_call>-Bloecke im Result-Text:
* Wenn welche gefunden werden, wandert das in `message.tool_calls`
* (OpenAI-Format) und finish_reason=tool_calls. Der restliche Text
* (alles ausserhalb der Bloecke) wird verworfen, weil das interner
* Tool-Use-Schritt war, nicht User-facing.
*
* Wird zur Container-Startzeit ueber die npm-Version geschrieben
* (siehe docker-compose.yml proxy-Block).
*/
import { randomUUID } from "crypto";
export function extractTextContent(message) {
return message.message.content
.filter((c) => c.type === "text")
.map((c) => c.text)
.join("");
}
export function cliToOpenaiChunk(message, requestId, isFirst = false) {
const text = extractTextContent(message);
return {
id: `chatcmpl-${requestId}`,
object: "chat.completion.chunk",
created: Math.floor(Date.now() / 1000),
model: normalizeModelName(message.message.model),
choices: [
{
index: 0,
delta: {
role: isFirst ? "assistant" : undefined,
content: text,
},
finish_reason: message.message.stop_reason ? "stop" : null,
},
],
};
}
export function createDoneChunk(requestId, model) {
return {
id: `chatcmpl-${requestId}`,
object: "chat.completion.chunk",
created: Math.floor(Date.now() / 1000),
model: normalizeModelName(model),
choices: [
{
index: 0,
delta: {},
finish_reason: "stop",
},
],
};
}
/**
* Sucht im Result-Text alle <tool_call name="...">{json}</tool_call>
* Bloecke. Gibt [{id, name, arguments(json-string)}, restText] zurueck.
*
* Defensiv:
* - "name"-Attribut sowohl in Doppel- als auch Einzelhochkommata
* - Whitespace beim JSON tolerant
* - Bei JSON-Parse-Fehler: das Argument wird als _raw weitergereicht
* (unser Brain-Side-Parser kennt das)
*/
function _parseToolCalls(text) {
if (!text || typeof text !== "string") return { tool_calls: [], rest: text || "" };
const re = /<tool_call\s+name=["']([^"']+)["']\s*>([\s\S]*?)<\/tool_call>/gi;
const tcs = [];
let lastIndex = 0;
const restParts = [];
let m;
while ((m = re.exec(text)) !== null) {
restParts.push(text.slice(lastIndex, m.index));
const name = m[1];
let argsBody = (m[2] || "").trim();
// Fences entfernen falls Claude welche eingebaut hat
argsBody = argsBody.replace(/^```(?:json)?\s*/i, "").replace(/```\s*$/, "").trim();
if (!argsBody) argsBody = "{}";
// Validieren — aber in OpenAI-Format ist arguments immer ein STRING
try {
JSON.parse(argsBody);
} catch (_) {
// Behalten als Roh-String — Brain-Side toleriert das via {_raw:...}
}
tcs.push({
id: `call_${randomUUID().replace(/-/g, "").slice(0, 24)}`,
type: "function",
function: { name, arguments: argsBody },
});
lastIndex = re.lastIndex;
}
restParts.push(text.slice(lastIndex));
return { tool_calls: tcs, rest: restParts.join("").trim() };
}
export function cliResultToOpenai(result, requestId) {
const modelName = result.modelUsage
? Object.keys(result.modelUsage)[0]
: "claude-sonnet-4";
const rawText = result.result || "";
const { tool_calls, rest } = _parseToolCalls(rawText);
const message = { role: "assistant" };
let finishReason = "stop";
if (tool_calls.length > 0) {
message.tool_calls = tool_calls;
// Wenn Claude neben den Tool-Calls noch Text geschrieben hat, behalten
// wir den im content — Brain-Seite kann ihn als Pre-Tool-Plaintext sehen.
// Wenn nur Tool-Calls da waren (rest leer), content explizit null.
message.content = rest || null;
finishReason = "tool_calls";
} else {
message.content = rawText;
}
return {
id: `chatcmpl-${requestId}`,
object: "chat.completion",
created: Math.floor(Date.now() / 1000),
model: normalizeModelName(modelName),
choices: [
{ index: 0, message, finish_reason: finishReason },
],
usage: {
prompt_tokens: result.usage?.input_tokens || 0,
completion_tokens: result.usage?.output_tokens || 0,
total_tokens:
(result.usage?.input_tokens || 0) + (result.usage?.output_tokens || 0),
},
};
}
function normalizeModelName(model) {
const m = model || "claude-sonnet-4";
if (m.includes("opus")) return "claude-opus-4";
if (m.includes("sonnet")) return "claude-sonnet-4";
if (m.includes("haiku")) return "claude-haiku-4";
return m;
}
+159
View File
@@ -0,0 +1,159 @@
/**
* ARIA-patched openai-to-cli adapter.
*
* Erweitert die npm-Version von claude-max-api-proxy:
* - Multimodal-Content (Array von text-Parts) wird zu String reduziert.
* - Wenn die Anfrage ein `tools`-Feld enthaelt: die Tool-Definitionen
* werden in den Prompt als <system>-Block injiziert, mit klarer
* Anweisung das <tool_call name="...">{...}</tool_call> Format
* zu verwenden statt freiem Text.
* - Wenn Messages role=tool enthalten: deren Inhalt wird als
* <tool_result tool_call_id="...">…</tool_result> ins Prompt-Fragment
* eingewoben damit Claude den Loop-Step bekommt.
*
* Wird zur Container-Startzeit ueber die npm-Version geschrieben
* (siehe docker-compose.yml proxy-Block).
*/
const MODEL_MAP = {
"claude-opus-4": "opus",
"claude-sonnet-4": "sonnet",
"claude-haiku-4": "haiku",
"claude-code-cli/claude-opus-4": "opus",
"claude-code-cli/claude-sonnet-4": "sonnet",
"claude-code-cli/claude-haiku-4": "haiku",
"opus": "opus",
"sonnet": "sonnet",
"haiku": "haiku",
};
export function extractModel(model) {
if (MODEL_MAP[model]) return MODEL_MAP[model];
const stripped = (model || "").replace(/^claude-code-cli\//, "");
if (MODEL_MAP[stripped]) return MODEL_MAP[stripped];
return "opus";
}
/** Multimodal: content kann String oder Array von Parts sein. */
function _text(c) {
if (typeof c === "string") return c;
if (Array.isArray(c)) {
return c
.filter((b) => b && b.type === "text")
.map((b) => b.text || "")
.join("");
}
return String(c == null ? "" : c);
}
/**
* Baut den Tool-Use-Block fuer den System-Prompt.
* Anweisung: Claude soll <tool_call name="X">{json args}</tool_call>
* ausgeben statt das Tool intern via Bash zu simulieren.
*/
function _toolsBlock(tools) {
if (!Array.isArray(tools) || tools.length === 0) return "";
const lines = [];
lines.push("# Verfuegbare Tools");
lines.push("");
lines.push(
"Du hast neben deinen eigenen internen Tools (Bash, Read, etc.) auch " +
"diese externen Tools, die im Backend-System angesiedelt sind. " +
"Sie sind die EINZIGE Moeglichkeit Aktionen auszuloesen wie Trigger anlegen, " +
"Skills aufrufen, oder Konfiguration aendern. Simuliere sie NICHT mit Bash/sleep — " +
"rufe sie sauber auf:"
);
lines.push("");
for (const t of tools) {
if (!t || t.type !== "function" || !t.function) continue;
const fn = t.function;
const name = fn.name || "";
const desc = fn.description || "";
const params = fn.parameters || {};
lines.push(`## ${name}`);
if (desc) lines.push(desc);
try {
lines.push("Schema: " + JSON.stringify(params));
} catch (_) {
lines.push("Schema: (nicht serialisierbar)");
}
lines.push("");
}
lines.push("# Tool-Call-Format");
lines.push("");
lines.push(
"Wenn du eines der OBIGEN externen Tools aufrufen willst, antworte " +
"**ausschliesslich** mit einem oder mehreren Bloecken in genau dieser Form, " +
"JEDER fuer sich auf einer eigenen Zeile:"
);
lines.push("");
lines.push('<tool_call name="TOOL_NAME">{"arg1":"value","arg2":123}</tool_call>');
lines.push("");
lines.push(
"Regeln: (1) Innerhalb des Blocks steht NUR gueltiges JSON mit den Argumenten. " +
"(2) Kein Text drumherum. (3) Keine Code-Fences, kein Markdown. " +
"(4) Mehrere Tool-Calls = mehrere Bloecke untereinander. " +
"(5) Nach den Bloecken aufhoeren — der Server fuehrt die Tools aus und " +
"schickt dir die Ergebnisse fuer den naechsten Turn. " +
"(6) Wenn KEIN externes Tool noetig ist, antworte normal als Text fuer den User. " +
"(7) Nutze Bash/sleep NICHT als Ersatz fuer trigger_timer — das ist genau " +
"der Bug den wir damit fixen."
);
return lines.join("\n");
}
/**
* Wandelt OpenAI-messages in einen Single-String-Prompt um.
* - system/user/assistant wie bisher
* - tool-role: als <tool_result tool_call_id="..." name="..."> eingewoben
*/
export function messagesToPrompt(messages, tools) {
const parts = [];
const toolsBlock = _toolsBlock(tools);
if (toolsBlock) {
parts.push(`<system>\n${toolsBlock}\n</system>\n`);
}
for (const msg of messages) {
if (!msg) continue;
switch (msg.role) {
case "system":
parts.push(`<system>\n${_text(msg.content)}\n</system>\n`);
break;
case "user":
parts.push(_text(msg.content));
break;
case "assistant": {
const txt = _text(msg.content);
const tcs = Array.isArray(msg.tool_calls) ? msg.tool_calls : [];
const tcParts = tcs.map((tc) => {
const name = tc?.function?.name || tc?.name || "";
let args = tc?.function?.arguments ?? tc?.arguments ?? "{}";
if (typeof args !== "string") {
try { args = JSON.stringify(args); } catch (_) { args = "{}"; }
}
return `<tool_call name="${name}">${args}</tool_call>`;
}).join("\n");
const combined = [txt, tcParts].filter(Boolean).join("\n").trim();
if (combined) parts.push(`<previous_response>\n${combined}\n</previous_response>\n`);
break;
}
case "tool": {
const name = msg.name || "";
const id = msg.tool_call_id || "";
parts.push(
`<tool_result tool_call_id="${id}" name="${name}">\n${_text(msg.content)}\n</tool_result>\n`
);
break;
}
}
}
return parts.join("\n").trim();
}
export function openaiToCli(request) {
return {
prompt: messagesToPrompt(request.messages, request.tools),
model: extractModel(request.model),
sessionId: request.user,
};
}