Абзор · санҷиши нармафзор / ботҳои Telegram / барномаҳои LLM
TG-Probe
2025 · Абзор · Python 3.11+, Telethon
Абзори AI барои санҷиши худкори ботҳои Telegram, махсусан ботҳои бар пояи LLM: сенарияҳо, омӯзиш, ҳамлаҳо, регрессия.
TG-Probe ба ҳайси корбари оддӣ сенарияҳои YAML-ро бар зидди ҳар боти Telegram иҷро мекунад, ва дар реҷаи омӯзиш AI худаш ботро паймоиш мекунад ва графи ҳолатҳоро месозад. Реҷаи алоҳидаи рақибона ботҳои LLM-ро барои prompt injection ва jailbreak месанҷад, ва реҷаи регрессия ҷавобҳоро бо нуқтаи муқоиса муқоиса мекунад. Ҳисоботҳо дар JSON / HTML / JUnit, мисолҳо барои GitHub Actions ва GitLab CI.
Вазифа
Ботҳои Telegram, махсусан ботҳои LLM, ба таври худкор душвор санҷида мешаванд: ҷавобҳо детерминистӣ нестанд ва интерфейс чати зинда аст.
Дар дохил чӣ ҳаст
- Реҷаи сенария: сенарияҳои YAML бо тасдиқҳо (дорои матн, тугмаҳо, вақти ҷавоб)
- Реҷаи омӯзиш: AI ботро мустақилона омӯхта, графи ҳолатҳоро месозад
- Реҷаи рақибона: prompt injection, jailbreak ва векторҳои дигар
- Реҷаи регрессия: муқоиса бо нуқтаи муқоиса (baseline)
- Dual-LLM: оркестратор (Claude Sonnet 4) + иҷрокунанда (Gemini 2.5 Flash) тавассути OpenRouter
- CLI (init / auth / run / explore / attack / baseline / validate), ҳисоботҳо дар JSON, HTML, JUnit ва консол
Тарҷумаи мошинӣ — дар ҳоли тасҳеҳ.