Stellen Sie zwei spezifische Fragen
Die Sicherheitsvoreinstellung erfordert eine Risikobewertung auf einer Skala von 0–3 und die vorherrschende Risikoart. Jev erhält den vollständigen Skillstext, Begleittext und statische Flaggen.
- Risiko
- Ein Ergebnis mit Konfidenz und Wahrscheinlichkeitsverteilung.
- Art
- Injektion, Exfiltration, destruktives Verhalten, Zugangsdaten, Lieferkette, Verschleierung, Selbstmodifikation oder nichts.
- Nachweise
- Quellorte, Flags, Modell, Frageversion und Token-Nutzung.
Überprüfen Sie die erste Charge
Öffnen Sie jev-risk.json. Vergleichen Sie einige Datensätze mit ihren Quelldateien, bevor Sie den Lauf erweitern. Ein Datensatz mit dem Feld error kennzeichnet eine fehlgeschlagene Bewertung, kein Ergebnis mit geringem Risiko.
Setzen Sie den Lauf fort
Entfernen Sie --limit 10, um die übrige Warteschlange zu verarbeiten. Das Skript speichert Ergebnisse fortlaufend und überspringt bereits aufgezeichnete Schlüssel.
Gespeicherte Fehler sind auch aufgezeichnete Schlüssel. Untersuchen Sie ihre Ursache und bearbeiten Sie diese Aufzeichnungen, bevor Sie mit einer Wiederholung rechnen, um erneut über sie zu urteilen.
Es funktioniert, wenn
- Erfolgreiche Zeilen umfassen Risiko, Wahrscheinlichkeiten und Quellorte.
- Die Nutzung wird zusammen mit jedem Ergebnis erfasst.
- Sie können fehlgeschlagene Bewertungen von abgeschlossenen unterscheiden.
Lesen Sie die Implementierung
Der Queue-Runner legt das Speicherformat und das Verhalten beim Fortsetzen fest. Vergleichen Sie es mit den veröffentlichten Bewertungsdaten.