L2: პრომპტის ევოლუცია
ფენა 2 საშუალო სიხშირით ოპერირებს აგენტის სისტემის პრომპტების დასახვეწად. იგი საუბრის ხარისხის მეტრიკებს ანალიზებს და პრომპტის მოდიფიკაციებს სთავაზობს, მათ A/B ჩარჩოთი ტესტავს მუდმივ მიღებამდე.
მიმოხილვა
L2 ევოლუცია მიმართავს:
- სისტემის პრომპტის დახვეწა -- ინსტრუქციების სიცხადისა და ამოცანების მოცვის გაუმჯობესება
- პერსონის ტუნინგი -- ტონის, ვერბოზულობისა და კომუნიკაციის სტილის კორექტირება
- ინსტრუმენტების გამოყენების ინსტრუქციები -- ოპტიმიზაცია, როგორ ეწერება ინსტრუმენტები LLM-ისთვის
- A/B ტესტირება -- პრომპტის ცვლილებების სტატისტიკური ვალიდაცია განთავსებამდე
A/B ტესტირების ჩარჩო
პრომპტის მოდიფიკაციის შემოთავაზებისას, L2 ორიგინალსა და მოდიფიცირებულ პრომპტებს პარალელურად უშვებს კონფიგურირებადი შეფასების პერიოდისთვის:
- ტრაფიკის გაყოფა -- ორიგინალ და კანდიდატ პრომპტებს შორის მონაცვლეობა
- მეტრიკების შეგროვება -- ამოცანის დასრულების, მომხმარებლის კმაყოფილებისა და ინსტრუმენტების გამოყენების ეფექტურობის თვალყურის ადევნება
- სტატისტიკური ტესტი -- მნიშვნელოვნების ტესტირება გამარჯვებულის დასადგენად
- დაწინაურება ან უკუქცევა -- გამარჯვებულის მიღება ან ორიგინალის შენარჩუნება
კონფიგურაცია
toml
[self_evolution.l2]
enabled = false
schedule = "weekly"
min_samples = 50
confidence_level = 0.95
max_concurrent_experiments = 2