ყველა მასალა

AI პილოტის ახალ გუნდზე გაფართოების go/no-go გადაწყვეტილება

როგორ მიიღოს კომპანიამ შემოწმებული AI პილოტის ახალ გუნდზე გაფართოების გადაწყვეტილება წყაროს, როლის, პასუხის ტესტისა და ადამიანის გადაცემის მტკიცებულებით.

ახალ გუნდზე გაფართოება მაშინ უნდა შეჩერდეს, როცა მტკიცებულება ძველი გუნდის ქცევას აღწერს, ხოლო ახალი გუნდის წყარო, როლი ან გადაცემის გზა ჯერ უცნობია.

მოკლე პასუხი: AI პილოტი ახალ გუნდზე მხოლოდ მაშინ გააფართოეთ, როცა ახალი გუნდის სამუშაო კითხვები, დამტკიცებული წყაროები, როლური წვდომა, უარყოფითი ტესტები და პასუხისმგებელ ადამიანთან საკითხის გადაცემის წესი ცალკე გაქვთ შემოწმებული. ძველი გუნდის კარგი პასუხები ახალი გარემოს ავტომატურ ნებართვას არ წარმოადგენს.

რას წყვეტს go/no-go შეფასება?

ეს შეფასება არ ადგენს, კარგია თუ ცუდი AI ზოგადად. იგი სვამს ვიწრო კითხვას: მზად არის თუ არა კონკრეტული ახალი გუნდი კონკრეტული სამუშაოსთვის იმ წყაროებით, უფლებებითა და ადამიანური კონტროლით, რომლებიც წინასწარ განისაზღვრა.

სავარჯიშო სცენარში შიდა მხარდაჭერის ჯგუფმა პილოტში დამტკიცებული პასუხები მიიღო, ხოლო ახალი გაყიდვების გუნდი იმავე ასისტენტთან მუშაობას იწყებს. გაყიდვებს აქვს სხვა ფასების წესი, სხვა დამტკიცების ზღვარი და სხვა მგრძნობიარე მონაცემი. გაფართოების გადაწყვეტილება ვერ დაეყრდნობა მხოლოდ ძველი გუნდის სატესტო კითხვებს. ეს არის სამუშაო მოდელი და არა aiNOW-ის დადასტურებული კლიენტის შედეგი.

aiOFFICE შეიძლება მოეწყოს კომპანიის მიერ დამტკიცებულ დოკუმენტებსა და წესებზე, ხოლო პასუხები შეთანხმებულ მაგალითებზე შემოწმდეს. გაფართოების მიღება მაინც კომპანიის გადაწყვეტილებაა. პროცესის ფარგლების განხილვისთვის გამოიყენეთ aiOFFICE-ის საკონტაქტო გზა და ცალკე დააფიქსირეთ ახალი გუნდის წყაროები, მოქმედებები და შეზღუდვები.

NIST AI Risk Management Framework მმართველობას, კონტექსტის გააზრებას, გაზომვასა და მართვას ერთმანეთთან აკავშირებს. OWASP-ის LLM რისკების ჩამონათვალი კი გვახსენებს, რომ არასანდო ინსტრუქცია და ინფორმაციის არასათანადო გამოტანა ცალკე შესამოწმებელია. ეს მეთოდური წყაროებია და არ ამტკიცებს კონკრეტული პილოტის მზადყოფნას.

მტკიცებულების მინიმალური ნაკრები

ახალი გუნდის შეფასებისას ერთი დადებითი დემო საკმარისი არ არის. შეაგროვეთ მტკიცებულება, რომელიც პასუხობს შემდეგ კითხვებს:

  • რომელი სამუშაო კითხვები და მოქმედებები ეკუთვნის ახალ გუნდს?
  • რომელი დამტკიცებული დოკუმენტი ან წესი ამყარებს თითოეულ პასუხს?
  • რომელი როლი ხედავს წყაროს და რომელი ინფორმაცია უნდა დარჩეს მიუწვდომელი?
  • რა ხდება მაშინ, როცა წყარო არ არსებობს, მოძველებულია ან ერთმანეთს ეწინააღმდეგება?
  • ვის გადაეცემა შემთხვევა, როცა პასუხი მოქმედების უფლებას არ ქმნის?

განსაკუთრებული ყურადღება მიაქციეთ უარყოფით ტესტს. ახალმა გუნდმა უნდა ნახოს, რომ უცნობი ან დაუშვებელი მოთხოვნა ჩერდება და არ გარდაიქმნება დამაჯერებელ, მაგრამ დაუმტკიცებელ ინსტრუქციად.

რა აფერხებს გაფართოებას?

  • გუნდის შეცვლა: ახალი როლი ხედავს ინფორმაციას, რომელიც ძველი გუნდისთვის იყო ნებადართული, მაგრამ მისთვის არ არის საჭირო.
  • წყაროს შეცვლა: ახალი გუნდის წესი ძველ პილოტში შემოწმებულ დოკუმენტს არ ემთხვევა.
  • დავალების გაფართოება: პილოტი პასუხობდა განმარტებით კითხვებს, ხოლო ახალი გუნდი ითხოვს ცვლილების შესრულებას.
  • გადაცემის გაურკვევლობა: უარყოფილ ან სადავო შემთხვევაზე პასუხისმგებელი ადამიანი არ არის დასახელებული.
  • ტესტის ნაკლებობა: შეფასდა მხოლოდ ჩვეულებრივი მაგალითები და არა გამონაკლისი, მოძველებული ან აკრძალული მოთხოვნა.

თითოეული დაბრკოლება ავტომატურად უარს არ ნიშნავს. იგი განსაზღვრავს, რა მტკიცებულება უნდა დაემატოს გადაწყვეტილებამდე. თუ მფლობელმა ვერ დაასახელა წყარო ან გადაცემის გზა, გადაწყვეტილება უნდა დარჩეს HOLD მდგომარეობაში.

შედარება: პილოტის გაგრძელება და პილოტის გაფართოება

იმავე გუნდის სამუშაოს გაგრძელება ამოწმებს, შეიცვალა თუ არა წყარო, პასუხის მაგალითი ან პროცესის მფლობელი. ახალ გუნდზე გაფართოება კი ახალი კონტექსტის მიღებას ნიშნავს: სხვა როლი, სხვა წვდომა, სხვა გამონაკლისი და სხვა პასუხისმგებლობა. ამიტომ ძველი ტესტის გამეორება საჭიროა, მაგრამ საკმარისი არ არის.

მაგალითად, მხარდაჭერის გუნდში დამტკიცებული კითხვა შეიძლება მხოლოდ წესის პოვნას მოითხოვდეს, ხოლო გაყიდვების გუნდში მსგავსი ფორმულირება ფასდაკლების დამტკიცებად აღიქმებოდეს. გაფართოების ტესტში ეს ორი მოქმედება ცალ-ცალკე შეამოწმეთ: ასისტენტმა შეიძლება წესი განმარტოს, მაგრამ დამტკიცების უფლება შესაბამის თანამშრომელს უნდა დარჩეს.

რა შეზღუდვები აქვს go/no-go გადაწყვეტილებას?

პილოტში წარმატებული პასუხი ახალი გუნდის ყველა შემთხვევის სისწორეს ვერ ამტკიცებს. გადაწყვეტილებაში მიუთითეთ, რომელი წყაროები და როლები შემოწმდა, რომელი გამონაკლისები დარჩა ღია და ვინ წყვეტს ასეთ შემთხვევებს. საჭირო იურიდიული, ფინანსური ან საკადრო გადაწყვეტილებები შესაბამის პასუხისმგებელ პირებს ეკუთვნით.

aiOFFICE-ის დამტკიცებული წყაროები და შეთანხმებულ მაგალითებზე პასუხის ტესტები შეიძლება იყოს მომზადების ნაწილი, მაგრამ ახალ გუნდზე გაფართოებას კომპანიის მიერ დანიშნული პასუხისმგებელი პირი ამტკიცებს. გაეცანით უსაფრთხოების გვერდს და კონფიდენციალურობის გვერდს, შემდეგ დააფიქსირეთ მონაცემის ფარგლები და ადამიანის გადაცემის პირობა.

როგორ ჩაიწეროს გადაწყვეტილება?

დოკუმენტში გამოყავით გადაწყვეტილება, მტკიცებულება და შემდგომი ნაბიჯი. სასარგებლო ჩანაწერი მკითხველს აჩვენებს, რა შემოწმდა, რა დარჩა უცნობი და ვის ეკუთვნის შემდეგი მოქმედება.

  • GO: ახალი გუნდის წყაროები, როლები, დადებითი და უარყოფითი ტესტები და გადაცემის პასუხისმგებელი აღწერილია.
  • HOLD: რომელიმე აუცილებელი მტკიცებულება არ არსებობს ან წყაროებს შორის წინააღმდეგობა ჯერ არ გადაწყვეტილა.
  • NO-GO: სამუშაო ფარგლები არ ემთხვევა დამტკიცებულ წყაროს ან ახალი გუნდის მოქმედება ადამიანის დაუდასტურებელ უფლებას ითხოვს.
  • შემდგომი შემოწმება: ცვლილების შემდეგ იგივე კითხვები ახალი გუნდის როლებით ხელახლა გაიარეთ.

ხშირი კითხვები

საჭიროა თუ არა ახალი გუნდისთვის ძველი პილოტის ყველა ტესტის გამეორება?

ძველი ტესტების გამეორება სასარგებლოა ცვლილების სანახავად, მაგრამ ახალი გუნდის საკუთარი როლები, წყაროები და გამონაკლისებიც უნდა დაემატოს. სხვა კონტექსტი ძველ შედეგს ავტომატურ ნებართვად არ აქცევს.

როდის არის სწორი HOLD გადაწყვეტილება?

HOLD გამოიყენეთ, როცა მტკიცებულება აკლია, წყაროები ერთმანეთს ეწინააღმდეგება ან გადაცემის პასუხისმგებელი არ არის დანიშნული. ეს ნიშნავს, რომ გაფართოებამდე დამატებითი შემოწმებაა საჭირო.

GO ნიშნავს თუ არა, რომ ადამიანური კონტროლი აღარ არის საჭირო?

არა. GO ნიშნავს მხოლოდ იმას, რომ განსაზღვრული ფარგლებისთვის მიღების მტკიცებულება საკმარისად არის აღწერილი. მნიშვნელოვანი გადაწყვეტილებები და უცნობი შემთხვევები კვლავ ადამიანის გადამოწმებას მოითხოვს.

ეს სტატია მომზადებულია AI-ის დახმარებით. გამოყენებამდე გადაამოწმეთ მითითებული წყაროები და საკუთარი სამუშაო პროცესი.

წყაროები

  1. https://nvlpubs.nist.gov/nistpubs/ai/NIST.AI.100-1.pdf
  2. https://owasp.org/www-project-top-10-for-large-language-model-applications/

შემდეგი საკითხავი

კომპანიის პირადი AI და ცოდნის ბაზა

ფილიალებისთვის ერთიანი დამტკიცებული ცოდნის მართვა

კომპანიის პირადი AI და ცოდნის ბაზა

კომპანიის ცოდნის ინვენტარიზაცია AI პილოტამდე | aiOFFICE

კომპანიის პირადი AI და ცოდნის ბაზა

სეზონური თანამშრომლებისთვის განახლებადი ცოდნის მართვა