Źródła i dostęp
Ustal, gdzie znajduje się wiedza, kto może ją odczytać i na jakie pytania ma odpowiadać produkt.
Awakast · Inżynieria AI
Wdrożenie RAG w istniejącym produkcie
Pomagamy CTO i zespołom produktowym szybciej znajdować potrzebne informacje w firmowych dokumentach. W istniejącej aplikacji wdrażamy odpowiedzi oparte na źródłach i dostępne zgodnie z rolą użytkownika.
Omów wdrożenie RAGUstal zakres
Zdefiniuj pytania i weryfikację przed wyborem technologii wyszukiwania
Podstawy odpowiedzi i weryfikacja
Określ sposób wskazywania źródła, przypadki wymagające weryfikacji oraz reakcję na brak podstaw do odpowiedzi.
Kryteria oceny
Kryteria oceny ustal przed wyborem narzędzi do wyszukiwania.
Co może obejmować zlecenie
Przed realizacją uzgodnijmy źródła, grupy użytkowników i pierwszy rodzaj odpowiedzi. Poniższy zakres jest punktem wyjścia do rozmowy o Twoim produkcie, a nie gotowym pakietem.
Mapa źródeł i uprawnień
Określimy systemy do połączenia, osoby odpowiedzialne za źródła, role użytkowników i zasady aktualizacji. Wskażemy też materiały wyłączone z wyszukiwania, w tym dane niedostępne dla danego użytkownika.
Odpowiedzi w istniejącej aplikacji
Zakres może obejmować pobieranie dokumentów, wyszukiwanie i generowanie odpowiedzi w produkcie. Uwzględnimy odnośniki do źródeł, komunikat o braku podstaw do odpowiedzi oraz weryfikację wersji roboczej, jeśli wymaga tego zadanie.
Testy i instrukcje utrzymania
Uzgodnimy zestaw pytań do ponownego użycia, oczekiwane źródła i kryteria odbioru. Przekazanie rozwiązania może obejmować konfigurację, instrukcje aktualizacji wiedzy, monitoring i procedury obsługi dla Twojego zespołu.
Konkretny punkt wyjścia
Przegląd postanowień umowy według listy kontrolnej
1
Przykład hipotetyczny: podczas przeglądu umowy system wyszukuje właściwe postanowienia i historię zmian, wskazuje źródła i porównuje zapisy z listą kontrolną ustaloną przez prawnika.
2
Braki i sprzeczne wersje przekazuje do weryfikacji.
3
Test obejmuje pytania z jasną odpowiedzią, niepełne materiały i sprzeczne zapisy; system nie wydaje opinii prawnej.
Zakres i kryteria odbioru
Co może obejmować realizacja
- Integrację bazy wiedzy, projekt wyszukiwania, dobór modelu, punkty weryfikacji i ocenę na uzgodnionym zestawie pytań.
- Zaplanuj monitoring, kontrolę kosztów i przekazanie obsługi wskazanej osobie.
- Zasady aktualizacji źródeł i granice dostępu powinny znaleźć się w briefie, nie dopiero po demonstracji.
Jak prowadzimy prace
Sprawdzamy materiały
Wspólnie przeglądamy dokumenty i pytania użytkowników. Oceniamy sprzeczne wersje, strukturę treści i uprawnienia, zanim zdecydujemy, czy RAG jest właściwym rozwiązaniem.
Osobno oceniamy wyszukiwanie
Najpierw sprawdzamy, czy system znajduje właściwy, dozwolony fragment. Dopiero potem oceniamy odpowiedź. Porównujemy opcje na tych samych pytaniach; większy model nie uzupełni brakujących źródeł.
Łączymy z produktem i weryfikujemy
Budujemy uzgodniony zakres, testujemy go z właścicielem produktu i planujemy kontrolowane uruchomienie. Kolejne zbiory dokumentów lub grupy użytkowników wymagają osobnego uzgodnienia, jeśli nie należą do pierwszej wersji.
Kontrola, ocena i odpowiedzialność
Źródła i kryteria odbioru
Sprawdzamy poprawność odpowiedzi, jej oparcie w źródłach oraz odmowę odpowiedzi, gdy brakuje informacji. W testach uwzględniamy nieaktualne dokumenty, sprzeczne treści i próby uzyskania danych objętych ograniczeniami.
Błędy i obsługa zastępcza
Ustalamy, co zobaczy użytkownik, gdy źródło, wyszukiwanie lub model są niedostępne. Brak podstaw nie powinien prowadzić do stanowczej rekomendacji. Możliwą reakcją jest zwykłe wyszukiwanie lub przekazanie pytania do człowieka.
Aktualizacje i odpowiedzialność
Wskazujemy osobę odpowiedzialną za treść oraz za utrzymanie techniczne. Uzgadniamy kontrolę aktualizacji, usuwanie danych, zakres rejestrowania zdarzeń i ponowne testy po zmianie dokumentu, instrukcji dla modelu lub samego modelu.
Przed rozpoczęciem
Co przygotować do rozmowy
Prześlij przykładowe pytania, materiały, które możesz udostępnić, role użytkowników i ograniczenia wdrożenia.
Wskaż właściciela źródeł oraz obecny problem: brak dowodów, nietrafne wyszukiwanie czy czas tracony na szukanie.
Jeśli dostępność danych lub wykonalność są niejasne, zacznij od analizy.
Wykonywanie czynności w kilku systemach wymaga osobnego zakresu procesu.
Kiedy wybrać inną ścieżkę
- Brakuje użytecznych źródeł, zgody na ich przetwarzanie lub osoby odpowiedzialnej za treść: najpierw wyjaśnij te kwestie w sprincie analitycznym.
- Zwykłe wyszukiwanie lub funkcja obecnej bazy wiedzy rozwiązuje problem: porównaj tę możliwość przed zleceniem integracji.
- Głównym zadaniem jest zapis danych lub wykonywanie czynności w kilku systemach: oprócz wyszukiwania trzeba ustalić zakres automatyzacji i akceptacji.
Pytania przed rozpoczęciem współpracy
Czy potrzebujemy nowej bazy wiedzy?
Niekoniecznie. Zaczynamy od źródeł, które już utrzymujesz. W briefie określimy potrzebne integracje i ewentualne uporządkowanie dokumentów, zamiast zakładać migrację przed ich przeglądem.
Czy RAG eliminuje błędne odpowiedzi?
Nie. Odnośniki do źródeł pomagają sprawdzić odpowiedź, ale wyszukiwanie i generowanie nadal wymagają testów. Ustalmy, kiedy system odmawia odpowiedzi i które wyniki sprawdza człowiek.
Czy można użyć danych prywatnych?
Przed udostępnieniem wrażliwych próbek omówmy dozwolone przetwarzanie, środowisko wdrożenia, dostęp i okres przechowywania. Prywatny hosting jest opcją do oceny, a nie zapewnieniem, że każda architektura spełnia Twoje obowiązki.
Od czego zależą koszt i termin?
Od dostępu do systemów, jakości dokumentów, złożoności uprawnień, zakresu testów i ograniczeń wdrożenia. Wycena wymaga ustalenia tych zależności. W rozmowie uwzględnimy też bieżące koszty modeli i infrastruktury.
Poznaj integracje dokumentów i źródeł wiedzy
W opisach realizacji sprawdź, jak połączono źródła wiedzy z produktem i gdzie użytkownik weryfikuje odpowiedź. Na rozmowę wybierz przykład najbliższy sposobowi pracy Twojego zespołu.
Ustal zakres odpowiedzi na podstawie dokumentów
Opisz produkt, przykładowe pytania i źródła wiedzy. Omówimy zakres integracji lub analizy potrzebnej do jego ustalenia.