Dosya tabanlı bir bilgi birikimi ambarı oluşturma

Dosya tabanlı bilgi birikimi ambarları, yapılandırılmamış verilerinizi bir vektör veritabanına yerleştirmenize ve depolamanıza olanak tanır. Bu, artırılmış bağlamın, Almayla Artırılmış Üretim (RAG) uygulamaları için bir bağlam olarak kullanılmak üzere anlamsal arama özellikleriyle alınmasını sağlar.

Desteklenen giriş biçimleri şunlardır: PDF, TXT ve Word DOCX.

Qlik Data Gateway - Data Movement uygulamasını yükleme

Dosya tabanlı bilgi birikimi ambarları oluşturmadan önce, belirli bir Qlik Data Gateway - Data Movement yüklemeniz gerekir. Daha fazla bilgi için bk. Bilgi birikimi ambarları için Qlik Data Gateway - Data Movement ayarlama.

Desteklenen bağlantılar

Desteklenen şu öğeler hakkında bilgi için:

• Vektör veritabanları, bkz. Vektör veritabanlarına bağlanma.
• LLM bağlantıları, bkz. LLM bağlantılarına bağlanma.
• Dosya depolama alanı, bkz. Dosya depolamasına bağlanma.

Dosyaları oluşturma

1. Sol menüdeki Projeler'e tıklayın ve bir proje açın.
2. Proje sayfasından, dosya tabanlı bir bilgi birikimi ambarı oluşturabilirsiniz. Şu iki eylemden birini yapın:
   • Yeni oluştur > Dosya tabanlı bilgi bankası ambarı'na tıklayın.
   • Veri görevi > Dosya tabanlı bilgi bankası ambarı seçeneğine tıklayın.

   Yapılandırma penceresi açılır.

3. Bir ad girin.
4. Açıklama girin. Bu isteğe bağlıdır.
5. Bir Kaynak bağlantısı oluşturun veya seçin.

6. Vektörleri şurada sakla: açılır listesinden belgelerin depolanacağı yeri seçin. Belgeleri projeyle birlikte saklamak için Veri projesi platformu'nu seçin.

7. Harici vektör veritabanını seçtiyseniz bir Vektör veritabanı bağlantısı oluşturun veya seçin. Belgeler ve vektörler bu vektör veritabanında saklanacaktır.
8. Bir LLM bağlantısı oluşturun veya seçin. Bu bağlantı anlamsal aramayı kullanmak için gereklidir.
9. Oluştur'a tıklayın.
10. Bilgi birikimi ambarı oluşturulduğunda, belgeleri ekleyin.

Dosyalar ekleme

1. Veri görevi sayfasının Klasörler sekmesinde bir klasör seçin veya yeni bir klasör seçmek için Klasör seç'e tıklayın.
2. Klasöre göz atın, klasörün onay kutusunu seçin.

   Klasörlerdeki tüm dosyalar, klasöre ne zaman eklendiklerine bakılmaksızın, desteklenen biçimlerden birindeyse okunacaktır.

   Dizinde zaten var olan bir dosyayı bir klasörden sildiğinizde, veriler dizinde kalır. Verileri dizinden kaldırmak için aynı dosyayı kullanın ancak boş bırakın.

   Klasördeki dosyaların listesini görüntülemek için klasöre sağ tıklayın.

3. Klasör seç penceresini kapatmak için Kaydet'e tıklayın.
4. Yığın boyutunu ve yığın çakışmasını düzenlemek için Ayarlar > Çalışma zamanı'na tıklayın.
5. Dizin adını düzenlemek için Ayarlar > Vektör veritabanı ayarları'na tıklayın.

   Daha fazla bilgi için bk. Dizin adı.

6. Sağ taraftaki > Hazırla öğesine tıklayın.
7. Hazırlık tamamlandığında Çalıştır'a tıklayın. Belgeler ekleniyor ve aktarılıyor.

   Çalıştır düğmesi etkin olduğunda aktarım tamamlanır.

8. İlk tam yükte her bir dosyanın durumunu doğrulayın:
   1. Menüden İzle'yi seçin.
   2. Sayfanın altındaki Tam yük durumu'nu seçin.

      

   3. Bazı dosyalar başarısız olduğunda ve her şeyi yeniden çalıştırmadan önce, hataları düzeltin veya dosyaları silin. Dosyaları hatalı olarak tutarsanız sonraki çalıştırmalar başarısız olur.
   Bilgi notuTüm dosyaların yeniden yüklenmesi ekstra maliyetlere neden olabilir.

Dosyalarınız doğru olduğunda, verileriniz hakkında sorular sorabilirsiniz. Daha fazla bilgi için bk. Test asistanını kullanma.

Tam yük ve Değişiklik verisi yakalama (CDC)

Tam yük ve CDC desteklenmektedir.

Tam yük: Her belge örneği için bir belge oluşturulur ve hedefe gönderilir.

CDC: Bir belge, herhangi bir değişiklikten sonra yeniden oluşturulur.

Bir dosya değiştirildiğinde veya eklendiğinde, belgeler bu dosyadan okunur. Dosya, yığın boyutuna ve çakışmaya göre yığın belgelerine bölünecektir.

İlk tam yükte her bir dosyanın durumunu doğrulayın:

1. Menüden İzle'yi seçin.
2. Sayfanın altındaki Tam yük durumu'nu seçin.

   

3. Bazı dosyalar başarısız olduğunda ve her şeyi yeniden çalıştırmadan önce, hataları düzeltin veya dosyaları silin. Dosyaları hatalı olarak tutarsanız sonraki çalıştırmalar başarısız olur.

Giriş verilerini güncelleme

Giriş verilerini güncellediğinizde, değişiklikleri vektör veritabanına veya veri platformuna aktarmak için veri görevini çalıştırmanız gerekir.

Eski yığınlar silindiğinden ve yeni parçalar eklendiğinden, hdr__operation alanı bir güncelleme işlemine değil, ekleme işlemine karşılık gelir. Daha fazla bilgi için bkz. Bir bulut veri deposundaki veri kümesi mimarisi.

Dizin adı

Her bilgi birikimi ambarının anlamsal arama için kullanılan bir dizin adı vardır.

Görevleri aynı dizine yazacak şekilde yapılandırdığınızda, görevler için aynı LLM parametrelerini yapılandırmanız gerekir.

Belgelerinizin aynı dizinde yer almasını istiyorsanız aynı dizin adına sahip olmaları gerekir.

Dizin adını düzenlemek için:

1. Veri görevi sayfasında Ayarlar'a tıklayın.
2. Vektör veritabanı ayarları sekmesini seçin.
3. Dizin adı'nı düzenleyin.
4. Tamam üzerine tıklayın.

Dizin adını düzenledikten sonra görevi hazırlamanız gerekir. Aksi takdirde, değişiklikleriniz sonraki çalıştırmalarda geçerli olmayacaktır.

Ayarlar

Bir bilgi birikimi ambarının ayarlarını görüntüleyebilir ve düzenleyebilirsiniz.

Veri görevi sayfasından > Ayarlar'a tıklayın.