zhparser Kullanım Kılavuzu

zhparser, PostgreSQL için üçüncü taraf bir genişletme modülüdür ve Çince metinlerin işlenmesi için özel olarak tasarlanmıştır. Çeşitli Çince metin işleme senaryoları için uygun, etkili bir kelime ayırma ve arama işlevi sağlar. ServBay, scws (Basit Çince Kelime Segmentasyonu) ile birlikte gelir ve zhparser, özel kelime dağarcıkları oluşturmak için scws kullanabilir. Bu makalede, ServBay'de nasıl kurulup kullanılacağını detaylı bir şekilde anlatacağız.

zhparser Kurulumu

ServBay, zhparser genişletme modülünü içermektedir, sadece veritabanında etkinleştirmeniz gerekmektedir. zhparser'ı etkinleştirme adımları aşağıdadır:

1. PostgreSQL veritabanına bağlanma:

   psql -U your_username -d your_database

2. Genişletme oluşturma:

   CREATE EXTENSION zhparser;

3. Kurulumu doğrulama:

   \dx

zhparser Konfigürasyonu

zhparser'ı etkinleştirdikten sonra, doğru Çince kelime ayırma ve tam metin arama işlemleri için bir dizi ayar yapmanız gerekecektir.

Metin Arama Konfigürasyonu (Text Search Configuration)

1. Metin arama konfigürasyonu oluşturma:

   CREATE TEXT SEARCH CONFIGURATION chinese (PARSER = zhparser);

2. Sözlük ekleme:

   ALTER TEXT SEARCH CONFIGURATION chinese ADD MAPPING FOR n,v,a,i,e,l WITH simple;

zhparser ile Tam Metin Arama

Aşağıda, zhparser'ı kullanarak tam metin arama işlemlerini nasıl gerçekleştireceğinizi gösteren bir örnek bulunmaktadır.

Örnek Tablo ve Veri Oluşturma

1. Tablo oluşturma:

   CREATE TABLE documents (
       id SERIAL PRIMARY KEY,
       content TEXT
   );

2. Örnek veri ekleme:

   INSERT INTO documents (content) VALUES
   ('我爱自然语言处理'),
   ('中文分词是文本处理的重要步骤'),
   ('zhparser是一个很好的中文分词工具');

Tam Metin Arama İndeksi Oluşturma

1. GIN indeksi oluşturma:

   CREATE INDEX idx_gin_content ON documents USING gin (to_tsvector('chinese', content));

Tam Metin Arama Yürütme

1. Arama sorgusunu yürütme:

   SELECT * FROM documents
   WHERE to_tsvector('chinese', content) @@ to_tsquery('chinese', '中文 & 分词');

   Bu sorgu, "中文" ve "分词" kelimelerini içeren dokümanları döndürecektir.

Özel Sözlük

ServBay, scws ile birlikte gelir ve belirli uygulama ihtiyaçlarını daha iyi karşılamak için scws kullanarak özel kelime dağarcıkları oluşturabilirsiniz.

Özel Kelimeler Ekleme

1. Özel sözlük dosyası oluşturma:

   /Applications/ServBay/etc/scws/custom_dict.txt

2. Dosyaya her satıra bir kelime olacak şekilde kelimeler ekleyin:

   自然语言处理
   中文分词

3. zhparser'ı özel sözlük kullanacak şekilde yapılandırma:

   SET zhparser.dict_path = '/Applications/ServBay/etc/scws/custom_dict.txt';

Sözlüğü Yeniden Yükleme

1. Sözlüğü yeniden yükleme:

   SELECT zhprs_reload_dict();

Kelime Ayırma Modunu Ayarlama

zhparser, çeşitli kelime ayırma modlarını destekler, ihtiyaçlarınıza göre ayarlayabilirsiniz.

Kelime Ayırma Modunu Ayarlama

1. En ince taneli kelime ayırma modunu ayarlama:

   SET zhparser.seg_with_duality = true;

2. En büyük taneli kelime ayırma modunu ayarlama:

   SET zhparser.seg_with_duality = false;

Özet

zhparser, güçlü bir Çince kelime ayırma aracıdır ve basit konfigürasyon ve kullanımla PostgreSQL'de etkili Çince tam metin aramaları gerçekleştirebilirsiniz. ServBay, zhparser genişletme modülünü ve scws'yi içerir, bu sayede özel kelime dağarcıkları oluşturabilirsiniz. Özel sözlük ve kelime ayırma modunu ayarlayarak, belirli uygulama ihtiyaçlarınıza uygun kelime ayırma sonuçlarını daha da optimize edebilirsiniz.