Develop and Download Open Source Software

$ psql -f /usr/local/pgsql/share/pgsenna2.sql testdb

custom_variable_classes = 'ludia'
ludia.max_n_sort_result = 10000
ludia.enable_seqscan = on
ludia.sen_index_flags = 31
ludia.max_n_index_cache = 16

CREATE TABLE table1 (col1 text, col2 varchar(128));
INSERT INTO table1 VALUES ('すもももももももものうち', 'あの壺はよいものだ');
INSERT INTO table1 VALUES ('ももから生まれた桃太郎', 'あの壷はよいものだ');

CREATE INDEX index1 ON table1 USING fulltext(col1);

CREATE INDEX index2 ON table1 USING fulltextb((col2::text));

SELECT * FROM table1 WHERE col1 @@ 'もも';
           col1           |        col2
--------------------------+--------------------
 すもももももももものうち | あの壺はよいものだ
 ももから生まれた桃太郎   | あの壷はよいものだ
(2 rows)

SELECT col1, pgs2getscore(table1.ctid, 'index1') FROM table1 WHERE col1 @@ 'もも';
           col1           | pgs2getscore
--------------------------+--------------
 すもももももももものうち |           10
 ももから生まれた桃太郎   |            5

SELECT relfilenode FROM pg_class WHERE relname = 'index1';

SELECT oid FROM pg_database WHERE datname = 'dbname';

DROP INDEX index1;

# DROP TABLE table1;
DROP TABLE

# SELECT pgs2destroy();
 pgs2destroy
-------------
           1
(1 row)

# SET enable_indexscan TO off;
SET

# EXPLAIN SELECT col1 FROM table1 WHERE col1 @@ 'もも';
                      QUERY PLAN
-------------------------------------------------------
 Seq Scan on table1  (cost=0.00..1.02 rows=1 width=32)
   Filter: (col1 @@ 'もも'::text)
(2 rows)

# SELECT col1 FROM table1 WHERE col1 @@ 'もも';
ERROR:  pgsenna2: sequencial scan disabled.
ERROR:  pgsenna2: sequencial scan disabled.

# SET ludia.enable_seqscan TO on;
SET

# SELECT col1 FROM table1 WHERE col1 @@ 'もも';
           col1
--------------------------
 すもももももももものうち
 ももから生まれた桃太郎
(2 rows)

# SELECT col1 FROM table1 WHERE col1 @@ 'もも + 桃太郎';
           col1
--------------------------
 ももから生まれた桃太郎
(1 rows)

# SHOW ludia.max_n_sort_result;
 ludia.max_n_sort_result
-------------------------
 10000
(1 row)

# SELECT col1, pgs2getscore(ctid, 'index1') FROM table1 WHERE col1 @@ 'もも';
           col1           | pgs2getscore
--------------------------+--------------
 すもももももももものうち |           10
 ももから生まれた桃太郎   |            5
(2 rows)

# SET ludia.max_n_sort_result TO 1;
SET

# SELECT col1, pgs2getscore(ctid, 'index1') FROM table1 WHERE col1 @@ 'もも';
           col1           | pgs2getscore
--------------------------+--------------
 すもももももももものうち |           10
(1 row)

#define SEN_INDEX_NORMALIZE                     0x0001
#define SEN_INDEX_SPLIT_ALPHA                   0x0002
#define SEN_INDEX_SPLIT_DIGIT                   0x0004
#define SEN_INDEX_SPLIT_SYMBOL                  0x0008
#define SEN_INDEX_NGRAM                         0x0010
#define SEN_INDEX_DELIMITED                     0x0020

ludia.sen_index_flags = 19

# SELECT * FROM table1 WHERE col1 @@ 'もも';
           col1           |        col2
--------------------------+--------------------
 すもももももももものうち | あの壺はよいものだ
 ももから生まれた桃太郎   | あの壷はよいものだ
(2 rows)

# SELECT pgs2getnhits();
 pgs2getnhits
--------------
            2
(1 row)

# SELECT * FROM table1 WHERE col1 @@ 'もも' LIMIT 0;
 col1 | col2
------+------
(0 rows)

# SELECT pgs2getnhits();
 pgs2getnhits
--------------
            2
(1 row)

# select pgs2pdftotext1('/tmp/PostgresForest.pdf');
 pgs2pdftotext1
-----------------

高性能・高信頼の並列分散データベース環境を低コストで実現 複数ノード上
でそれぞれ稼動している PostgreSQL をシングルシステムイメー ジとしてユー
ザに提供 PostgreSQL と互換性があるため、アプリケーション開発時に新たな
トレーニン グが不要 オープンソースでのシステム構築可能性を向上
...(省略)

# select pgs2pdftotext1('\\120\\104\\106\\055\\061\\056\\064\\012...(省略)');

# CREATE TABLE pdffiles (id SERIAL PRIMARY KEY, filepath text, filedata bytea);

# \d pdffiles
                          Table "public.pdffiles"
  Column  |  Type   |                       Modifiers
----------+---------+-------------------------------------------------------
 id       | integer | not null default nextval('pdffiles_id_seq'::regclass)
 filepath | text    |
 filedata | bytea   |
Indexes:
    "pdffiles_pkey" PRIMARY KEY, btree (id)

# SELECT id, filepath, substring(encode(filedata, 'hex') from 1 for 30) FROM pdffiles;
 id |        filepath         |           substring
----+-------------------------+--------------------------------
  1 | /tmp/PostgresForest.pdf | 255044462d312e340a25c7ec8fa20a
(1 row)

# CREATE INDEX pidx1 on pdffiles USING fulltextb(pgs2pdftotext1(filepath));
CREATE INDEX

# CREATE INDEX pidx2 on pdffiles USING fulltextb(pgs2pdftotext2(filedata));
CREATE INDEX

# \d pdffiles
                          Table "public.pdffiles"
  Column  |  Type   |                       Modifiers
----------+---------+-------------------------------------------------------
 id       | integer | not null default nextval('pdffiles_id_seq'::regclass)
 filepath | text    |
 filedata | bytea   |
Indexes:
    "pdffiles_pkey" PRIMARY KEY, btree (id)
    "pidx1" fulltextb (pgs2pdftotext1(filepath))
    "pidx2" fulltextb (pgs2pdftotext2(filedata))

# SELECT id FROM pdffiles WHERE pgs2pdftotext1(filepath) @@ '高性能';
 id
----
  1
(1 row)

# SELECT id FROM pdffiles WHERE pgs2pdftotext2(filedata) @@ '高信頼';
 id
----
  1
(1 row)

# SELECT pgs2snippet1(1, 32, 1, '<em>', '</em>', 0, '筋肉痛',
    '怪我もなく東京マラソンを完走したが、翌日は筋肉痛のため有給休暇を取得した。');
       pgs2snippet1
-------------------------------
 、翌日は<em>筋肉痛</em>のため
(1 row)

# SELECT pgs2snippet1(1, 32, 1, '<em>', '</em>', -1, '筋肉痛', col1)
    FROM table1 WHERE col1 @@ '筋肉痛';
                       pgs2snippet1
----------------------------------------------------------------
 、翌日は<em>筋肉痛</em>のため
(1 row)

# \x
Expanded display is on.
# SELECT * FROM pgs2indexinfo();
-[ RECORD 1 ]------+------
filename           | 49650
dead_flag          | 0
key_size           | 6
flags              | 17
initial_n_segments | 512
encoding           | 3
nrecords_keys      | 110
file_size_keys     | 8462336
nrecords_lexicon   | 2432
file_size_lexicon  | 8462336
inv_seg_size       | 125997056
inv_chunk_size     | 13516

# SELECT pgs2version();
 pgs2version
-------------
 ludia 1.0.0
(1 row)

Develop and Download Open Source Software

Ludia

View README

category（Tag） tree

file info

Ludia 1.0.0 README

Ludiaについて

概要

ライセンス

制限事項

動作環境

連絡先

インストール

使い方

インデックスアクセスメソッドの登録

設定ファイルの編集

インデックスの作成

検索の実行

インデックスの削除

実行時の設定

シーケンシャルスキャンの抑制

検索ヒット数の上限の設定

Sennaインデックス作成時のオプション

使い方(応用編)

ヒット件数を高速に取得する

テキストフィルタを利用する

Snippetを作成する

インデックス情報を取得する

バージョンを表示する