Словари для полнотекстового поиска

КОгда-то я тестировал поиск по словарю, для этого конвертировал словари myspell. А теперь существует и стандартная утилит для этого:

$ apt-file search pg_updatedicts
postgresql-common: /usr/sbin/pg_updatedicts
postgresql-common: /usr/share/man/man8/pg_updatedicts.8.gz

man pg_updatedicts

PG_UPDATEDICTS(8) Debian PostgreSQL infrastructure PG_UPDATEDICTS(8)

NAME
pg_updatedicts - build PostgreSQL dictionaries from myspell/hunspell
ones

SYNOPSIS
pg_updatedicts

DESCRIPTION
pg_updatedicts makes dictionaries and affix files from installed
myspell and hunspell dictionary packages available to PostgreSQL for
usage with tsearch and word stem support. In particular, it takes all
*.dic and *.aff files from /usr/share/myspell/dicts/, converts them to
UTF-8, puts them into /var/cache/postgresql/dicts/ with *.dict and
*.affix suffixes, and symlinks them into
/usr/share/postgresql/>version/tsearch_data/system_*, where PostgreSQL
looks for them.

Through postgresql-common’s dpkg trigger, this program is automatically
run whenever a myspell or hunspell dictionary package is installed or
upgraded.

AUTHOR
Martin Pitt

Debian 2009-02-15 PG_UPDATEDICTS(8)


Еще полезен словарь стоп-слов (ссылки на некоторые доступные в сети словари я уже приводил ранее):

$ apt-file search russian.stop
postgresql-8.3: /usr/share/postgresql/8.3/tsearch_data/russian.stop
postgresql-8.4: /usr/share/postgresql/8.4/tsearch_data/russian.stop

Comments

Post a Comment

Popular posts from this blog

Открытый софт для научных расчетов

Задачки у меня бывают разные, кратенькое описание того, что может потребоваться я приводил здесь: Софт для спектрального анализа/численного моделирования/etc. Дело происходит в Linux Debian, соответственно, интересует софт, который устанавливается из стандартного репозитория (что подразумевает опенсорсность).  Для начала я протестировал двумерное Фурье преобразование (прямое и обратное) на широко известном тестовом изображении Lenna. Заодно в процессе поиска нужных функций увидел заметки об истории этого изображения  Просто Лена  и  Обработка изображений: кто такая Лена Выбор софта для такой типичной задачки вполне себе наличествует: Scientific Computing with Free software on GNU/Linux HOWTO Пакеты прикладных программ Инструменты визуализации данных для Linux На практике же оказалось не так радужно, как хотелось бы. Из того, что есть в дебиане, работает "из коробки" только пакет octave . Зато для него можно установить множество расширений - нап
Read more

Счетчики в SQLite

Недавно ко мне обратился прикладной программист, работающий с моим фрэймворком для AOLServer и SQLite с вопросом, как ему сделать счетчик записей, возвращенных запросом. Разумеется, можно создать временную таблицу или забиндить тиклевскую функцию, но есть и более простой способ - использовать написанный мною модуль key или tempkey (отличаются только тем, что последний использует временную таблицу, таким образом, при хранении временных объектов в ОЗУ не требуется запись на диск). Модуль key создает при инициализации таблицу keys (а модуль tempkey - временную таблицу tempkeys), в которой и будут храниться все ключи; таким образом, можно использовать практически неограниченное количество ключей без ущерба для производительности и не нуждаясь в большом количестве ОЗУ. Рассмотрим на примере неименованного временного счетчика: create table colors(name text); insert into colors values ('Red'); insert into colors values ('Green'); insert into colors values ('Blue'); sel
Read more

Модем Huawei E1550 в debian

Было дело, когда-то я активно пользовался gprs, который был хиленьким, глючным и дорогим каналом доступа в интернет, но - был. Прошли годы, появился сначала анлим доступ в интернет через проводной модем, потом анлим по эзернет... Про gprs вспоминал редко - когда хотелось поработать вдали от цивилизации, но недоступность анлим-тарифов убивала эту идею на корню. Сегодня ситуация меняется - появились недорогие анлим-тарифы, да и edge зачастую доступен вне городов (3g-доступ пока возможен лишь в крупных городах). Итак, пришло время, а тарифы далее будут лишь снижаться. Начинаем, разумеется, с выбора оборудования, то есть модема. Погуглив, я остановился на модели USB-модем Huawei E1550 . Теперь посмотрим, как нам его подключить в debian. Замечу, что в сети полным-полно сильно замудренных историй о настройке этого устройства в убунту и дебиане - но содержат они или полный бред, или обрывочные куски некоего тайного знания. Вот как пример: Настройка интернета USB-модем Huawei E1550 в Ubuntu
Read more