iv_s Apr 22 2009 at 11:34

SQLite и полноценный UNICODE

2 min

31K

SQL*SQLite*

+23

Comments 22

infotim Apr 22 2009 at 13:06

Можно обойтись без самосборки. 15 марта этого года в unstable появилсь сборка sqlite3, решающая данную проблему.

$ echo $LANG
ru_RU.UTF-8
$ sudo apt-get -qq -t unstable install sqlite3
$ sqlite3
sqlite> SELECT "ы" LIKE "Ы";
1

iv_s Apr 22 2009 at 16:30

Хорошая новость. Но в macports как всегда через год появится, если вообще появится…

hellraiser09 Apr 22 2009 at 16:40

ну так соберите и сами и отправьте мэинтейнерам MacPorts

iv_s Apr 22 2009 at 16:44

Собрать пакет — знаний не хватает. Но я конечно попытаюсь:) А фич реквест — да, в любом случае напишу.

da_elf Jan 23 2012 at 18:33

Хочу такое счастье на ipad. Не думаю что Apple одобрит sqlite3_enable_load_extension(), да и свежего, а значит, сырого кода sqlite тоже долго ждать прийдется.

Спасибо автору за пост, без статьи про грабли я бы не узнал что такие грабли есть.

homm Apr 22 2009 at 16:52

А для windows есть решение?

iv_s Apr 22 2009 at 17:02

К сожалению windows'а у меня нет… Но думаю, точно так же можно собрать с помощью MSVC. В крайнем случае попробовать cygwin.
ICU для windows есть: icu-project.org/download/4.0.html#ICU4C
При компилляции SQLite с поддержкой ICU нужно указать дефайн SQLITE_ENABLE_ICU(-DSQLITE_ENABLE_ICU для gcc, для MSVC не знаю). Ну и соответствено путь к хидерам и к самой либе ICU.
Попробуйте. Отпишитесь если удастся:)

Mezomish Apr 22 2009 at 17:28

Я прошу прощения, но

Давайте разберемЬся как же это исправить.

?

iv_s Apr 22 2009 at 17:31

Упс, спасибо, исправлено:)

AHrEJI Apr 22 2009 at 20:05

Я решал эту проблему другим образом.
Переопределил функцию LIKE и стал отрабатывать ее сам.

Кроме того я таким методом сразу устранил проблему иньекций и прочего.

iv_s Apr 22 2009 at 20:14

Тоже вариант, тогда и REGEXP тоже до кучи, мне ее в SQLite всегда не хватает.
И, как понимаю, вы от зависимости от ICU избавились?

maovrn Apr 22 2009 at 23:37

Можно подробнее, как это сделать?

iv_s Apr 23 2009 at 00:00

В исходниках функция likeFunc овечает за обработку LIKE, просто ее переписать и собрать измененный исходник.

umonkey Apr 23 2009 at 14:50

Это, наверное, должно дико тормозить?

naum Apr 22 2009 at 20:31

Достаточно пропатчить массив sqlite3UpperToLower (надо бы его расширить) + исправить где-надо range, если мне память не изменяет.

Anton_Shevtsov Aug 11 2009 at 10:57

Все конечно замечательно, но как быть если регистронезависимый поиск сделать надо, но перекомпилять невозможно (шаред хостинг к примеру).

victorI Mar 16 2010 at 09:42

так как гугл по запросу «sqlite icu lower» выдает ссылку на эту страницу одной из первых, небольшой апдейт :)
1) sqlite3 на текущий момент собирается без icu (как написано в ченджлоге, это создало проблем больше, чем решило)
2) для AMD64 при сборке icu надо указывать параметр -fPIC
3) чтобы собранный с icu sqlite3 правильно установить в Ubuntu, надо configure вызывать с параметром prefix, иначе либа установиться в папку /usr/local/, и системно будет использоваться версия, установленная apt-get

$ CFLAGS='-Os -DSQLITE_ENABLE_ICU' CPPFLAGS=`icu-config --cppflags` LDFLAGS=`icu-config --ldflags` ./configure --prefix=/usr/

jellyfish Mar 17 2010 at 19:34

3) как правило во всех линуксах:
в /usr — только то, что в пакетах (deb, rpm, ...)
а собранное самостоятельно — в /usr/local

jellyfish Mar 17 2010 at 19:32

дополнения для debian:

1. wget в stable записывает имя файла как getfile\?f\=sqlite%2Fext%2Ficu%2Ficu.c => лучше поправить:
$ wget www.sqlite.org/cvstrac/getfile?f=sqlite/ext/icu/icu.c -O icu.c

2. для сборки необходим пакет libsqlite3-dev:
$ sudo apt-get install libsqlite3-dev

Joric Oct 7 2010 at 13:22

Ленивый вариант для русского LIKE в sqlite-amalgamation-3_7_2 (работает без icu):

-# define GlogUpperToLower(A) if( A<0x80 ) { A = sqlite3UpperToLower[A]; }

+# define GlogUpperToLower(A) if( A<0x80 ) { A = sqlite3UpperToLower[A]; } if ( A >= 0x0410 && A <= 0x042f) { A += 0x20; }

Ramzeska Apr 17 2013 at 04:28

Мда, жаль без патча никак

uranik Apr 18 2014 at 10:21

Ну может когда нибудь в официальную сборку введут, и не надо будет мучиться. sqlite сразу в разы станет популярнее.

Show the best of all time