Ｚｏｐｅメモ

今野です

新しい (encodeを外した) ejSplitter-0.3 と古いもので試してみました。
ejSplitter と 文字コード変えるたび (合計 4 回) zope をリスタートしてます。

"aiueoあいうえお" とだけ書いた DTML Document があるフォルダで試してみました。
新 ejSplitter は euc-jp では問題が見付かりませんでした。
utf-8 ではエラーが出ました。
(試験方法はシグネチャ以降に添付します)

---+--------+-------+----------+---------+---------+-------+---------+
| ＼キー| 空白 |あいうえお| あ* |あいう | a* | aiueo |
===*========*=======*==========*=========*=========*=======*=========*
新 | euc-jp | aiueo | aiueo | aiueo |(なし) | aiueo | aiueo |
+--------+-------+----------+---------+---------+-------+---------+
| utf-8 | aiueo |●(err-1) | aiueo |●(err-1)| aiueo |●(err-1)|
---+--------+-------+----------+---------+---------+-------+---------+
旧 | euc-jp | aiueo | aiueo |●(err-2)|●aiueo | aiueo | aiueo |
+--------+-------+----------+---------+---------+-------+---------+
| utf-8 | aiueo | aiueo |●(err-2)|(なし) | aiueo | aiueo |
---+--------+-------+----------+---------+---------+-------+---------+

●(err-1):
Error Type: TypeError
Error Value: decoding Unicode is not supported

●(err-2):
Error Type: UnicodeError
Error Value: ASCII decoding error: ordinal not in range(128)


On Thu, 08 Jan 2004 19:22:24 +0900
Hajime Nakagami <nakagami@…> wrote:

環境は zope-2.6.2, python-2.1.3, Vine2.6r3相当(kernel-2.4.22)です
# スレッド長くなって見辛いかと思い変えました
--
Shu KONNO
http://owa.as.wakwak.ne.jp/zope


∞∞∞∞∞∞∞∞ 試験方法 ∞∞∞∞∞∞∞∞
■ 0. ディレクトリ
/SplitterTestEUC --- management_page_charset を euc-jp に設定
/SplitterTestUTF --- management_page_charset を utf-8 に設定

■ 1.1 フォルダ作成
/SplitterTestEUC/MyCatalog --- ZCatalog インスタンス
/SplitterTestEUC/aiueo --- DTML Document (中身は「aiueoあいうえお」のみ)

■ 1.2 ZCTextIndex Lexicon を作成
/SplitterTestEUC/MyCatalog/lexicon --- ZCTextIndex Lexicon

id: lexicon
title: なし
Case Normalizer: チェック (デフォルト)
Stop Words: Don't remove stop words (デフォルト)
Word Splitter: ejSplitter for Japanese(euc-jp) を選択

■ 1.3 Find Objects を実行
Find objects of type: DTML Document のみを選択
他はデフォルトのまま [Find and Catalog] をクリックすると
Catalog タグに自動で移動して

Object Identifier Type
----------------------------------------
[ ] /SplitterTestEUC/aiueo Unknown

と表示される (zope2.5.3 では type がちゃんと表示されたが...)

■ 1.4 Indexes を実行
ZCTextIndex を選択し [Add] をクリックする

id: PrincipiaSearchSource
Field name: なし
Ranking Strategy: Okapi BM25 Rank (デフォルト)
Lexicon: lexicon (デフォルト)
と指定し、再度 [Add] をクリックする

PrincipiaSearchSource をチェックし [Reindex] をクリックすると
Object のカウントに 2 が立つ。

■ 1.5 Python Script を使い検索する
/SplitterTestEUC/searchCatalog --- Python Script
/SplitterTestEUC/showSimpleResut --- DTML Method

(http://www.freeml.com/message/zope-memo@…/0000525 で投稿したもの)

■ 2.1, 2.2, ... 2.5 euc-jp を utf-8 に替えてテストする

∞∞∞∞∞∞∞∞ おわり ∞∞∞∞∞∞∞∞