X
トップページ⇒Linux
465コメント173KB
namazuでサーバーを立てたい
0001名無しさん＠ディストリいっぱい
垢版 |
NGNG
この板の過去ログを検索したくても不便です。
そこでnamazuを使って検索用のサーバーを立てようと思います。みんなのために。
namazuのインストールは終了しました。動作もばっちりです。
ただログを収集するのが大変です。
自動的にログを収集してくれるスクリプトってないですか？
っていうかそんなの持ってる人いたらください。
あと
http://cocoa.2ch.net/linux/dat/
↑ここからログを拾うとdatファイル形式なのでhtmlで表示されません。
ログはどこから拾ってくればいいんでしょうか？
html形式で保存されているほうが何かと便利なんですけど。
0314ディストリいっぱい
垢版 |
01/09/29 23:51ID:gAs/Bj.E
ちなみに >>312 >>313 は自分で書き込みました。
誰も反応してくれないとさみしいんで。。。
0315login:Penguin
垢版 |
01/09/30 00:06ID:s8gsnkrQ
>>311
技術的なことはちんぷんかんぷんですが、
本当におめでとうございます。
0316ディストリいっぱい
垢版 |
01/09/30 00:14ID:2uU1/ecY
あ、本当に祝ってもらえた。うれしいです。ありがとうございます。
0318うろんぐ
垢版 |
01/11/30 17:52ID:0UsyWI7S
Web ページで検索できるようにする前に、emacs から検索してみようと思って namazu.el を入れてみた。

でも、M-x namazu で検索文字列を入れてみると
Wrong type argument: stringp, nil
と表示されて検索できなかった。

コマンドラインから namazu で検索するとちゃんと検索できてるのになぁ。

何が悪いのでしょうか？ emacs-lisp を勉強していない俺が悪いのでしょうか？
0319みみずん
垢版 |
01/11/30 20:32ID:8qsrn8Pr
最近、管理がめんどい。。。
過去ログ取得スクリプトにバグはあるしディスク障害もあるわで。

http://mimizun.mine.nu/
0320うろんぐ
垢版 |
01/12/01 08:49ID:U6ZUKGfm
>318
自己レス。
~/.namazurc でのデフォルトのインデックス指定が

Index ほげ

だったのが敗因でした。

INDEX ほげ

じゃないとだめなんですね。いや、 namazu はどっちでもいいんですが、 namazu.el で .namazurc を解析するところが INDEX しか見てくれないんですよね。それだけでした。スマソ。
0322login:Penguin
垢版 |
01/12/07 20:45ID:+fpiRIvO
>321
何がおすすめ？
合計 20GB 程度の Web サイト内の全文検索をしたい。
0323login:Penguin
垢版 |
01/12/08 11:15ID:AvJQP9li
Mitake Search なりなんなりの売り物つかうのはどうよ。

>>321 は例の私怨厨か... まだいたんだな。
0324login:Penguin
垢版 |
01/12/13 11:18ID:ugaubRPB
>323
なるほど、と思っていろいろ商用のものを見てみたんですが、
きづいたこと。
Namazu をつかってて、致命的に困っていることが、無い。
というわけで Namazu を使いつづけることにしました。
Debian 用パッケージも用意されていることだし。
0325あのみみずん@ N72ch-01p57.ppp11.odn.ad.jp
垢版 |
01/12/16 09:46ID:dwyzpYXY
Namazu いいよね。便利だし、早いし。
まぁ検索精度は低く感じるけど無料だから文句ないし。

つか、index作るのに時間かかるね・・・メモリも食うし。
0327login:Penguin
垢版 |
02/01/26 16:50ID:7jfLsj9S
kakasi の辞書、mysql とかのデータベースに格納できるとありがたいんだけどなぁ。
0328login:Penguin
垢版 |
02/01/26 21:15ID:7jfLsj9S
DocuWorks 文書用のフィルタってどなたかしりませんか？

昨年１０月ごろの ML で Fuji Xerox の開発部でも UNIX 用のフィルタの必要性は認識しているって言う話がでてたらしいんですが、その後まったく話を聞きません。

0329login:Penguin
垢版 |
02/01/26 21:30ID:UX7CiKAA
広報にたずねてみては？
個人でも邪険にされることはありませんよ
0330login:Penguin
垢版 |
02/01/26 22:35ID:cUpXDNAM
>>327
それ、ずーっと昔に試したことがあるけど、かなり遅いよ(汗
postgresでもmysqlでもoracleでもsybaseでも。

データ型のチェックとか格納のためのソートツリーの作成とか、
kakasiを使うにあたって不要な部分がボトルネックになる模様。
0331login:Penguin
垢版 |
02/01/27 00:49ID:rUkqU65a
>330
それって、kakasi のソースをいじってってことですか？
それとも毎回データベースから単語ファイルを作成して辞書ファイルを作成して…ってことですか？

もしかして前者の場合だったらパッチがあるとか…。
0332login:Penguin
垢版 |
02/01/27 05:51ID:rUkqU65a
>320
なんか久しぶりにこのスレ読んで、おもだしたので、BTS にあげときました。
0334login:Penguin
垢版 |
02/03/08 14:10ID:OE9ed93x
wvWare v0.5.x.tar.gz　どっかに無いかな。
v0.6以降からおいらのスキルじゃWord文章をうまく検索できんようになってしまった。
0336login:Penguin
垢版 |
02/03/24 00:16ID:ECEITlSW
age
0337login:Penguin
垢版 |
02/05/01 23:10ID:vlGgka0t
　
0338名無しさん＠ディストリいっぱい
垢版 |
02/05/04 01:19ID:sJTSZgK7
なんと早くも1周年。おめでたいです。
よく頑張りました。(自画自賛)
0339login:Penguin
垢版 |
02/05/04 01:28ID:rn7+GErz
>>338
コテハンはひさしぶりだな。
掲示板すごいことになってるね。
0340名無しさん＠ディストリいっぱい
垢版 |
02/05/04 01:39ID:sJTSZgK7
すごいことになってるっていうから荒らしでも来てるのかと思って見に行っちゃいました、、
あの質問づくしのことですか？もう慣れました。メールでも「削除して下さい。」とか
「書き込みができないんですけどなんでですか？」ってメールがしょっちゅうきます。
わかる範囲で答えてますけど。

1年ってあっという間だなあとしみじみとした気分です。
0341login:Penguin
垢版 |
02/05/04 07:09ID:vsdupTed
アーリーらっぱ飲みしながら>1から読破。
知らずに使っていた2ch検索にこんな歴史があったなんてね。
0342あれれ？
垢版 |
02/05/04 07:12ID:vsdupTed
空欄にしたら「名前：login:Penguin」になってしまいました。
詐称ではありませぬ。
0344login:Penguin
垢版 |
02/07/19 22:06ID:SLbxrvZg
UNIX板から来ました。

"namazu.cgi"を間違って消してしまいました。今から使おうと思ったのに

redhat7.3のrpmから入れたやつです。ちなみにバージョンは
namazu-2.0.10-4
namazu-cgi-2.0.10-4
だれかアップしていただけると助かります。お願いします。
0349login:Penguin
垢版 |
02/07/26 10:44ID:5MbssHQh
にちゃんねる検索はいいと思うんだけど、
自宅でサーバー立ててる人とかってさー
namazu何に使ってんの？
なんかおもしろい使い方ってある？
0351login:Penguin
垢版 |
02/09/04 13:04ID:+A/E5ACP
感謝age
0353login:Penguin
垢版 |
02/09/22 12:59ID:nEa4cqUa
つか/settei/がIndex表示になってないな。
shスクリプトとか欲しいのに。
0354login:Penguin
垢版 |
02/09/22 13:13ID:N4s7ITei
2ch.shだと思ってたが名前変更されてたんだな。俺もちょっと探したけど見つけた。
http://2ken.net/settei/linux.sh
これだろう。でもわざわざこれを取得しなくてもこのスレに書かれてるのと同じだと思うが。
但し、今はdatディレクトリが見れないからこれでは動作しないと思う。
あと3行目の set | grep LANG は不要だと思う。ここでgrepしてどうする・・
0355名無しさん＠Ｅｍａｃｓ
垢版 |
02/10/03 02:45ID:tCrncUsf

/usr/lib/mozilla/searchplugin/Googlejapan.src に
ちょっと変えてこんなんを作ってみた。

# Mozilla/2chSearch plugin
<search
name="2ch search"
description="2ch search"
method="GET"
action="http://2ch.dyn.to/cgi-bin/namazu.cgi"
queryEncoding="2561"
queryCharset="Shift_JIS"
>

<input name="key" user>
<input name="whence" value="0">
<input name="lr" value="lang_ja">
<input name="dbname" value="all">
<input name="max" value="20">
<input name="sourceid" value="mozilla-search">

<interpret
charset = "Shift_JIS"
resultEncoding = "2561"
resultListStart="<!--a-->"
resultListEnd="<!--z-->"
resultItemStart="<!--m-->"
resultItemEnd="<!--n-->"
>
</search>

0356login:Penguin
垢版 |
02/11/01 10:53ID:SkScjhB+
インデックスから日本語を排除したいと思っています。

検索対象は日本語のテキストファイル（含む LaTeX ソース、メール、ニュース）なのですが、
検索後として日本語を指定することがほとんどありません。
そこでインデックスを作る際に日本語は省いてしまいたいと思っています。
mknmzrc はどのように設定するといいのでしょうか？

現在は kakasi, chasen 共に使用できるようになっています。

あと、メールやニュースの Message-ID, In-Reply-To, References: フィールド以下の
文字列に対しては、メッセージ ID そのままの状態でインデックスに含めたいのですが、
可能でしょうか？

つまり、検索文字列としてメッセージIDを指定したいことがあるということです。
0357356
垢版 |
02/11/01 11:31ID:SkScjhB+
nkf ~/Mail/ML/IETF/1 | chasen -j -F '%?U/%m/ / ' | jless

で望む結果が得られ多っぽいです。
chasen のマニュアルによると

　　　　　　　　　%?U/STR1/STR2/

っての 『if unknown word, STR1, otherwise, STR2』 ってことなのですが、
UNKNOWN ってのは辞書に無いってことですよね？
てことは chasen の辞書に英単語が載っていたらだめなんだな。
0358356
垢版 |
02/11/01 11:32ID:SkScjhB+
nkf ってデフォルトで BASE64 のデコードしてくれるんですね。
メールの Subject: の日本語（BASE64エンコードされている） が、
デコードされててちょっと感動した。
0359独自フィルタを作りたい
垢版 |
02/11/02 12:11ID:0CRm6865
Namazu文書フィルタの作成方法
〜 Namazu 2.0 用 〜
http://www.namazu.org/~kenji/dekiru-namazu-filter.txt

ほかに参考になるサイトはありますでしょうか？
0360独自フィルタを作りたい
垢版 |
02/11/02 12:19ID:0CRm6865
特にフィールド検索に重点をおきたいと思っています。

実験結果のファイルがあって、それには実験の条件が書き込まれているので、
Word や Excel 文書の「文書のプロパティ」みたいな扱いができればと。

使用している OS は Debian GNU/Linux 3.0 (woody) です。

いくつかのフィルタを読んでみたところ、フィルタの側ではとにかく可能な限り、
フィールドの情報を抽出して返しているように思います。
フィールド名などもフィルタのほうで勝手にいくらでも作ることができるみたいです。

どのフィールドをインデックスに採用するかというのは、
フィルタから返された情報を見て mknmz が決定するのでしょうか？
0361独自フィルタを作りたい
垢版 |
02/11/02 12:25ID:0CRm6865
つまり、"+subject:linux" みたいな検索式の subject の部分に何を使えるかは、
誰がどうやっていつ指定しているか、ってことなんですが。
0362独自フィルタを作りたい
垢版 |
02/11/02 12:35ID:0CRm6865
REMAIN_HEADER vs SEARCH_FIELD
http://www.namazu.org/ml/namazu-devel-ja/msg02065.html

全文検索 Namazu 講座
http://www.rfs.jp/server/namazu/02.html

$REMAIN_HEADER
　　　RFC 822 Header などのうち本文として検索出来るものを指定
$SEARCH_FIELD
　　　フィールド検索(「+subject: 検索語」のような形式)に使える項目を指定する
$META_TAGS
　　　検索対象にするMETAタグを指定
%FIELD_ALIASES
　　　メール見出名の置換ルール

フィールド検索に関係しそうな mknmzrc の変数というと、これくらいでしょうか？
どのフィルタがどの設定項目を見ているのか、これからフィルタを読んでみます。
0363独自フィルタを作りたい
垢版 |
02/11/02 12:45ID:0CRm6865
フィルタ読んでみました。

$REMAIN_HEADER → mailnews.pl が見ている
$META_TAGS → html.pl が見ている

$SEARCH_FIELD と %FIELD_ALIASES は mknmz 本体だけが見ている？
（まぁ conf.pl でデフォルト値を設定しているのは別として）

うむ〜 NMZ.field.* 出力している部分をよんでみまつ・・・
0364独自フィルタを作りたい
垢版 |
02/11/02 15:33ID:0CRm6865
１）フィルタからフィールドのデータが連想配列で返ってくる。

２）%FIELD_ALIASES を使ってフィールド名を変換
　　%FIELD_ALIASES は
　　キー = フィルタから返ってくるフィールド名
　　値 = インデックスに登録するときのフィールド名

３）フィールド名が SEARCH_FIELD にあるものは NMZ.field.<フィールド名> に出力
　　META_TAGS を使うようオプションで指定されていたときは
　　SEARCH_FIELD だけでなく META_TAGS にあるものも対象。

ってことか・・・・ちょっと気持ち悪いのは、なぜか mailnews.pl では
メールヘッダの Subject: の内容を 'title' フィールドとして返しておいて、
mknmz 本体でわざわざ 'title' -> 'subject' への別名置き換えをやってるところ。

だったらはじめから mailnews.pl で $fields->{'subject'} = $line とかすればいいのに。
0365独自フィルタを作りたい
垢版 |
02/11/02 15:35ID:0CRm6865
今朝になって突発的に独自フィルタ作りたくなって、
my とか local ってなに？
perl の名前空間ってどうなってんの？
@ とか % とか \ とか $ とかなに？
ってとこからはじめたんで、ちゃんとソース読めてないかもしれない・・・
0366login:Penguin
垢版 |
02/11/03 02:13ID:RjWYQ8zV
Windows の Outlook の *.msg ファイルがあるんですが、
これのフォーマット分かる方おられませんか？
フィルタかいてみようかとおもったんですが、
MH 形式とはちょっと違うみたいです。
いらないバイナリデータがあちこちにちりばめられていて。
確かにテキスト部分は一部読めるんですが。
0367login:Penguin
垢版 |
02/11/03 02:26ID:RjWYQ8zV
これを使えば何とかなりそうな気がしてきました。

Converter for Microsoft Outlook 2000 (TM) .msg files
http://www.brodo.de/english/pub/msg2a/

Matijs van Zuijlen has written a Perl scriptwhich does convert Microsoft Outlook .msg files to mbox format.
He found out that the file format is OLE-compatible.
This script uses many Perl modules to extract the information,
but you should be able to find all Perl Modules either in your favourite Linux distribution, or at CPAN.

You can find his program (License: GPL), as well as documentation,
at http://www.xs4all.nl/~mvz/software/msgconv.html .
0368login:Penguin
垢版 |
02/12/04 15:44ID:t/qSISBU
まるちゃんage
0369１
垢版 |
02/12/04 16:27ID:fPwE/y/H
【まさかの】ひろゆきブチキレ【降臨】

とうとうキレさせてしまった過疎板の住人達。
あの一言さえなければこんなことにはならなかったのに。。。
目の前で忽然と消えていくスレ達。
一つのスレに集中（むしろ、おいやられていく）住民達。
ひろゆきVS住民
無論、俺は面白半分ｗ

問題の発言
http://choco.2ch.net/test/read.cgi/bobby/1038742045/119

問題のスレ
http://choco.2ch.net/test/read.cgi/bobby/1038742045/
0370IP記録実験
垢版 |
03/01/08 22:18ID:6H9Rg9t/
IP記録実験
http://qb.2ch.net/test/read.cgi/accuse/1042013605/

1 名前：ひろゆき ◆3SHRUNYAXA ＠どうやら管理人 ★ 投稿日：03/01/08 17:13 ID:???
そんなわけで、qbサーバでIPの記録実験をはじめましたー。

27 名前：心得をよく読みましょう 投稿日：03/01/08 17:20 ID:yL/kYdMc
SETTING.TXT管轄でないということは全鯖導入を視野に、か？

38 名前：ひろゆき ◆3SHRUNYAXA 投稿日：03/01/08 17:22 ID:rLfxQ17l
>>27
鋭いです。

73 名前：ひろゆき ◆3SHRUNYAXA 投稿日：03/01/08 17:27 ID:rLfxQ17l
＞ところで、IPが抜かれて何か今までと変わることってあるのでしょうか？
・今までより、サーバが重くなる。
・裁判所や警察からの照会があった場合にはIPを提出することがある。
0371login:Penguin
垢版 |
03/01/09 00:44ID:kgNvzzS1
>>47
HDDがいままでより早くいっぱいになってひろゆきと夜勤さんが困る
0373login:Penguin
垢版 |
03/01/09 01:20ID:janFKrXY
∋oノハヽo∈
　 (　´ァｮ) ＜のんのん♪
0374login:Penguin
垢版 |
03/01/09 01:30ID:janFKrXY
犯罪者はIP提出してとっとと警察へ連れて行って欲しいけど
荒らしは減らないような気がするんですが、、
そこんとこどうでしょうか？

＞ひろゆきさん
0375IP記録実験
垢版 |
03/01/09 01:49ID:5oZ7DmI3
IP記録実験
http://qb.2ch.net/test/read.cgi/accuse/1042013605/

1 名前：ひろゆき ◆3SHRUNYAXA ＠どうやら管理人 ★ 投稿日：03/01/08 17:13 ID:???
そんなわけで、qbサーバでIPの記録実験をはじめましたー。

27 名前：心得をよく読みましょう 投稿日：03/01/08 17:20 ID:yL/kYdMc
SETTING.TXT管轄でないということは全鯖導入を視野に、か？

38 名前：ひろゆき ◆3SHRUNYAXA 投稿日：03/01/08 17:22 ID:rLfxQ17l
>>27
鋭いです。

73 名前：ひろゆき ◆3SHRUNYAXA 投稿日：03/01/08 17:27 ID:rLfxQ17l
＞ところで、IPが抜かれて何か今までと変わることってあるのでしょうか？
・今までより、サーバが重くなる。
・裁判所や警察からの照会があった場合にはIPを提出することがある。
0376login:Penguin
垢版 |
03/01/09 01:54ID:YXdOQOf5
ひろゆきのﾚｲﾌﾟ予告したらIP晒されちゃうかな？
0380login:Penguin
垢版 |
03/02/04 04:14ID:A2vZpuZL
pc2サーバになってからログが取得できませんが
0383山崎渉
垢版 |
03/04/20 06:03ID:X64WTq1+
　　 ∧＿∧
　　（　　＾＾ ）＜ ぬるぽ（＾＾）
0384login:Penguin
垢版 |
03/06/24 13:30ID:/blIyPUB
|　 | ∧
|＿|Дﾟ)　こっそり保守
|文|⊂）
|￣|∧|
0385login:Penguin
垢版 |
03/06/27 13:30ID:brxZWl/z
|　 | ∧
|＿|Дﾟ)　こっそり保守
|文|⊂）
|￣|∧|
0387login:Penguin
垢版 |
03/06/28 12:36ID:RFFFPkS8
|　 | ∧
|＿|Дﾟ)　ageないと保守できないと思っているなんて・・・。
|文|⊂）
|￣|∧|
0388クンクン（壱式♂）
垢版 |
03/06/30 01:25ID:3f5V9M5o
>>387
お腹減らないのかしら・・・？
そうか！ ヌイグルミの猫ちゃんなのかしら。。。

クククのクーン。。。
0389山崎 渉
垢版 |
03/07/15 11:24ID:2JhhXBQM

　__∧＿∧_
　|（　　＾＾ ）|　＜寝るぽ（＾＾）
　|＼⌒⌒⌒＼
　＼ |⌒⌒⌒~|　　　　　　　　　山崎渉
　　 ~￣￣￣￣
0390ぼるじょあ ◆yBEncckFOU
垢版 |
03/08/02 05:41ID:GfRe8vK7
　　　 　∧＿∧　 ∧＿∧
ﾋﾟｭ.ｰ　（　 ・３・） (　　＾＾ ） ＜これからも僕たちを応援して下さいね（＾＾）。
　　＝〔~∪￣￣￣∪￣￣〕
　　＝ ◎――――――◎ 　　　　　　　　　　　　　　　　　　　　　山崎渉&ぼるじょあ
0392山崎 渉
垢版 |
03/08/15 22:59ID:dil3w4kp
　　　 (⌒V⌒)
　　　│ ＾ ＾ │＜これからも僕を応援して下さいね（＾＾）。
　　⊂|　　　　|つ
　　　（＿）（＿）　　　　　　　　　　　　　　　　　　　　　　山崎パン
0393login:Penguin
垢版 |
03/09/30 00:00ID:x7TSgVmK
画面綺麗だし、パフォーマンスもいいし、
なんか無性に感動した。
応援&保守sage

0396login:Penguin
垢版 |
04/03/17 08:12ID:YU7c9ND+
ぬるぽ
0399login:Penguin
垢版 |
2005/05/20(金) 09:19:33ID:g7agSS6H
まだ書けるのかな？テスト
0400login:Penguin
垢版 |
2005/07/11(月) 01:55:02ID:ehYz0hjB
>>19
おいおい、三流大学とはいえ、医学部は偏差値だけはそれなりだぞ。
0401login:Penguin
垢版 |
2005/07/14(木) 05:15:51ID:TFsXQ32L
　
0402lute.kyoto-pc.ac.jp
垢版 |
2005/07/14(木) 10:11:22ID:8kA6nqIz
てすと
0405login:Penguin
垢版 |
2006/10/11(水) 21:49:21ID:uK3oW7bv
namazuって、昔よく使かってたけど、
今は、どうなったの？
0406login:Penguin
垢版 |
2006/10/21(土) 02:29:46ID:MJXjqX1B
Hyper Estraier にお株を奪われて終了
0407login:Penguin
垢版 |
2006/10/21(土) 15:09:46ID:yEvMSMbh
>>406
Hyper EstraierってPerl動作版とかあるの？
レンタルサーバで使えないんじゃちょっとなぁ。

目玉のP2P並列処理もAPIだけ公開されてるけど
実運用するには敷居が高い。高すぎる。

あとResultページのカスタマイズとかできないし。
エンジン自体はNamazuよりずっといいと思うんだけどなぁ
0408406
垢版 |
2006/10/21(土) 17:42:30ID:MJXjqX1B
確かに Namazu における pnamazu みたいなのはないな。
QDBM とべったりだから、Pure Perl で実装するのは難しそうだね。

＞あとResultページのカスタマイズとかできないし。

あー、確かに標準添付の estseek.cgi はいまいちね…
API は提供するから各自でフロントエンド書けってのが作者のスタンスなんだろうな。
0409login:Penguin
垢版 |
2007/01/09(火) 23:59:29ID:CgfAmGyf
Namazu
上げとこう
0410login:Penguin
垢版 |
2008/02/06(水) 21:31:47ID:tz+SPYsr
Namazu
一年に一回位は上げとこう
0411login:Penguin
垢版 |
2008/08/24(日) 22:42:04ID:tRt9Wm+3
今日で、北京オリンピックは終了か、 Beijing 2008.
次は、またロンドンで逢おう。
0412login:Penguin
垢版 |
2008/11/27(木) 21:35:45ID:fRUK7EAQ
なまず　テスト　OK
新着レスの表示
レスを投稿する

ニューススポーツなんでも実況