傀儡師の館.Python

import MeCab

import pysqlite2.dbapi2 as sqlite



# とりあえず、日本語をまず分かち書きにしておく



# 挿入したいデータ

data  = [

('日本語を使う', '日本語使ってやってみるよ。'),

('分かち書きはMeCab', '日本語の分かち書きはMeCabを使ってみる。'),

('メモメモ', '元のデータは分かち書きしてなくても大丈夫。'),

('こんな具合', 'こんな具合で日本語書いてる。') ]



# 分かち書きしておく

t = MeCab.Tagger ("-Owakati")

data = [(t.parse(x[0]), t.parse(x[1])) for x in data]





# 全文検索用のテーブルを作る

con = sqlite.Connection(":memory:")

con.execute("CREATE VIRTUAL TABLE memo using FTS2(title, body);")

cur = con.cursor()



# テーブルにデータを挿入する

sql_str = "insert into memo (title, body) values (?,?);"

cur.executemany(sql_str, data)



# 試してみる

print "テスト 1"

sql_str = "select rowid, title, body from memo where title match '日本語';"

res = list(con.execute(sql_str))

for l in res:

    title = l[1].split()

    body = l[2].split()

    print l[0], "".join(title), "".join(body)

    print  "-" * 20



print "テスト 2"

sql_str = "select rowid, title, body  from memo where body match '日本語';"

res = list(con.execute(sql_str))

for l in res:

    title = l[1].split()

    body = l[2].split()

    print l[0], "".join(title), "".join(body)

    print  "-" * 20

テスト 1

1 日本語を使う 日本語使ってやってみるよ。

--------------------



テスト 2

1 日本語を使う 日本語使ってやってみるよ。

--------------------

2 分かち書きはMeCab 日本語の分かち書きはMeCabを使ってみる。

--------------------

4 こんな具合 こんな具合で日本語書いてる。

--------------------