Skip to content

Instantly share code, notes, and snippets.

View masayu-a's full-sized avatar

Masayuki Asahara masayu-a

View GitHub Profile
@masayu-a
masayu-a / gist:3870931
Created October 11, 2012 08:15
BCCWJ Memo

文分割

superSentence と sentence

Psycholing

Nガ Nヲ VP N ガ (1例?)

  • PN3b_00003(00040)

ウッズが、マスターズを主催するオーガスタ・ナショナルGCが...

Nガ ADV Nガ (3例)

@masayu-a
masayu-a / gist:3877668
Created October 12, 2012 06:46
Heritrix 3 crawler setting in NINJAL, Japan
<?xml version="1.0" encoding="UTF-8"?>
<!--
HERITRIX 3 CRAWL JOB CONFIGURATION FILE
This is a relatively minimal configuration suitable for many crawls.
Commented-out beans and properties are provided as an example; values
shown in comments reflect the actual defaults which are in effect
if not otherwise specified specification. (To change from the default
behavior, uncomment AND alter the shown values.)
@masayu-a
masayu-a / file0.bat
Last active August 29, 2015 14:15
複数のCaboChaファイルを個別に ChaKi.NET ファイルで読み込める sqlite db ファイルに変換する ref: http://qiita.com/masayu-a/items/5e61dcf0ed7068c01f62
for %F in (*.cabocha) do "c:\Program Files\NAIST\ChaKi.NET\CreateCorpusSLA.exe" -e=SHIFT_JIS -C %F %~nF.db
@masayu-a
masayu-a / gist:e3eee0637c07d4019ec9
Last active September 19, 2024 00:08
English Tagset for UniDic - English translations of UniDic POS tags, prepared by Irena Srdanovic, 17.1.2013, checked by Ogiso, Den and Maekawa
PoS(Ja) PoS (En) PoS (En) - descriptions
代名詞 Pron pronoun
副詞 Adv adverb
助動詞 Aux auxiliary_verb
助詞-係助詞 P.bind particle(binding)
助詞-副助詞 P.adv particle(adverbial)
助詞-接続助詞 P.conj particle(conjunctive)
助詞-格助詞 P.case particle(case)
助詞-準体助詞 P.nom particle(nominal)
@masayu-a
masayu-a / gist:b3ce862336e47736e84f
Created May 27, 2015 02:43
English translations of UniDic inflection types, prepared by Irena Srdanovic, 18.1.2013 and 22.1.2013
Inflection type (Ja) Inflection type (En) Inflection type - description (En)
カ行変格 ka_irr kahen_verb.irregular
サ行変格 sa_irr sahen_verb.irregular
ザ行変格 za_irr zahen_verb.irregular
上一段-ア行 V1i.a kamiichidan_verb_i_row.a_column
上一段-カ行 V1i.ka kamiichidan_verb_i_row.ka_column
上一段-ガ行 V1i.ga kamiichidan_verb_i_row.ga_column
上一段-ザ行 V1i.za kamiichidan_verb_i_row.za_column
上一段-タ行 V1i.ta kamiichidan_verb_i_row.ta_column
@masayu-a
masayu-a / gist:3e11168f9330e2d83a68
Created May 27, 2015 02:46
English translations of UniDic inflection forms, prepared by Irena Srdanovic, 18.1.2013 and 22.1.2013
Inflected forms (Ja) Inflected forms (En) Inflected forms (En)- description
ク語法 ku_wrd ku_wording
仮定形-一般 Cond.g conditional.general(katei)
仮定形-融合 Cond.int conditional.integrated(katei)
命令形 Imp imperative(meirei)
已然形-一般 Real.g realis.general(izen)
已然形-補助 Real.aux realis.auxiliary(izen)
意志推量形 Vol_tent volitional_tentative(ishi_suiryo)
未然形-サ Irr.sa irrealis.sa(mizen)
@masayu-a
masayu-a / gist:64ba39287ae8b3b5b498
Last active December 19, 2019 06:31
BCCWJ Copyright

BCCWJ のうちコピーライトフリーで再配布可能なサンプル

  • OW6X_00000 (コアデータに内包)
  • OW6X_00027
  • OW6X_00165
  • OW6X_00657

BCCWJ の新聞データの取り扱い

  • BCCWJ の新聞データは統計情報であっても商用利用不可
  • BCCWJ の新聞データを含むデータから学習した解析モデルは BSD/GNU などの商用可ライセンスで再配布してはいけない
みぜんけい 未然形 irrealis IRR
れんようけい 連用形 adverbal ADVL
しゅうしけい 終止形 conclusive CONCL
れんたいけい 連体形 adnominal AND
かていけい 仮定形 conditional COND
いぜんけい 已然形 realis REAL
めいれいけい 命令形 imperative IMP
さへんめいし サ変名詞 verbal noun VN
けいようどうし 形容動詞 adjectival noun AN
ほじょどうし 補助動詞 auxiliary verbs AUXV
1 first!person
2 second!person
3 third!person
A! agent4like!argument!of!canonical!transitive!verb!
ABL ablative
ACC accusative
ACOP adjectival!copula
ADJ adjective
ADN adnominal!!連体形
ADV adverb(ial(izer))