■
Elapsed time: 81003[s] (869.326[s] in this iteration)
Likelihood: 0.0129992 -> 0.0129968 (relative change: 0.000189496)
Log likelihood: -101936 -> -101940 (relative change: 4.36298e-005)
# of iterations: 95
Elapsed time: 81003
Elapsed time per iteration: 852.663
■
CRF Gaussian 2.0, (53)
RWCP 形態素解析実験結果
RWCP 学習 64%, 開発 16%, 評価 20%
全コーパス中に基本形が1回しか現れない単語を全て未知語として学習.ただし,学習時に対応する未知語処理が存在しない場合は既知語として学習,評価時は未知語として扱う(すなわち絶対に正解できない).単語未知語全展開5文字 + 連続カタカナ + 連続アルファベット.前進 MEMM.Gaussian prior.対数尤度の相対変化が1.0e-4以下を学習収束条件とする.
1 | |
---|---|
0.8 | 0.96560, N/A, N/A, 0.93431(77) |
1.0 | 0.96733, N/A, N/A, 0.93782(131) |
1.2 | 0.96397, N/A, N/A, 0.94246(70) |
1.3 | 0.96460, N/A, N/A, 0.93358(79) |
1.4 | 0.96601, N/A, N/A, 0.93593(107) |
1.5 | 0.96594, N/A, N/A, 0.93569(108) |
1.6 | 0.96646, N/A, N/A, 0.93616(92) |
1.7 | 0.96671, N/A, N/A, 0.93669(112) |
1.8 | 0.96647, N/A, N/A, 0.93626(133) |
1.9 | 0.96543, N/A, N/A, 0.93499(92) |
2.0 | 0.96507, N/A, N/A, 0.93534(139) |
2.1 | 0.96584, N/A, N/A, 0.93621(116) |
2.2 | 0.96673, N/A, N/A, 0.93616(98) |
2.3 | 0.96721, N/A, N/A, 0.93761(121) |
2.4 | 0.96792, N/A, N/A, 0.93888(190) |
2.5 | 0.96640, N/A, N/A, 0.93699(155) |
2.6 | 0.96625, N/A, N/A, 0.93652(106) |
2.7 | 0.96571, N/A, N/A, 0.93582(128) |
2.8 | 0.96490, N/A, N/A, 0.93541(125) |
昨日のまとめ その2
5文字未知語展開,前進 MEMM,Gaussian prior 付,収束条件1.0e-4の条件を揃えて,prior の variance と 素性の頻度のスレッショルドを変えた場合
1 | 2 | 3 | 4 | 5 | 6 | 7 | 8 | 9 | 10 | |
---|---|---|---|---|---|---|---|---|---|---|
0.5 | ||||||||||
0.6 | ||||||||||
0.7 | 0.94573 | |||||||||
0.8 | ||||||||||
0.9 | 0.94251 | |||||||||
1.0 | 0.94425 | 0.94391 | 0.94324 | |||||||
1.1 | 0.94244 | |||||||||
1.2 | 0.94419 | |||||||||
1.3 | 0.94433 | |||||||||
1.4 | 0.94541 | |||||||||
1.5 | 0.94408 | |||||||||
1.6 | ||||||||||
1.7 | ||||||||||
1.8 | ||||||||||
1.9 | ||||||||||
2.0 | 0.94418 | 0.94407 | 0.94424 | 0.94480 | 0.94599 | 0.94686 | 0.94403 | 0.94390 | 0.94429 | |
3.0 | 0.94691 | |||||||||
4.0 | ||||||||||
5.0 |