TA的每日心情 | 衰
2020-8-15 10:40 |
|---|
签到天数: 146 天 [LV.7]常住居民III
|
本帖最后由 zzzz_sleep 于 2019-3-29 14:50 编辑
+ }# }- k0 M% }6 F" i# c0 _3 S- ?' a! N- s$ u, @2 w" n
所用词典基本信息：- 中文喂鸡百科（图文试用版）9 b2 u& _$ L3 L( s' O0 P
- Pic_bulid20180601 V1.4; B9 f, F- N- W: E9 S
- 喂鸡百科，自由的百科全书。# k% c! E2 G' b5 }6 ?$ [9 o
- (1)制作信息：4 v/ Z! I, p' z7 c( m7 ~
- ·制作：邱海波$ |2 o. ?2 Y" I
- ·日期：2018年10月7日
' e- V5 R6 T @: N3 I; y- v# @ - ·数据：http://dumps.wikimedia.org/zhwiki
: g* {5 C! U4 u2 K& }" e1 f - ·工具：wikicafe & Mdxbulider
5 Y' c- W2 f/ c T - (2)更新日志：
& Z( f! {2 i0 ?& R4 p) y - ·2018/10/7：v1.4# Y9 T i6 B- v% C' N
- 本次优化：解决607041个词条内链跳转问题，更直截有效。感谢jeanleem6提供正则表达式支持。
R9 A& W. x# Q1 a( ^$ m
& A4 T" {5 O2 }% O: M, m; T. X( W7 G
原文件：- 6.9G Jun 14 2018 zhwiki-20180601_V1.3.mdd
+ M. ]4 L! R: E. Z% h9 C) \7 z3 E - 1.7G Mar 27 20:33 zhwiki-20180601_V1.3.mdx
' O3 p3 P" k) v* x6 s0 F( V4 F2 G9 {资源文件很大: 6.9G
; P! c+ }5 e8 q& y# V词条文件一般：1.7G
5 n- p1 n7 ~( y% m4 X2 b& g
# D ~- F* W3 }6 F ^# ~& O+ a电脑基本硬件：- Q; h/ [, [: m% H0 K
- Intel Core i5-5300U @ 4x 2.295GHz
; y" d1 `; L* {1 l - 8G Ram
4 F! o: u- J6 z o. k. V# z - SSD HD
* X8 J, {3 j1 H7 c
2 K7 q9 w1 G1 e) I
% J' c& z; v' @2 W6 N7 q解包：- mdict -x zhwiki-20180601_V1.3.mdd -d temp/mdd
6 D; b# F6 u' M1 a% h4 w! f* U - 100%|██████████████████████████████████████| 518875/518875 [56:00<00:00, 154.40rec/s]. P$ G6 D* N: L; c" i. W
- mdict -x zhwiki-20180601_V1.3.mdx -d temp
4 m$ ]# _" e7 I) B& C& c* d; i- d - 100%|██████████████████████████████████| 1824911/1824911 [02:05<00:00, 14489.47rec/s]
( o1 k0 ^+ i2 c; g0 u解包后文件大小：3 k3 p; T2 ^% T- T1 x4 C
- 5.8G Mar 28 10:41 zhwiki-20180601_V1.3.mdx.txt9 K, @3 E/ G4 b
- 7.9G mdd/
词条文件翻了 3倍多2 K. W' \0 k0 x
9 E6 P/ K: g' ]$ D% e6 @重新打包：
8 F. B/ r: z9 G& M l i: R4 X9 Z先来资源文件- mdict -c zhwiki.mdd mdd/
h. l/ A0 I" ]% E$ I+ d - Scan "mdd/": 518875
; v1 s7 C n) C - Pack to "zhwiki.mdd") T7 F( r& K& h! E
- 100%|██████████████████████████████████████| 518875/518875 [18:45<00:00, 460.93rec/s]
1 I3 b; v: d0 K7 b( b8 l1 o
8 z0 S$ \- q% V& k' G# f
资源文件都是一个个小文件，速度慢些
' I& |/ Q' L" ]0 y' b6 N0 F. S" p7 }7 W& [: s/ p% N2 F
再打包词条文件- mdict --title zhwiki-20180601_V1.3.mdx.title.txt --description zhwiki-20180601_V1.3.mdx.description.html -c zhwiki.mdx zhwiki-20180601_V1.3.mdx.txt
+ r* u# n$ j1 {" s- J - Scan "zhwiki-20180601_V1.3.mdx.txt": 1824911. K3 K- S. M. H, A! J- y; {3 A) I
- Pack to "zhwiki.mdx"# K+ m4 S: ^8 x5 X6 V/ u' v
- 100%|███████████████████████████████████| 1824911/1824911 [04:33<00:00, 6672.10rec/s]
& w' H5 D% i- r. ^
1 P/ ^" i2 [6 q: X/ B
4 F# f; S8 \6 _% \( F' }( z1 e速度还可以! X: O$ B& ]9 t7 o0 r
2 T5 {$ S8 ~8 s% h. m, s0 T打包后文件大小, m! B5 G+ P- @- u4 c
- 6.9G Mar 29 13:58 zhwiki.mdd' T4 J' C6 K9 r7 F
- 1.7G Mar 29 14:11 zhwiki.mdx
- K7 T/ F" c' G
文件大小差不多，差点尾数，忽略不计: m# @% b( M1 @3 h* @
' S. ?, I& `2 T/ x9 w
R: x! |$ W7 |( R' ?3 O* k下次目标：- 2.4G Mar 28 14:51 enwiki-20160601-part1.mdx
. D' ?! s" m% O( R - 2.3G Mar 28 14:30 enwiki-20160601-part2.mdx
2 d. M$ n3 q) n - 2.2G Mar 28 14:41 enwiki-20160601-part3.mdx4 L0 m% R4 a9 l7 k' X6 _2 V
- 2.1G Mar 28 14:32 enwiki-20160601-part4.mdx
) ^9 X# P. k; z0 u1 o1 z% g - 157M Mar 28 13:13 enwiki-20160601-part5.mdd
8 ~3 C+ ]9 F9 y. Q9 n6 I: D: i7 I - 2.0G Mar 28 14:02 enwiki-20160601-part5.mdx
3 F: J1 F1 ~2 A/ Y+ e& x0 H - 157M Mar 28 11:25 enwiki-20160601-part6.mdd3 |6 l, Y/ b! ^
- 1.3G Mar 28 13:15 enwiki-20160601-part6.mdx
- H7 x1 l, s$ }# l0 y/ X1 C/ Z
q$ t9 e d" O# Y- b计划将所有 MDX 打包成一个文件，那样会有 13G 的 MDX，我先去清扫点硬盘空间 Q( n& M" M3 Y7 t" m2 g! d8 J
& m2 v- ^4 R; j- P5 v$ c: u2 Z* C: a Q
8 |; h0 i4 M# |- o! E
* q4 f: O" g# [$ |' W( b
8 p/ l( v+ @$ A" A9 Z4 _2 j
- F- s: \. i# k: G( k+ t$ o+ l+ p( a1 A7 M" I5 e+ ^+ J% m
4 _. W0 n5 x& T8 M
9 E- i( k" ~6 i d# @. e% T: g: n3 e# z- F# @; e5 P5 @/ l9 S
4 U# Y! E f ~# l( A+ t# T |
评分
-
1
查看全部评分
-
本帖被以下淘专辑推荐:
- · 词典制作|主题: 217, 订阅: 40
- · 词典制作|主题: 111, 订阅: 24
|
发表于 2019-3-29 14:41:10
楼主
