掌上百科 - PDAWIKI

 找回密码
 免费注册

QQ登录

只需一步,快速开始

查看: 6211|回复: 15

[新版发布] 发布: fastwiki-zim 1.0 beta1

[复制链接]

该用户从未签到

发表于 2014-3-11 12:17:37 | 显示全部楼层 |阅读模式
fastwiki-zim 1.0 beta1 release" w# Q/ ]" v0 L& |4 N

5 I6 @7 p" e9 B1 M& q/ P+ d, D==================
- f/ E) Z* o  o5 H, q0 [8 }8 h' r1. 发布目的
* k1 m3 F" K, p1 P/ U2. 功能 & 特点- s& d' H# X# z2 M4 o  b
3. 下载
8 a& K! K' I0 Q4 F3 P+ M4. zim 文件下载
( S; D4 X" t2 D. A/ l6 x" G" X/ E$ `5. 用法
0 x8 d% m; W; `6. 转换效率
$ Q6 s+ e, k' K7. 问题列表  P; x9 ]% `0 }4 G* O: V
8. 注意事项
8 |$ b, u8 l+ h==================! E/ `  ~/ n9 Q
* f( g; Z0 x5 o4 x: ?
1. 发布目的
  X3 Y+ M1 b9 _) |( v1 b9 z" q, D : p: g$ s) `4 `' M6 q2 N
  * kiwix 发布的 zim 文件格式排版不错, 有的包含了图片: [$ [! g% S5 B% C! l9 h4 l
  * kiwix 存在有些词条查不出来的问题( y  V7 j  U9 W5 K+ u
  * fastwiki 有更快的查找速度, 这样在移动设备更省电
8 q  s: C9 t6 e) a  * fastwiki 对中文支持较好/ O; K: |0 _. |2 C0 P

- h/ @  q. ^, h7 a9 k% a- {: b2. 功能 & 特点
- \, |; u7 [& e( P! H( [6 X
8 W  {$ q5 e# ~$ a  a. 把 zim 文件转成 fastwiki 的格式,
" I! j* p' ^' `$ S* n  b. 如果 zim 文件中包含了图片, 则会输出图片./ i) G5 T0 [& J! D3 P
  c. 输出的图片文件兼容以前的排版, 相当于是一个图片生成工具.
" {! W# H) B1 O+ X" d     这样, fastwiki-image 可能比较久才会发布了.
. f1 L4 p2 p- O
( Y) f2 g  C" u7 z+ [3. 下载
8 ^/ V; y2 a+ A2 R* d
- R9 T/ z! C( G  a. 百度网盘:  K& O. j* B3 Y% y6 t" J
  http://pan.baidu.com/share/link? ... ir/path=%2Ffastwiki, @+ E( x' C  |) t; @% v. [

& E1 w: s2 t9 ~  b. 没有其它地方
; C5 v% [* r, W# w+ P# @     因为 VPS 到期, 网站 fastwiki.qwrite.info 已暂停, 有空再开.7 d! T6 P5 x; n0 X$ n

2 F7 f4 q1 C$ i; s4. zim 文件下载! _" @- X0 w, e

2 |, P* Y/ b* \* T  http://download.kiwix.org/zim/wikipedia/?C=M;O=D$ {0 z, O0 d, F# d$ s, m
  http://download.kiwix.org/zim/
, j5 Y& n* u1 J/ v
/ }) u) _( u; n7 G! n$ O5. 用法) A/ v* t- P5 C! P- K
- b! {' x1 J# }* z% f' j' @" X
5.1 linux
- E  }: L* n9 p& C3 R/ l2 _7 \! p3 h) I( U# [% N" N
  ./fastwiki-zim-1.0-beta1.bin -f wikipedia_zh_all_12_2013.zim -d 201312 -l zh
% T  e( J5 c; A8 B : b; w* ~/ S& g5 R2 \
5.2 windows  2 `2 {8 Q3 O- S) K

' p: U9 g8 _2 U  把 fastwiki-zim 和 zim 文件放到同一个目录, 例如 F:\zim
2 O( U2 V9 ^3 u! A+ U  打开 cmd :. }# C: b; [+ q# S! T( n) B
! {+ P, C3 E2 P4 P
  cd F:
7 m& `8 a- r3 Y' _2 @  cd zim: c- t8 `$ U# K) _! X% Z+ q
  fastwiki-zim-1.0-beta1.exe -f wikipedia_zh_all_12_2013.zim -d 201312 -l zh" }/ g" H! E/ `. b

+ C( ^8 V$ \( p. e- n! d% ~9 L6. 转换效率
2 g8 R+ k( x$ w, n1 g: \2 @) g% m+ {5 y! i3 C# K
  a. 转换 wikipedia_zh_all_12_2013.zim 耗时 15 分钟, 输出 12.5G* q% Q# k! X7 d& O& a. d) u! \
  a. 转换 wikipedia_en_all_02_2014.zim 耗时 120 分钟,输出 49G5 Q8 h' r( O1 q; w

! A/ ^+ b8 V! V4 p/ T" t$ _+ H7. 问题列表
# Z" y7 K' T6 c1 ?  N( Y+ J5 d7 b6 ?8 p  S  j7 G
  a. 生成的数学公式文件与以前的不兼容
6 K3 G0 O1 |% r0 q, D+ z     意思是使用 fastwiki.exe  转找出来的数据文件和使用 fastwiki-zim
; R8 M6 g! j6 A$ G     生成的数学公式不能在一起使用, 体现为完全查不到.
7 D/ v0 k8 b3 f! A/ O
8 P% [. d- K+ U4 r9 T  b. 目前对中文没有进行繁简转换% \4 x# q4 s2 f9 z
  c. 条目没有进行繁简转换, 因此有些条目只能使用繁体才能查到. 下个版本改进.
0 {% R- w# Y" g  K  d. 转换英文数据如 wikipedia_en_all_02_2014.zim 耗时太久, 达 2小时之久!
; u+ m1 D% W# d  q9 S8 a( y     或许以后会改进.2 s" G# F) v8 E
1 U) x% ~' p7 q2 b
  e. 输出的数据文件太大, En 有 19G, 而原始维基数据才 10G.& v3 M5 g1 j0 a; \, Q
     这是因为 zim 文件中有许多内容是重复的, 而 kiwix 使用的压缩块比较大,7 k1 F  v% Z3 Y, v# |/ d
     所以它能压缩得比较小. 但是 fastwiki 使用的压缩块很小, 整体上变大了.
+ A' `% y4 N1 `6 f* |4 i     压缩块小的优点是查找快和省电.0 {2 H6 g4 l; S" B7 N
6 d6 {  {1 v. C) u. n" U+ f
  f. 转换时可能会有 lzma_uncompress error 的错误, 这是正常的.
3 S) ?+ Y. T2 S0 d$ d, n# I3 v8 _( C     每出现一条这样的错误, 表示有一个条目的内容无法读取.
6 Q# g7 }3 B2 m$ K/ P/ V8 P  p4 m     在转换 wikipedia_en_simple_12_2013.zim 时有几条这样的错误提示.
! y/ n3 ~! \& b9 x4 L. }! ?4 _5 l8 m: U- T7 |% b
8. 注意事项: U+ Y4 l0 k& g2 M
( j9 A/ U5 T% z% d) h
  请大家先使用  fastwiki-httpd 2.3.0 beta1 进行测试.
5 ~6 ?" l) {4 O- B, v$ [# h, S8 s0 x. H: R1 }! G
  • TA的每日心情
    开心
    12 小时前
  • 签到天数: 2004 天

    [LV.Master]伴坛终老

    发表于 2014-3-11 15:05:06 | 显示全部楼层
    好东西!!!谢谢LZ!!!

    该用户从未签到

    发表于 2014-3-11 21:29:38 | 显示全部楼层
    转换出错,详见截图: L2 H$ a; }" |" O+ S$ K& [% e2 ~

    本帖子中包含更多资源

    您需要 登录 才可以下载或查看,没有账号?免费注册

    x

    该用户从未签到

     楼主| 发表于 2014-3-13 17:33:47 | 显示全部楼层
    tedaz 发表于 2014-3-11 21:29
    ; w2 X* d& G3 Y转换出错,详见截图
    " m+ _& V8 F# ~6 [3 l

    8 B+ N8 h' _5 K5 S. V0 u: K! F这是 windows 版的问题, 下个版本修正,正在测试中,等待发布。
    8 s+ U% v7 i+ y! ~1 y0 J3 F$ v) C( T$ I0 h7 B
    linux 版本下已经测试了这些文件, 都没问题0 |# C# ^' M5 e
    wikipedia_de_all_12_2013.zim% `& _/ j* ~( N8 T$ E
    wikipedia_en_all_02_2014.zim7 e" C/ }: i) ^3 v6 o
    wikipedia_en_simple_12_2013.zim1 ?$ h2 e2 _3 u2 I1 Y
    wikipedia_fr_all_11_2013.zim0 F1 d" i8 g6 ?' m
    wikipedia_pl_all_12_2013.zim: \! C2 N( W) _$ C! ]* |
    wikipedia_pt_all_01_2014.zim1 M+ {( f0 L/ `) s- S9 _# ~
    wikipedia_ru_all_12_2013.zim: |+ Z* g  p1 U0 L# Q" c
    wikipedia_zh_all_12_2013.zim
    1 j. x5 f- R! @' I' P- W" @
    4 t8 u; o% E6 ^& I" R) V

    该用户从未签到

    发表于 2014-3-16 10:58:34 | 显示全部楼层
    fastwiki 发表于 2014-3-13 17:33
    / l8 ?" H* H( N- x9 i$ p% b' a这是 windows 版的问题, 下个版本修正,正在测试中,等待发布。
    6 _% j# P& m/ d- ]/ x+ E
    " ]& q. ~$ V3 E+ Ylinux 版本下已经测试了这些文件, ...
    4 B( b, h: t4 o7 E
    期待更新

    该用户从未签到

     楼主| 发表于 2014-3-18 17:18:03 | 显示全部楼层
    tedaz 发表于 2014-3-16 10:58 ; q, c3 d. R: d7 u; B' n
    期待更新

    & R" V+ l, z4 `" ~1 e- T8 \# I请用新版本 fastwiki-zim 1.0 beta2  进行测试 9 G' C% V: J# T

    6 F' T. l7 n" K$ i) I$ |7 C

    该用户从未签到

    发表于 2014-4-18 20:13:44 | 显示全部楼层
    用beta2尝试转换最新的无图英文zim,201401那个吧,生成第十一文件的时候core dump了,好象是段错误,忘记了。系统是x86_64的fedora。% ~7 x% w% ?( ~0 }
    如果需要,我尽可能提供需要的信息帮忙定位
  • TA的每日心情

    2018-1-21 02:01
  • 签到天数: 2 天

    [LV.1]初来乍到

    发表于 2014-4-18 22:36:34 | 显示全部楼层
    安卓无法支持4G以上的文件,如何操作?

    该用户从未签到

    发表于 2014-8-31 20:01:06 | 显示全部楼层
    本帖最后由 kkkkbt 于 2014-8-31 20:03 编辑 ' m; U: q) X* Q! K

    0 C0 H0 b" A# e6 ^! I2 i$ l- g' m! z谢谢大侠,评测如下:9 o2 ~# l$ X& V! M4 T' @
    下载了wikipedia_zh_all_06_2014.zim数据 (18-Jun-2014 10:42         7.2G        ) ,转换后8.28G,        出现7条“lzma_uncompress error”错误提示( 表示有7个条目的内容无法读取),字典查询上,完美,速度很快,发现“湖南”这一词条出现“Data file erro”,可能就是那7个条目中的一个吧。
    ) g, b+ |" ^. V# c其他试用查询的词条都很好,很多都带图片,太棒了!!( I+ c0 D. ^% M: U, \; H; s* u
    使用的转换器为大侠提供的fastwiki-zim-1.0-beta5.exe

    该用户从未签到

    发表于 2014-8-31 20:06:44 | 显示全部楼层
    另外,你曾提到的图片提取和图片转换软件什么时候发布啊!
    . K. r2 M- }& {/ J% B& G因为听说转换那个2013年12月的图片数据有足足40多G,听着心痒痒,,上面那个8.28G带的图片肯定没有40多G的那么全吧?1 ]0 Q  B7 I1 X9 T1 X& N
    希望大侠能早日发布图片提取与转换软件,O(∩_∩)O谢谢!

    该用户从未签到

     楼主| 发表于 2014-9-4 09:37:24 | 显示全部楼层
    kkkkbt 发表于 2014-8-31 20:06
    ! q( f: u3 i& I+ }& F* k另外,你曾提到的图片提取和图片转换软件什么时候发布啊!) B! h* P2 Z. E6 k* d- j" q
    因为听说转换那个2013年12月的图片数据有足足40 ...

      }, ^% m( \% y& ?+ _* x目前的 fastwiki-zim 相当于图片提取工具,
    9 k" y; C1 [7 J9 m不过目前的图片部分(包括制作工具, APP)可能存在比较大的 bug, 目前还没有时间修正.( I2 I8 x4 w/ S. e0 Z
    ( _3 H' B/ g. F7 @" {- y' n+ C- q- v
    另外的图片制作工具是 fastwiki-image , 这个工具目前还没有发布(只有源代码, 你编译后也可以使用),
    - W6 ~2 r2 l+ o4 ^- z9 w0 N( a不过, 这个 fastwiki-image 是直接从维基百科获取图片的, 而在中国大陆无法从维基百科大量下载图片,/ c- I% o8 G  k/ s3 w% B8 Z3 r
    只能在国外的VPS上运行及下载.
    / s4 H4 ~9 j' M) u& g
    9 v: r1 H* `, h中文版的全部图片在 8G左右, 参考 zim 文件. 你有些图片看不到是因为 fastwiki 的 bug 问题.; h) F+ v4 T3 u+ d/ s' w$ q
    只有英文版的图片才是 40G  .

    该用户从未签到

    发表于 2014-9-5 00:46:45 | 显示全部楼层
    fastwiki 发表于 2014-9-4 09:37
    . e; u% R2 i  f2 u& ]* i; @目前的 fastwiki-zim 相当于图片提取工具,
    9 b* g7 v$ t' |不过目前的图片部分(包括制作工具, APP)可能存在比较大的 bu ...
    . Q3 z9 x* a1 T' p, m8 G
    谢谢大侠的耐心解答,已经略有了解~1 ^  p" J/ U1 \: c
    希望大侠有时间有精力的话能完善完善这个app及相关制作软件,修复你所说的bug,毕竟这款app很牛也很有潜力,我觉得是目前Android上最牛的应用了,没有之一,哈哈~^_^~+ ~7 ?$ ?  ]) V0 @0 s5 B
    ps:其实我都想进一步完善编译这款app,奈何编程基础几乎为0,一个语言都没学过,如果从现在学,估计要读懂大侠用好几种基础语言写的代码都不知道要等到何年何月,所以也只能麻烦大侠有空弄弄这款app了,不甚感激!

    该用户从未签到

    发表于 2015-6-15 15:44:36 | 显示全部楼层
    感谢贡献和分享!
    您需要登录后才可以回帖 登录 | 免费注册

    本版积分规则

    小黑屋|手机版|Archiver|PDAWIKI |网站地图

    GMT+8, 2024-4-29 20:17 , Processed in 0.052493 second(s), 8 queries , MemCache On.

    Powered by Discuz! X3.4

    Copyright © 2001-2023, Tencent Cloud.

    快速回复 返回顶部 返回列表