发布: fastwiki-zim 1.0 beta1

fastwiki

fastwiki-zim 1.0 beta1 release
3 ?& g. J4 y/ D8 S- D
8 E: B6 }* z9 X) G$ Z==================
  P$ O! h: S) c. p! j, ~1 C1. 发布目的
2. 功能 & 特点
3. 下载
4. zim 文件下载
# J& J- P+ J+ a7 z1 s5. 用法
6. 转换效率
% ~5 k5 U* Z6 P4 w" e7. 问题列表
3 ^$ i3 V- ^5 j5 q& |8. 注意事项
+ V" W9 M  v1 ^& J2 q& R9 K( S==================
+ J% a5 p8 ]4 i% r8 O) }7 f
; c9 g/ t4 a( a4 m7 z" A1. 发布目的

  * kiwix 发布的 zim 文件格式排版不错, 有的包含了图片
6 F7 O! z# u! X# J  * kiwix 存在有些词条查不出来的问题
  * fastwiki 有更快的查找速度, 这样在移动设备更省电
6 h- t, n& p5 y3 O  * fastwiki 对中文支持较好
$ Y- T4 Z& _$ P, E
' g4 Z+ y3 l  ]" O6 w  d5 |2. 功能 & 特点
5 Y' g2 X& ~. B3 |8 S" a3 i6 K
$ p" {7 `( a0 E3 {, m1 m% S+ s* _  E  a. 把 zim 文件转成 fastwiki 的格式,
+ o1 Z  Q. X8 K; t! }  b. 如果 zim 文件中包含了图片, 则会输出图片.
  c. 输出的图片文件兼容以前的排版, 相当于是一个图片生成工具.
$ o) H6 Y4 d/ l$ v& U" W0 F     这样, fastwiki-image 可能比较久才会发布了.
. w+ V) N7 W9 L- M4 \' [& I
3. 下载
) l" {+ p4 e  }4 p" J
) K1 T+ I) `  E7 `8 i6 g  a. 百度网盘:
  http://pan.baidu.com/share/link? ... ir/path=%2Ffastwiki

7 c6 [8 e" v9 H) ?/ o& j  b. 没有其它地方
     因为 VPS 到期, 网站 fastwiki.qwrite.info 已暂停, 有空再开.
7 K8 p5 c5 ]+ r5 [5 m7 V! K' F: t
% P* r3 L: d% `  ~8 G4. zim 文件下载
1 P1 n5 f: r5 H5 A# Q. _
! f0 R" v# v1 ^6 p+ W  http://download.kiwix.org/zim/wikipedia/?C=M;O=D
8 p/ Y% P- x. a: o" B  k  http://download.kiwix.org/zim/

# [& m! j2 K) Q' ?( w, G5. 用法
& a( V1 [  s$ u* ^- K+ q5 o
9 r2 n: h: I& R0 p. _0 b5.1 linux
8 ?- a5 B* i& W6 d) ?" @$ f
. w3 n- R% |7 q7 `8 w  ./fastwiki-zim-1.0-beta1.bin -f wikipedia_zh_all_12_2013.zim -d 201312 -l zh
* ^/ u2 E; V9 l; Q9 G$ H
5 w7 G1 W6 [& I% k: z+ R5.2 windows  
4 R4 V& n0 |3 j; {( e6 q
4 c4 u" b. W) I* ]- c  把 fastwiki-zim 和 zim 文件放到同一个目录, 例如 F:\zim
6 O. I4 A2 ^3 K% M' K  N6 A  打开 cmd :

  V6 X  e6 _: z! L3 A- `  cd F:
( e" K! K: t+ z  cd zim
, V; U" A# R% Z* x- o3 J  fastwiki-zim-1.0-beta1.exe -f wikipedia_zh_all_12_2013.zim -d 201312 -l zh
+ S( _& Y% n5 |+ e$ _' o
6. 转换效率
0 y8 Y* L! ?, [0 j0 @8 {4 y6 h4 c
0 q4 A) Z- w4 V5 q1 o  a. 转换 wikipedia_zh_all_12_2013.zim 耗时 15 分钟, 输出 12.5G
  a. 转换 wikipedia_en_all_02_2014.zim 耗时 120 分钟,输出 49G

7. 问题列表

  a. 生成的数学公式文件与以前的不兼容
     意思是使用 fastwiki.exe  转找出来的数据文件和使用 fastwiki-zim
     生成的数学公式不能在一起使用, 体现为完全查不到.
. B( L4 H( V4 g& I; f5 x& b
& }5 g6 B! R3 X" p- j8 z. I  b. 目前对中文没有进行繁简转换
  c. 条目没有进行繁简转换, 因此有些条目只能使用繁体才能查到. 下个版本改进.
* ^, s: Q3 I3 a2 k* Y4 j4 Z5 z  d. 转换英文数据如 wikipedia_en_all_02_2014.zim 耗时太久, 达 2小时之久!
     或许以后会改进.

  e. 输出的数据文件太大, En 有 19G, 而原始维基数据才 10G.
) H6 ?) {0 `$ G  P" Y, s( h     这是因为 zim 文件中有许多内容是重复的, 而 kiwix 使用的压缩块比较大,
& u' X5 H2 H. s) l. L9 L6 h     所以它能压缩得比较小. 但是 fastwiki 使用的压缩块很小, 整体上变大了.
     压缩块小的优点是查找快和省电.

# P0 e# ?5 @% i' N  f. 转换时可能会有 lzma_uncompress error 的错误, 这是正常的.
     每出现一条这样的错误, 表示有一个条目的内容无法读取.
9 @! }( V0 }' n9 `# I% X- Q     在转换 wikipedia_en_simple_12_2013.zim 时有几条这样的错误提示.
7 F, c0 b: @3 {
8. 注意事项

- T' ]& W8 f6 o0 C1 T# A5 E  请大家先使用  fastwiki-httpd 2.3.0 beta1 进行测试.
0 X- ?- v2 U+ n. D4 c2 c* N
4 u2 u# L5 ]8 X$ J. i# c: ~: c: @0 Z

skydan05

好东西！！！谢谢LZ！！！

tedaz

转换出错，详见截图

fastwiki

tedaz 发表于 2014-3-11 21:29
转换出错，详见截图

% g9 S9 }. M8 `这是 windows 版的问题， 下个版本修正，正在测试中，等待发布。

- P& ~' g! ~5 I, U% G$ J1 z) ^linux 版本下已经测试了这些文件， 都没问题
8 T7 b7 ~, H. p8 x6 Qwikipedia_de_all_12_2013.zim
wikipedia_en_all_02_2014.zim
wikipedia_en_simple_12_2013.zim
* v0 l' m$ `1 X. Q; V" kwikipedia_fr_all_11_2013.zim
wikipedia_pl_all_12_2013.zim
wikipedia_pt_all_01_2014.zim
7 n& u: V0 K" Y3 B( awikipedia_ru_all_12_2013.zim
1 [9 a7 B8 k$ a. U  P+ xwikipedia_zh_all_12_2013.zim

( I0 z, p# `7 v' C

tedaz

fastwiki 发表于 2014-3-13 17:33
这是 windows 版的问题， 下个版本修正，正在测试中，等待发布。

! l, P7 @+ p8 n# v# rlinux 版本下已经测试了这些文件， ...

2 m* ]6 W8 R8 }) D) B期待更新

fastwiki

tedaz 发表于 2014-3-16 10:58
期待更新

6 C( ~! m/ ~3 m! K: K请用新版本 fastwiki-zim 1.0 beta2  进行测试
* G: o+ }  P5 A4 z6 S6 F! J9 m

lucency

用beta2尝试转换最新的无图英文zim，201401那个吧，生成第十一文件的时候core dump了，好象是段错误，忘记了。系统是x86_64的fedora。
5 Z/ G1 ~6 }( P8 _7 B; |如果需要，我尽可能提供需要的信息帮忙定位

lzzh0520

安卓无法支持4G以上的文件，如何操作？

kkkkbt

/ u6 G, h7 n: N2 {. G# X6 \2 H* J谢谢大侠，评测如下：
7 _2 a- j: g4 E( o下载了wikipedia_zh_all_06_2014.zim数据 （18-Jun-2014 10:42         7.2G        ） ，转换后8.28G，        出现7条“lzma_uncompress error”错误提示（ 表示有7个条目的内容无法读取），字典查询上，完美，速度很快，发现“湖南”这一词条出现“Data file erro”，可能就是那7个条目中的一个吧。
其他试用查询的词条都很好，很多都带图片，太棒了！！
) [$ N" t! E* X: u& [+ x/ D使用的转换器为大侠提供的fastwiki-zim-1.0-beta5.exe

kkkkbt

另外，你曾提到的图片提取和图片转换软件什么时候发布啊！
因为听说转换那个2013年12月的图片数据有足足40多G，听着心痒痒，，上面那个8.28G带的图片肯定没有40多G的那么全吧？
希望大侠能早日发布图片提取与转换软件，O(∩_∩)O谢谢！

fastwiki

kkkkbt 发表于 2014-8-31 20:06
( m$ `4 ~+ S4 n8 U另外，你曾提到的图片提取和图片转换软件什么时候发布啊！
. S6 K+ H5 N, M因为听说转换那个2013年12月的图片数据有足足40 ...

目前的 fastwiki-zim 相当于图片提取工具,
- J$ b& B2 N  ~, _- x不过目前的图片部分(包括制作工具, APP)可能存在比较大的 bug, 目前还没有时间修正.

另外的图片制作工具是 fastwiki-image , 这个工具目前还没有发布(只有源代码, 你编译后也可以使用),
不过, 这个 fastwiki-image 是直接从维基百科获取图片的, 而在中国大陆无法从维基百科大量下载图片,
只能在国外的VPS上运行及下载.

9 Z# x# M( w! @& K+ n中文版的全部图片在 8G左右, 参考 zim 文件. 你有些图片看不到是因为 fastwiki 的 bug 问题.
& |/ o5 I$ W& n& k! Y. o只有英文版的图片才是 40G  .

kkkkbt

fastwiki 发表于 2014-9-4 09:37
- b- R# P2 f5 _目前的 fastwiki-zim 相当于图片提取工具,
不过目前的图片部分(包括制作工具, APP)可能存在比较大的 bu ...

谢谢大侠的耐心解答，已经略有了解~
希望大侠有时间有精力的话能完善完善这个app及相关制作软件，修复你所说的bug，毕竟这款app很牛也很有潜力，我觉得是目前Android上最牛的应用了，没有之一，哈哈~^_^~
ps：其实我都想进一步完善编译这款app，奈何编程基础几乎为0，一个语言都没学过，如果从现在学，估计要读懂大侠用好几种基础语言写的代码都不知道要等到何年何月，所以也只能麻烦大侠有空弄弄这款app了，不甚感激！

573271267

感谢贡献和分享！

Okya

谢谢楼主。

Okya

谢谢楼主。

Okya

谢谢楼主。