⚜【支持超大文件】Python MDX词典打包工具 2019-11-19更新

mjc23

感谢楼主

zhangchaont

多谢，我总算找到答案了。明天把词典再重做一下。

LearnAWord

8 ^8 I0 _' p) p; d好东西 谢谢分享

titep

謝謝分享此

飞梧

感谢大佬分享，学习

醒者行者

感谢楼主，多谢！

ringzzz

感谢楼主分享。

bwsjkk

看一看，感谢分享！

漫步云海涧

muyuzhth0 发表于 2021-7-23 14:38
. F2 P3 x& v4 t: Mpython3.8.9调试成功！
: m! F" Y0 n7 t+ T) e4 T* k& _
做了如下修改：

（3） 在哪里加入

1. current_path = os.path.dirname(__file__)；current_path+"/OALD4_azure.txt

复制代码

我的版本是 3.9.7  ，目前没有遇到 No such file or directory 报错。 然后是genMDX_ox4.py 文件有部分中文乱码
' }6 h1 h6 p( j& G( y" j+ g
4 N; a, D  c& |/ U' E9 e

1. # -*- coding: utf-8 -*-
   : V) p. W" C9 m; c) {# h
2. # encoding=utf8
   , E# o- A0 y" _( X% x2 a
3. 
   $ O3 g6 q/ t/ E# o1 V
4. from __future__ import unicode_literals,print_function, absolute_import, division
   
5. 
   
6. 
   $ h6 C. Z& [6 L
7. import re
   
8. import copy
   " o6 ~* D! M) G+ F9 c) X- a; S3 z2 x9 \
9. import chardet
   ' n4 o9 }% G1 G# N  u
10. 
    
11. import os
    1 N( q: N9 P7 x
12. import io
    
13. import sys
    
14. # reload(sys)
    
15. # sys.setdefaultencoding('utf-8')
    , l- T$ j( q' W6 P8 G' c+ x3 G+ R# c
16. 
    ) g8 E/ z* Y8 A3 [) l8 M! r1 |
17. import collections
    
18. from collections import defaultdict
    & a) h  z( s; w! c! l) o
19. 
    2 x9 ^5 F. d& x* F
20. 
    
21. from writemdict import MDictWriter, encrypt_key
    
22. from ripemd128 import ripemd128
    
23. 
    7 {# B$ N; r0 _' Y; f* s8 V7 J7 _
24. 
    
25. head = 0
    
26. new_mean =[]
    
27. f=io.open('OALD4_azure.txt', 'r',encoding='utf-8')
    * j! e) h6 U2 g/ `& c
28. #f=io.open('oxford2_original.txt', 'r',encoding='utf-8')
    . t% I- r$ ^) Z6 x. U/ \/ o7 T
29. d = defaultdict(list) #����һ�����ֵ䣬Ҳ��ʹ��{}������
    " }+ H* T* g' P" ?, e2 S4 T
30. for line in f: #ÿ�δ�f�ж���һ��
    9 J8 u* l) h1 w- ]5 c) @" |
31.     line=line.rstrip('\n')#ȥ����β�Ļ��з�
    
32.     if line == '</>':
    / T# l4 P  Q; O; q) H2 ?; K
33.         if head == 2:
    : s. v2 U% h& g! x. R3 W; O
34.             new_mean[0:] = ["".join(new_mean[0:])]
    
35.             d[word].append(new_mean[0])
    9 o7 x* h3 q. z* u7 B+ v2 F
36.         head = 1;
    : c: c+ o. G& r3 w
37.         new_mean =[]
    
38.     elif head == 1:
    4 v( n0 X+ o" s& V8 j! u3 U
39.         word = line
    $ X+ m+ r5 T( b7 s
40.         head = 2
    
41.     elif head == 2:
    
42.         new_mean.append(line)
    
43.         head = 2
    % P$ l' b/ t. ?" V! a8 X
44. f.close()
    ' L4 g7 n+ L$ u" T/ V6 n3 b
45. 
    
46. 
    : T7 l" q1 t% ~, T
47. ff=io.open('about_OX4.txt', 'r',encoding='utf-8')#�ʵ�about��Ϣ��txt�ļ��뱣��Ϊutf-8
    
48. about=[]
    ; q8 R' d; f  ^( s2 w! }5 r
49. for line in ff: #ÿ�δ�f�ж���һ��
    , x7 j* k" \# G# }1 s
50.     about.append(line)
    
51. about[0:] = ["".join(about[0:])]
    ! O. e( s0 I( f: M% Z- t
52. 
    
53. 
    
54. #outfile = open("example_output/��ţ��Beta_V2.2.1.mdx", "wb")
    ; J  X, t- U5 A& B
55. #writer = MDictWriter(d, "��ţ��Beta_V2.2.1", about[0])
    5 D/ Y8 }6 j- D, U- y2 r* j. L# S
56. outfile = open("output_ox4/OALD4_Ex.mdx", "wb")
    
57. writer = MDictWriter(d, "ţ��߽�˫��(���İ�)", about[0])
    $ y8 d* n" b  y5 c0 \
58. writer.write(outfile)
    - k7 c. I0 S! R! C
59. outfile.close()
    
60. 
    / I7 |2 A4 m8 `

复制代码

7 T/ b# u& F4 f是否可以看看你的文档呢 乱码的部分中文写的是什么？

fuyouyu

谢谢分享

dgww

感謝分享！！！！

eBoy_cn

向大牛學習編程！

ksksks

我也想要整一个

chchbhbh

感谢分享

maxingren90110

感谢大神分享！

头毛宝库破解版

非常好，大赞

dqllk567

谢谢楼主

jiangws

thank for your sharing.

qzrocket

thanks for sharing

日新日进

谢谢楼主大大，

ALEXANDRE

膜拜大佬

tyc600

正好需要打包大文件。谢谢了

wdzwdz518

学习学习，谢谢分享

swt154145

元老玩家  感谢  感谢

dever

楼主辛苦了，感谢您的付出！