掌上百科 - PDAWIKI

 找回密码
 免费注册

QQ登录

只需一步,快速开始

查看: 4625|回复: 21

[求助] mdx转换成txt如何去除代码?

[复制链接]
  • TA的每日心情
    奋斗
    2020-3-26 14:37
  • 签到天数: 19 天

    [LV.4]偶尔看看III

    发表于 2017-3-5 23:06:56 | 显示全部楼层 |阅读模式
    我为了把mdx转化成没有html格式的txt文件,一般转换txt后做某种处理就可以去掉代码然后进filelocator pro搜索文件的内容* i4 {: u8 V; q2 P% z

    + i! K/ E. ~6 k, T# j8 {# V! Y然而我转换后变成这样
    2 w1 g5 c) k0 t% ?
      O8 ^! Y( u1 }输入abandon搜索后发现代码并没有被去除" ^( n. V& n0 {# x

    . M8 F0 |) M7 l1 o& g请问怎样才能方便去除这些代码,并用回车区分它们?

    本帖子中包含更多资源

    您需要 登录 才可以下载或查看,没有账号?免费注册

    x
  • TA的每日心情
    难过
    2019-3-8 19:05
  • 签到天数: 100 天

    [LV.6]常住居民II

    发表于 2017-3-22 00:12:32 | 显示全部楼层
    Serica 发表于 2017-3-21 22:41
    ! L( v, `- ]" U0 {+ o* h故意分享的不完整的文档?请详细言明。那人人品有问题。
    * C- n% y, O! O6 M
    Frank huang 是知乎上面的名人。他在这个问题https://www.zhihu.com/question/30781969下面分享了七个txt文档,我打开后发现他分享的柯林斯、剑桥、牛津等等这些词典到了字母m或者h等之后就没有了,就是说只有原词典的几分之一,但是mdx在网上流传的版本都是全的,他是通过代码转化而来,如何会缺少这么多?还有,他把词典的名字改变了,比如说把柯林斯词典改名为剑桥类似这样的,而网上流传的mdx文档哪里有名字混乱成这个样子的呢?我私信过他,他没有回复我,并且他那一个高赞答复下面的评论与也关闭了,他写那个答案是为了扩大知名度,但是任何一个费力写代码的人恐怕都不会愿意将自己的成果分享出来,可是不分享出来就没有那么多赞,因此他采取了这种卑鄙手段,也许是因为我发现了,或许是他早就决定了,反正他关闭了评论,这样的话绝不会有人知道他的这种动机了。其实论坛里面的高手们制作几个txt根本不在话下,我在本论坛看到了一个好多年前的帖子就写到了利用filelocator进行语料库搜索,Frank的办法别人好多年前就想到了。: i' g" V" ^7 L  l
    还有他在https://www.zhihu.com/question/2 ... profile_answer_card这个问题下面分享的一个doc文档也是不全的,这一个是人工校对的,自然更加舍不得分享出来了,但是不分享出来怎么会有赞,怎么推销自己呢?因此分享不全的资料就可以骗赞!

    该用户从未签到

    发表于 2017-3-22 08:23:47 | 显示全部楼层
    本帖最后由 Oeasy 于 2017-3-22 08:36 编辑
    - K, X# t0 C" q1 F/ k- Y
    取进止 发表于 2017-3-22 00:12! ^' t6 X: @4 S& B
    Frank huang 是知乎上面的名人。他在这个问题https://www.zhihu.com/question/30781969下面分享了七个txt ...

    ( P( {& V5 n6 M$ h0 S$ K; \6 K% V) \# D# G# g
    ( r7 m0 s: ]- K& f8 E; S+ @
    我晕。。。" n- ]! q4 n% D
    这样也可以。。。
    $ _* l+ l3 e' Q) U& i那些 txt 以及相关方法真正首发者是:
    " [+ _# z: r0 J8 ?1 \1 i6 q- LYX1692 https://pdawiki.com/forum/thread-11546-1-1.html8 k7 U% v. h( _8 N' L
    他也在知乎 https://www.zhihu.com/people/bei-ji-hu-82/answers / ?! ~3 Z, H( {( W8 i+ D1 v

    : N$ s. C* d# }# ]! I3 D; `( ?3 ~3 ?) j. M$ A
    信息不对称啊。
    2 J9 _! Q$ A. F  x9 e# q: K- s! E, x; v. a, m6 C4 O- B
    不过 GoldenDict 直接可以全文搜索啊,没必要转 txt 的。 当然,大家苦于全文搜索好多年,LYX1692 2013-12-19 发帖的时候,GoldenDict 尚未加入全文搜索功能,后来有了这功能, 转 txt 全文搜索词典这种方式至少在我这儿,已经退出历史舞台了,倒还有一些不明真相的群众还把这当宝。GoldenDict 才是真的神器啊。+ M, j/ _3 j( H

    ; X% K+ o  Q+ H1 S/ y0 h当然,txt 搜索灵活性更大,速度也更快一些。GoldenDict 全文搜索还是有一些缺陷,不过对我而言够用了。
    / p# ?( c7 _/ i9 h6 J
    % m0 ~7 E( h  {6 b0 j我每天发公众号文章,里面的例句都是我用 GoldenDict 搜出来的。" `# x- d- F3 g) V

    % `$ J! Z! a2 G4 S比如下面两篇,其实就是我用 GoldenDict 全文搜“棒极了”,然后一个个整理、复制粘贴出来的。- |8 G: T# |/ h# v" S- Z

    9 X' `8 y8 u5 Q7 J$ E' p        [2017-03-22] 棒极了[2] http://mp.weixin.qq.com/s/rD-B33NqC7qXojdJfQTggA$ ^) E# A" P) r; W
            [2017-03-21] 棒极了[1] http://mp.weixin.qq.com/s/QvKY0OrVaA55j4MQPdMgpg
    6 Z/ @. T% y6 p7 N# B3 G# f: ]' b0 i
    # t3 M$ N/ M" S" j5 J/ S        [2017-01-21] GoldenDict 全文搜索几例 http://mp.weixin.qq.com/s/gHMJrVG_bmGw142fEEtNeQ. b6 N4 M& x2 c  r
    ' ~3 S( L  ?( |( z
    我又发广告了。。。
    / L* d# Z  a6 T, U9 t2 N
  • TA的每日心情
    开心
    前天 08:07
  • 签到天数: 750 天

    [LV.10]以坛为家III

    发表于 2017-3-17 01:18:50 | 显示全部楼层

    本帖子中包含更多资源

    您需要 登录 才可以下载或查看,没有账号?免费注册

    x
  • TA的每日心情
    奋斗
    2020-3-26 14:37
  • 签到天数: 19 天

    [LV.4]偶尔看看III

     楼主| 发表于 2017-3-5 23:20:14 | 显示全部楼层
    据我所知,网上有个TextForever这个工具,mdx转text后,再改后缀名为html,然后用这个工具把html部分替换成回车等方法分隔段落,然后输出text就代码了,但是我8G的内存开始转化却提示out of memory
    ; D* i7 l2 ?& J4 r1 J; e论坛有人能顺利转换出来吗?
  • TA的每日心情
    开心
    2023-1-18 23:24
  • 签到天数: 211 天

    [LV.7]常住居民III

    发表于 2017-3-6 00:10:59 | 显示全部楼层
    goldendict和深蓝不是都可以全文搜索吗?为何还多此一举再把mdx转成TXT?
  • TA的每日心情
    开心
    2018-1-2 00:27
  • 签到天数: 10 天

    [LV.3]偶尔看看II

    发表于 2017-3-17 01:02:02 | 显示全部楼层
    可以学习下正则表达式。
  • TA的每日心情
    难过
    2019-3-8 19:05
  • 签到天数: 100 天

    [LV.6]常住居民II

    发表于 2017-3-17 10:51:01 | 显示全部楼层
    kyletruman 发表于 2017-3-6 00:10' ^- v9 a% a2 i! E/ }
    goldendict和深蓝不是都可以全文搜索吗?为何还多此一举再把mdx转成TXT?
    # v  N: Y0 Y* U) C
    我很早以前就想这样做了,知乎上面一个人(frank huang)介绍的这个方法,但是那个人故意分享了错误的不完整的TXT文档,我尝试自己做但是一直未果,全文搜索的话虽然也知道但是不知道具体如何实施,请问你介绍的那两个词典是电脑和手机都可以使用吗?哪一个更好呢?

    该用户从未签到

    发表于 2017-3-21 10:04:33 | 显示全部楼层
    maralica 发表于 2017-3-5 23:20* b# d: h- p) p7 y# ?* H8 y
    据我所知,网上有个TextForever这个工具,mdx转text后,再改后缀名为html,然后用这个工具把html部分替换成 ...

    6 x* {  y" r: h: T, d" Z$ e2 B
      ~( N% p" w# Z/ e4 V多大的文件?我用textforever處理過200MB的沒問題。如果文件太大,可以先用textforever分割後才清理。
  • TA的每日心情
    开心
    2018-1-2 00:27
  • 签到天数: 10 天

    [LV.3]偶尔看看II

    发表于 2017-3-21 22:41:13 | 显示全部楼层
    取进止 发表于 2017-3-17 10:51( r; C7 \  a1 a. Y9 ]. ]
    我很早以前就想这样做了,知乎上面一个人(frank huang)介绍的这个方法,但是那个人故意分享了错误的不 ...
    0 i8 ?5 c/ y6 Z( M: n; D* z. p
    故意分享的不完整的文档?请详细言明。那人人品有问题。
  • TA的每日心情
    难过
    2019-3-8 19:05
  • 签到天数: 100 天

    [LV.6]常住居民II

    发表于 2017-3-22 10:07:07 | 显示全部楼层
    我也是前几天就看到了论坛里面几年前就有人想到过这个方法,因此我才说他(Frank)的方法别人几年前就想到了。不过我当时也觉得他的方法很了不起(。ò ∀ ó。)
    - n2 r: ^) C; q我以前不知道全文搜索这个功能,goldendict没有安装过,前几天发现深蓝词典很方便,并且是安卓手机版本。
    ) t9 y7 P5 ]* l: c4 y; |# rfilelocator搜索和全文搜索相比,最大的优点在于前者可以将搜索到的所有内容集中起来显示,可以一次性复制。
    3 M$ m5 P0 k- h4 ^' r5 r7 A这样如果做成汉译英词典的话,简直~( ̄▽ ̄~)~
    ; D& f" [- N: k还有,你的公众号里面有一个人头像和我差不多,你发现了吗?

    该用户从未签到

    发表于 2017-3-22 11:05:46 | 显示全部楼层
    取进止 发表于 2017-3-22 10:07
    ) {$ P) A7 b4 h% j+ D3 U& \4 [我也是前几天就看到了论坛里面几年前就有人想到过这个方法,因此我才说他(Frank)的方法别人几年前就想到 ...

    & x2 g8 F1 I0 E" s+ h1 j' n
    / \  K. n0 W7 W0 s8 N3 K7 U% I哈哈,确实是有个头像为月亮狗的 Luo 同学,非常之热心,精选留言最多。如果你就是他的话,这里再表达一下我的感谢。7 V0 m* L+ ^& w1 P

    9 R0 f; L3 S  [7 ?. B# Z
  • TA的每日心情
    奋斗
    2020-3-26 14:37
  • 签到天数: 19 天

    [LV.4]偶尔看看III

     楼主| 发表于 2017-3-23 20:20:03 | 显示全部楼层
    kyletruman 发表于 2017-3-6 00:102 s5 Y; A9 v( Y- u& I
    goldendict和深蓝不是都可以全文搜索吗?为何还多此一举再把mdx转成TXT?

    $ ^/ ^/ p  Q3 R( X& A主要是全文搜索不能用正则表达式搜,而且要结合其他文件,包括词典里一起搜,比如搜一个带某种词组的句子,而这个词组的动词也有变形的那种呢
  • TA的每日心情
    奋斗
    2020-3-26 14:37
  • 签到天数: 19 天

    [LV.4]偶尔看看III

     楼主| 发表于 2017-3-23 20:26:24 | 显示全部楼层
    时隔一个月才回复,论坛的坛友果然很给力呀。! H5 d6 `) V* l- X: R/ m* O$ S& e) {, |% I
    其实我发现这个全文搜索软件的确了不起,比如将高质量的pdf外刊、或者题库,词典全分好类,然后在用正则表达式搜索, E5 q' `1 ?5 A9 i
    每天使用这个方法制作很多不同的例句,然后导入到anki(卡片记忆软件),相信坚持一年半载,英语的水平会越来越高的
  • TA的每日心情
    奋斗
    2020-3-26 14:37
  • 签到天数: 19 天

    [LV.4]偶尔看看III

     楼主| 发表于 2017-3-23 21:42:34 | 显示全部楼层
    perspective 发表于 2017-3-21 10:042 O& I: w& f7 }" e" e; X9 g! C6 i
    多大的文件?我用textforever處理過200MB的沒問題。如果文件太大,可以先用textforever分割後才清理。

    . \( X4 F+ Y9 r# U1 a; Q- L# Y! D文件从300M到700不等吧,就是用这个软件老是不成功。比如我看vocabulary.com的mdx不错,转换txt后有300M,然后改后缀名为html,之后无法去除html编码。
    0 B- P# _) g: D: F! e. `' ~但如果用柯林斯CN的mdx,转换后的txt有70多M,改后缀后扔进textforever总算成功了。
    7 E5 n0 I" Y# O8 O6 l) x! B 另外我尝试了2L的方法,下了他推荐的软件,发现那个200M的仍然不行
    ( C# i# X- ]$ l7 s$ _
  • TA的每日心情
    奋斗
    2020-3-26 14:37
  • 签到天数: 19 天

    [LV.4]偶尔看看III

     楼主| 发表于 2017-3-23 21:53:38 | 显示全部楼层

    1 `/ d& ?2 T4 i; S/ U/ F  i你给出的方法也特别不错,尤其是对英汉词典有用。
      W6 {* f! w& i2 X但是对于英英词典,转换中带html字符一律删除,而不是替换为空格,这样就把两个英文合在一起了。
    + m. I  S/ j2 `  J比如下面转换后的一项单词:
    : }1 t* E) a1 ^1 N3 \* N. hbranchiate        branchiate(once / 562825 pages)adjWORD FAMILYbranchiateUSAGE EXAMPLESThe state of being made up of branchiate segments.Webster, Noah, Webster's Unabridged Dictionary—(2n...(2012)Thus we see that in our aquariums most of the axolotls remain in the branchiate condition, transformed individuals being on the whole very exceptional.Various, Encyclopaedia Britannica, 11th Edit...(2010)adj provided with gillsSyn|Antgilledabranchial, abranchiate, abranchious, gill-lesshaving no gills\n

    该用户从未签到

    发表于 2017-3-24 11:31:05 | 显示全部楼层
    Oeasy 发表于 2017-3-22 08:236 X% R$ _3 T9 n3 Q
    我晕。。。: a% e6 B! U. T/ m4 a
    这样也可以。。。* c: v1 I5 S* p! x8 {
    那些 txt 以及相关方法真正首发者是:
    1 k7 y, ~/ y' Q: U5 J$ P
    您这是怎么能翻出我的知乎账号来的啊。我哪里露出马脚了。

    点评

    看头像ww  发表于 2017-3-26 00:24

    该用户从未签到

    发表于 2017-3-24 11:49:18 | 显示全部楼层
    本帖最后由 LYX1692 于 2017-3-24 13:20 编辑
    & |7 L0 N" j( ~# I* _' E6 e( B
    # w3 K! L, O+ m3 {7 m5 X" f我来冒个泡吧。: a+ r1 q- r( ?/ ^
    Filelocator pro 作全文搜索这想法,应该是我先想出来的吧。
    : j- {) Q- a: B* g至于说去除代码这事,TextForever是可以的。如果单个文件太大,就切割下,反正就算你用Filelocator pro,文件过大也是不便搜索的。+ a! ~5 R: ]( o2 v0 o
    (Python 的 BeautifulSoup 也可以,至少它是有这功能的,我自己只是拿它处理过一些小文档,没有处理过大文档,效果未知)
    3 f) V* [0 D2 H6 g" Z! s6 t2 u都是要切割成一些小文档,这样不会影响搜索,反而有利于提升搜索速度。% Q! t  l1 M- R$ b

    : M& i6 O6 e9 W6 T1 r) d4 F如果是我做,我恐怕不会直接用工具转成纯文本 txt 的。
    1 @2 J7 e) p) q0 ]我以前做的时候,虽然我知道有更方便的工具,可我还是得用正则来做的。( F) v% V3 `$ i
    因为你是要弄成纯文本来搜索,你最好设置好特定的格式。  s3 |9 ~" j) F4 A# ~) N/ g
    比如说,单词词条上加个五角星什么的。
    * |8 \1 [' x3 S% L) o0 s
    1 y* p! q/ P' G, k9 T像这样:/ R% \2 F# f* i2 M" E
    »He tries to keep his professional life completely separate from his private life.    ┊ 他设法让自己的工作和私生活完全分开。~『朗文当代』; g: l5 s- H; }5 y: R5 J: U& }# C* G

    5 K# v) |6 n0 v, g9 Y  ~哪里是例句,哪里是中译,哪里是原文出处。
    0 {1 z8 X# V+ d& Q  {* k
    ! L6 A! X8 Y9 Z) X2 o) C- i以一定的格式来处理 txt,会让你的搜索更有针对性。, Q& P# L/ A6 F; K; h
    导出来之后,也有利于你进一步整理。
    5 @$ {: i0 K" `! u
    # Q6 [# V! c9 C' v; F" O2 s- j这样的话,用正则,一个个htm标签来细心排版,活虽然做得慢点,可是,对你以后想做的事有好处。
    . [; Y8 N0 n1 I2 j  P) X* _
    2 `7 R$ u5 x2 ]/ ?4 ~
    : ?  _1 \. A7 `: g——————
    % j, M" i- B1 L+ C5 F9 ]感谢O大帮我看了下发贴时间,看到2013,这让我很感慨。
    7 S3 I9 p& D/ e) i9 h! W2 v/ z6 M# J

    该用户从未签到

    发表于 2017-3-26 00:03:55 | 显示全部楼层
    Oeasy 发表于 2017-3-22 08:230 |& |* z. @: i; n
    我晕。。。  ~& U, m9 q/ R& H/ T0 r
    这样也可以。。。: g- f! T+ Y; I
    那些 txt 以及相关方法真正首发者是:

    3 W/ T* F2 n, y. P我把mdx轉為txt,其實最終是要轉成 stardict格式,拿來給 kobo 或 nook等電紙書機器用。Kobo可以安裝 Koreader,字典格式是 stardict,但html會變成無用的干擾,必須清理。nook2 可以裝 android 版的 goldendict,但不支持 mdx,所以也得用清理過的stardict.
    / l' k' J- b8 \) Y0 u
      T" @1 {+ _" q" n9 @5 V$ q% a轉成stardict,清理過後,畫面比起mdx陽春許多,但要長時間讀書,電紙書比手機或平板好百倍,只得折騰了。
  • TA的每日心情

    2022-8-7 01:45
  • 签到天数: 75 天

    [LV.6]常住居民II

    发表于 2017-4-1 15:36:47 | 显示全部楼层
    试试置顶帖里的Dict Source Editor
  • TA的每日心情
    慵懒
    2021-8-25 10:07
  • 签到天数: 1227 天

    [LV.10]以坛为家III

    发表于 2020-11-11 15:37:09 | 显示全部楼层
    取进止 发表于 2017-3-22 00:12
    . g( p6 t' W5 U) t/ r7 A% o- BFrank huang 是知乎上面的名人。他在这个问题https://www.zhihu.com/question/30781969下面分享了七个txt ...
    0 R! m% A3 _0 W4 R, o
    验证了一下,居然真的名字是乱的,从他那下载的名字叫做剑桥的词典,打开里面是柯林斯的内容。不过这个文件最后一个单词虽然是 m,但单词好像不是按字母顺序排列的,我找了几个 p、s 开头的单词也能都找到,所以不确定是不是内容不全
    您需要登录后才可以回帖 登录 | 免费注册

    本版积分规则

    小黑屋|手机版|Archiver|PDAWIKI |网站地图

    GMT+8, 2024-3-28 16:57 , Processed in 0.045379 second(s), 10 queries , MemCache On.

    Powered by Discuz! X3.4

    Copyright © 2001-2023, Tencent Cloud.

    快速回复 返回顶部 返回列表