掌上百科 - PDAWIKI

 找回密码
 免费注册

QQ登录

只需一步,快速开始

查看: 1405|回复: 7

[词典讨论] 有关字幕语料库更新问题

[复制链接]
  • TA的每日心情
    郁闷
    2018-5-17 09:15
  • 签到天数: 1 天

    [LV.1]初来乍到

    发表于 2019-4-6 07:59:45 | 显示全部楼层 |阅读模式
    本帖最后由 y8888 于 2019-4-6 08:02 编辑 ! x5 G* [. h; I: V# d  l, h

      K6 G/ Q; ]! r% {因本人发布字幕语料库 详见https://www.pdawiki.com/forum/fo ... =%E5%AD%97%E5%B9%95  。总有人问我能不能更新?; o- C; S% `" J, \9 D! |6 p

      e: {) @; j8 Z* E- @/ j4 D4 D/ R0 B/ C, ]' M6 ?( ~( o
    这个工程很大,射手网关闭时的字幕压缩好就有10多个G。我的电脑配置不好。当初做字幕语料库时只是双核4G内存电脑。好像选的是论坛中https://www.pdawiki.com/forum/fo ... =%E5%AD%97%E5%B9%95 共享的300多MB的字幕处理的。
    ! E9 G: c& Z, ]- D) h; F  g  H总有人提出希望我能更新一下。字幕语料库帖子中也有热心的坛友共享出很多字幕。5 v8 {3 z4 K* b  @# Y* X8 s
    4 N( m& H7 N" l4 \! c
    10多个G的文本。是很考验人与电脑。更新也不是不可能事,但我还是得请各位共同参于进来,一个人力量太小了。最起码前期工作你们得帮忙完成。, y( }6 s: K) C& `* c

    ; _( t8 s! ?8 }前期工作就是下载好字幕,把不是英中的字幕删除。同一部影片有可能会有多个版本的字幕,只留下一个你认为好的。& \: H9 T2 J: @( n# W( k
    然后就是把繁体字幕统一转成简体。把时间线及不要的内容删除,处理成上行英下行中。可以把字幕合成500MB左右大小的多个文本文件。
    / g! D, k2 A# Y% A) L/ E( t然后把只要有乱码的行对应的翻译英与中都删除。) G/ i" O2 r+ z6 v
    + n; I" j, F) a* b4 q8 y1 L
    这样处理好后丢给我,你可以提出你们的想法要做成什么样的效果。我试试能不能实现。
    . S! m3 T- d9 ]- N* y3 P4 W1 l6 n) L$ w7 A& U& \' a/ P4 y8 R
    如果大家只是打几个字让我更新一下,然后坐等。我是不会去做这事的。前期若没有人做则这事就到此为止了。若有人把前期弄好了,我会把这库交给作贡献大的那位去处理,让他去决定是否分享给大家。当然我还是不希望以金钱方式分享。其它的方式不去干涉。/ |( T8 @1 U$ Q
    - {! h' E7 P" M. k4 q' n. a
    工程很大,指望别人的同时首先得自己出点力了。当然复杂度可想而知。比如包含“我们”的句子估计不少于上万条吧。但全例出来那这本库可想要翻多少倍了。
    * k7 K- r& h0 Z* f1 m  g  O3 @1 |
    操作中可能会遇到新的问题,还得大家出个点子看如何更实用。+ i3 z0 `! J/ \0 u- f/ g- \3 U5 Q
    , r# e8 @* }1 D- S8 }+ v

    本帖被以下淘专辑推荐:

  • TA的每日心情

    2019-5-4 11:17
  • 签到天数: 36 天

    [LV.5]常住居民I

    发表于 2019-4-6 09:29:04 | 显示全部楼层
    权利支持楼主的工作,楼主已有的2个字幕mdx在现实应用中十分有参考价值
  • TA的每日心情
    奋斗
    2019-4-14 02:12
  • 签到天数: 93 天

    [LV.6]常住居民II

    发表于 2019-4-6 12:24:11 | 显示全部楼层
    目前我是通过命令行方式去全文搜索字幕的,还挺方便的。看了下那个字幕,去掉不相关时间轴还好,去重就比较难了… 另外有不少字幕文件是UTF16编码的,可能很多脚本不支持。

    点评

    用全文索引功能则更方便。可以任意组合搭配查阅。看你使用的软件有没有这个功能。  发表于 2019-4-6 13:31
  • TA的每日心情
    开心
    2020-3-8 09:14
  • 签到天数: 1 天

    [LV.1]初来乍到

    发表于 2019-4-13 17:53:38 | 显示全部楼层
    所谓语料库,越全越大越好,怎么取舍总是主观。如果能够直接使用语料库软件检索,查找自己感兴趣的词语岂不是更好。含“我们”的句子的确可能过万,但一般人也不需要查这个词吧,这应该只是个别情况。
  • TA的每日心情
    奋斗
    2019-10-12 00:12
  • 签到天数: 353 天

    [LV.8]以坛为家I

    发表于 2019-6-26 03:15:35 | 显示全部楼层
    支持楼主,射手网10多个G的字幕在哪呢?
  • TA的每日心情
    开心
    2022-9-14 10:18
  • 签到天数: 438 天

    [LV.9]以坛为家II

    发表于 2019-9-30 17:51:30 | 显示全部楼层
    http://www.shareditor.com/blogshow?blogId=112
    : x/ X% o& L( D/ Z) ]9 Y7 q, m! o- E. G  ?8 D
    三千万现成字幕有下载成功的吗?我想付费下载未成功
  • TA的每日心情
    奋斗
    2022-10-7 09:22
  • 签到天数: 832 天

    [LV.10]以坛为家III

    发表于 2021-4-23 14:39:46 | 显示全部楼层
    这个字幕很多是同一部剧的不同版本
    您需要登录后才可以回帖 登录 | 免费注册

    本版积分规则

    小黑屋|手机版|Archiver|PDAWIKI |网站地图

    GMT+8, 2024-4-29 07:53 , Processed in 0.055883 second(s), 10 queries , MemCache On.

    Powered by Discuz! X3.4

    Copyright © 2001-2023, Tencent Cloud.

    快速回复 返回顶部 返回列表