如何制作（Vocabulary.com + Collins + 雅思 + 牛津）高频短语词组记忆库？

cocowind

atomore 整理了（Vocabulary.com + Collins + 雅思 + 牛津）中的高频短语词组
! x6 f8 f) _8 x* U内容包括：
https://www.pdawiki.com/forum/thread-33730-1-1.html?x=180507
1. Vocabulary.com词典中词频小于20000的词组 （1977个，按词频排序）；
# j* F7 |' o  C' q2. 柯林斯双解词典中 五星词组 （4692个, 按五级分组排序）；
5 N: t) }0 u4 P: C: N3. 剑桥双解词典中 雅思词组 （2452个，按A1-C2分组）；
4. 牛津双解词典中 星标词组 （298个）。
+ ?6 G7 q$ Q/ y/ q2 V% d
如果要把atomore 整理的xls列表，制作成anki记忆库（反面是相应词典中该短语词组的内容），技术上如何实现呢？
希望集思广益

& G! V- O% n! r2 Y

sheward

合并后，在Excel里删除相同词组后，大概有8000多个词组。
- y; |0 z  L" F不知道怎么批量提取中文。

ogrishman

anki用的是sqlite数据库存储信息的，首先搞清楚数据库中table的结构，你可以在你想要的deck里创建一个新词条，然后分析数据库中的数据。
* T6 T8 l7 _) g5 A1 ^然后就是根据单词提取对应词典中词条的信息，处理好以后写到anki的数据库中。这一步可以编写程序实现，也可以用某些editor的automation实现，比如用EmEditor。

cocowind

ogrishman 发表于 2019-4-25 23:37
6 w, k4 g: C; o  Qanki用的是sqlite数据库存储信息的，首先搞清楚数据库中table的结构，你可以在你想要的deck里创建一个新词 ...

谢谢指点。
- ?$ l% W6 N) {& I% t! W; J& F短语词组每个单词都懂，但合在一起意思可能大不同，偏偏还太常见。
: ?" h) ~( W% M
需要学习一下技术了

脚下千

0 Q$ m0 m. ?4 l4 ~) C" K这个站在前人的基础上，有简单一点的方法，不过需要有支持的词典。
( \6 \7 e, r. g- a
8 o  _" {9 ]* R& Y8 ]4 H8 M简单来说，就是 将 xlsx 转成 csv，然后导入 anki，用 anki 插件（我用的好像叫 FastWordQuery）查询即可。
. V1 P/ L1 p- N* [
7 J  Z0 l+ j# ]8 H虽然说缺的词典可以在这个插件基础上增加（因为给出的 mdx 词典一般都没有短语的索引），但目前我所见到的只有 longman 词典的短语有人制作过，其他的不知道有没有。
如果自己解析对应词典的话，也许在实现上比较方便（解析 mdx 内容后用正则表达式只提取相关短语释义），但给插件贡献词典解析可能会有更广的作用。

2 M& u* r. @# b4 ^' [+ \ps：这个引起了我的兴趣，有些想做了，不过我的 CoCa 20000 还没背完……

+ ?- @" b& @5 J* u" |; n( v

cocowind

脚下千 发表于 2019-4-26 14:23
这个站在前人的基础上，有简单一点的方法，不过需要有支持的词典。

简单来说，就是 将 xlsx 转成 csv，然 ...

  k  V/ g" c) `4 H9 G3 m) c不知道插件对短语词组的支持如何？
/ z7 V5 R4 I1 j& T9 y( J一个难点是例如eat one's fill这样的短语在不同词典里的词条可能是各种形式，eat sb's fill等等等等
不容易批量把该短语在各个词典中的相关entries都查询出来，以便进一步进行比较再挑选自己觉得最好的词典解释和例句
3 O7 i! ]' f/ e0 D) ~" Z) P9 R

脚下千

cocowind 发表于 2019-4-26 20:02
不知道插件对短语词组的支持如何？
一个难点是例如eat one's fill这样的短语在不同词典里的词条可能是各 ...

1 @7 e) D4 ]1 H7 Y& Q这个倒不是很难，就是麻烦点，直接按不同形式处理一下即可，比如 one 替换为 sb 等，当然里面可能有更复杂点的规则要写。
( k7 ]4 c0 m4 Y1 U& V
如果要统一结果到一处的话，就多列几个 fields 存储不同的查询形式，然后按词典逐个查询。
8 @3 `$ a! H0 m, {; }# X8 R. n
) C6 F4 @! [+ i& Z当然，这都需要有词典支持，一般来说上述词典我猜很少能对短语直接查询的（我没用过啊）。
$ y4 q8 @, b7 @
插件设置自定义词典后，只是根据字段直接查询，然后提取所有内容，和在词典软件里是一样的。在词典软件里如果直接输入短语查不到，那么插件也查不到。

cocowind

脚下千 发表于 2019-4-28 19:33
这个倒不是很难，就是麻烦点，直接按不同形式处理一下即可，比如 one 替换为 sb 等，当然里面可能有更复杂 ...

/ {' u! A( ~1 J0 G4 K4 ]0 \4 A8 d谢谢指点~

看到这个方法也许可以借鉴一下
+ o% [+ Z9 H( Ghttps://www.pdawiki.com/forum/thread-11546-1-1.html?x=180507

xusorn

是fq这个插件不够好吗……直接把词条转为utf-8的txt导入anki，建几个字段用fq查询不就是了，而且css格式也能保留，要修改css去collection.media修改就是了

脚下千

xusorn 发表于 2019-5-6 19:48
是fq这个插件不够好吗……直接把词条转为utf-8的txt导入anki，建几个字段用fq查询不就是了，而且css格式也 ...

) C: e2 J- m' R( r% {7 K7 n: r这个要词典本身支持才可以的，目前很少这样的词典。楼主说的是匹配短语，不是单词。（具体见我前面的帖子）

xusorn

脚下千 发表于 2019-6-12 03:12
这个要词典本身支持才可以的，目前很少这样的词典。楼主说的是匹配短语，不是单词。（具体见我前面的帖子 ...

' W* T2 @% N- ^. S, t我看清了问题，论坛的韦氏，朗文，牛津的词组不够你用吗？至少我用fq把vocabulary前1000的都查到了
% S2 \  ^$ q5 B. A: Q& x+ B1 K
3 N/ j: ?5 H7 q

脚下千

xusorn 发表于 2019-6-12 07:27
我看清了问题，论坛的韦氏，朗文，牛津的词组不够你用吗？至少我用fq把vocabulary前1000的都查到了

+ ?7 s) O! e: q, @。。。
8 N( l3 F/ N& J- X
0 Y) @1 M5 u: H+ N' t* C1. 问题中是： Vocabulary.com + Collins + 雅思 + 牛津 —— “制作成anki记忆库（反面是相应词典中该短语词组的内容）”

' L5 a! t" ]  \0 q+ \; t* I6 k2. 输入是"例如eat one's fill这样的短语在不同词典里的词条可能是各种形式，eat sb's fill等等等等";
: K+ X; K2 x8 I! K) D% x- p- X
% Z2 R; ?! I! ^: A3. 需求是做一个“综合”的短语库，不能说这没必要，起码楼主是需要的；而这涉及到第 2 点中的形式不同问题，至少要预处理一下

4. FastWordQuery 我首次回帖就告知了楼主
$ A+ G* s  E$ R$ C2 n6 T
; \6 D1 Y3 ?" r. w8 J$ P: j) d( k5. 我不是楼主

xusorn

脚下千 发表于 2019-6-12 13:05
* v% F- q% ?7 g5 Y6 {6 A0 _! m* J% ^。。。

1. 问题中是： Vocabulary.com + Collins + 雅思 + 牛津 —— “制作成anki记忆库（反面是相应词 ...

; l- d! O+ j* x" u6 N我上一条是在回复你回复我的“这个要词典本身支持才可以的，目前很少这样的词典。楼主说的是匹配短语，不是单词。（具体见我前面的帖子）”
4 D* P9 \2 M' f; o0 h* k我回复楼主的是匹配词组，你说我是回复匹配单词，所以我进行了回应。
你说目前词典少，所以我就把论坛可以查的词典多告诉你了。
( k/ r  ^$ m# Z9 N$ u1 g结果你和我扯什么形式，什么综合，搞得我好像没看清提问一样，而且你告知了和我有什么关系，我一开始就没回复你，是你在回复我，说我查的不是词组是单词啊。。。

脚下千

xusorn 发表于 2019-6-12 15:38
; w* z7 z9 M( D8 _2 t# M我上一条是在回复你回复我的“这个要词典本身支持才可以的，目前很少这样的词典。楼主说的是匹配短语，不 ...

4 X# K& J7 ]" l0 d* p之前回复你是看到你的用词—— 什么“不够好吗，……就是了，……就是了” 才回复的，另外当时你的图片也没显示出来（也许是论坛原因），我表达能力低下，想让你去看我之前写的内容 ，但因为 我懒，我笨，我没写清楚，我标点符号不会用，最后让你觉得我在说你用它来匹配单词而不是短语 —— 的确，我 这个 sb 怎么知道 fq 原来也可以匹配短语 ?!
' D+ N% v# I. `# n+ V. H9 m
算了，我是 sb，这里不是 StackOverflow，论坛发帖不需要看别人回帖。不再继续争论。我是 sb。

xusorn

脚下千 发表于 2019-6-13 11:00
$ U, L( X6 z. r之前回复你是看到你的用词—— 什么“不够好吗，……就是了，……就是了” 才回复的，另外当时你的图片也 ...

图片应该是是之前服务器出了问题，我一开始就不认为查询这些词组不是特别困难的事情，但如果我的措辞对你产生了困扰，我对你表示抱歉。刚刚把你的回复完整的看了一遍，我个人认为你可能是想把词条统一形式表达，然后进行合并去重再统一查询，不知道是不是这样，如果是是的话，我个人认为存在三个需要考虑之处
1.工作量对于我和一般的不会Python的用户来说，应该不算小，因此可行性不高，或许程序员可以解决这个难题。
/ x! y8 |3 T# O/ x# }3 v6 ?  E2.如果统一了形式，再进行查询，是否能够查询得出，因为每个词典的表示不同，那么同一个形式是否能在多个词条查询出结果，这也是一个需要考虑的问题。
3.此外，每个词表的来源词典不同，因此导致词频及常用性的统计也不相同，合并后是否能够兼顾这些？
因此我觉得，如果仅仅是为了去重而大费周章的改形式的成本远大于收益，所以我建议直接用多本词典进行查询或许是更好的选择，我已经制作出来了，比把制作流程发到了论坛，如果有兴趣，也可以看看[【展示+制作教程】根据高频短语词组制作anki记忆库教程https://www.pdawiki.com/forum/fo ... hread&tid=34820]

margoagnes

好高深的样子