查找缺少字母的单词的良好算法和数据结构?
因此,我需要编写一种有效的算法来查找字典中缺少字母的单词,并且需要一组可能的单词。
例如,如果我有这个,我可能会找回这些主题主题等等。
我想知道是否有人可以建议我应该使用的某些数据结构或算法。
谢谢!
编辑:特里太太空间不足,并且会使其太慢。还有其他想法修改吗?
更新:最多会有两个问号,当两个问号确实出现时,它们将依次出现。
目前,我使用3个哈希表表示何时完全匹配,1个问号和2个问号。给定字典,我将所有可能的单词散列。例如,如果我有单词WORD。我对WORD,?ORD,W?RD,WO?D,WOR?,??
RD,W ?? D,WO ??进行散列。进入字典。然后,我使用链接列表将碰撞链接在一起。所以说hash(W?RD)=
hash(STR?NG)=17。hashtab(17)将指向WORD,而WORD则指向STRING,因为它是一个链表。
平均查询一个单词的时间约为2e-6s。我希望做得更好,最好在1e-9左右。
编辑:我没有再看这个问题,但是插入3m条目花了0.5秒,而查找3m条目花了4秒。
谢谢!
回答:
我相信在这种情况下,最好只使用一个平面文件,其中每个单词排成一行。使用此功能,您可以方便地使用正则表达式搜索的功能,该功能经过高度优化,可以击败您可以针对此问题设计的任何数据结构。
回答:
这是用于此问题的Ruby代码:
def query(str, data) r = Regexp.new("^#{str.gsub("?", ".")}$")
idx = 0
begin
idx = data.index(r, idx)
if idx
yield data[idx, str.size]
idx += str.size + 1
end
end while idx
end
start_time = Time.now
query("?r?te", File.read("wordlist.txt")) do |w|
puts w
end
puts Time.now - start_time
该文件wordlist.txt
包含45425个单词(可在此处下载)。该程序的查询输出为?r?te
:
brutecrate
Crete
grate
irate
prate
write
wrote
0.013689
因此,只需花费37毫秒即可读取整个文件并在其中找到所有匹配项。即使在Trie非常慢的情况下,它也可以很好地扩展用于各种查询模式:
询问 ????????????????e
counterproductiveindistinguishable
microarchitecture
microprogrammable
0.018681
询问 ?h?a?r?c?l?
theatricals0.013608
这对我来说足够快。
回答:
如果您想走得更快,可以将单词表拆分为包含相等长度单词的字符串,然后根据您的查询长度搜索正确的单词。用此代码替换最后5行:
def query_split(str, data) query(str, data[str.length]) do |w|
yield w
end
end
# prepare data
data = Hash.new("")
File.read("wordlist.txt").each_line do |w|
data[w.length-1] += w
end
# use prepared data for query
start_time = Time.now
query_split("?r?te", data) do |w|
puts w
end
puts Time.now - start_time
现在,建立数据结构大约需要0.4秒,但是所有查询的速度大约要快10倍(取决于该长度的单词数):
?r?te
0.001112秒?h?a?r?c?l?
0.000852秒????????????????e
0.000169秒
回答:
由于您已经更改了需求,因此可以轻松扩展您的想法,仅使用一个包含所有预先计算的结果的大哈希表。但是,您不必自己解决冲突,而可以依靠正确实现的哈希表的性能。
在这里,我创建了一个大的哈希表,其中每个可能的查询都映射到其结果列表:
def create_big_hash(data) h = Hash.new do |h,k|
h[k] = Array.new
end
data.each_line do |l|
w = l.strip
# add all words with one ?
w.length.times do |i|
q = String.new(w)
q[i] = "?"
h[q].push w
end
# add all words with two ??
(w.length-1).times do |i|
q = String.new(w)
q[i, 2] = "??"
h[q].push w
end
end
h
end
# prepare data
t = Time.new
h = create_big_hash(File.read("wordlist.txt"))
puts "#{Time.new - t} sec preparing data\n#{h.size} entries in big hash"
# use prepared data for query
t = Time.new
h["?ood"].each do |w|
puts w
end
puts (Time.new - t)
输出为
4.960255 sec preparing data616745 entries in big hash
food
good
hood
mood
wood
2.0e-05
查询性能为O(1),它只是在哈希表中的查找。时间2.0e-05可能低于计时器的精度。当运行1000次时,每个查询平均得到1.958e-6秒。为了更快地获取它,我将切换到C
++并使用极其节省内存且快速的Google Sparse Hash。
回答:
以上所有解决方案都可以正常工作,并且对于许多用例都应该足够好。如果您真的想变得认真并且有很多空闲时间,请阅读一些好的文章:
- 近似字符串匹配的尝试 -如果实施得当,尝试可以具有非常紧凑的内存要求(比字典本身少50%的空间),而且速度非常快。
- Agrep-快速近似模式匹配工具 -Agrep基于一种新的高效灵活的算法,用于近似字符串匹配。
- Google学术搜索搜索近似的字符串匹配 -足以阅读该主题。
以上是 查找缺少字母的单词的良好算法和数据结构? 的全部内容, 来源链接: utcz.com/qa/398945.html