超大运算量的实现方案
資深大佬 : 123go 3
公司在做一批数据处理。 大致任务就是将 450 万的领域名词逐个去与 30 万的产品进行对比，得出与每个名词最相关的那一个产品。 “最相关产品”的计算过程是一个 python 写的 nlp 算法。目前使用公司内部的 Dell T430 Linux 服务器进行测试，每个名词的处理大概需要 30 秒。也就是说只用这一个服务器的话，处理完所有数据，大概需要一个半月的时间。老板希望总处理时间缩短到一个星期之内。 请问类似这种场景，有什么最佳实现吗？
大佬有話說 (4)