跳至主要內容
  • Hostloc 空間訪問刷分
  • 售賣場
  • 廣告位
  • 賣站?

4563博客

全新的繁體中文 WordPress 網站
  • 首頁
  • 很多数据上报到数据库然后存入数据库如何才能更优雅呢?
未分類
2 9 月 2020

很多数据上报到数据库然后存入数据库如何才能更优雅呢?

很多数据上报到数据库然后存入数据库如何才能更优雅呢?

資深大佬 : aladdindingding 14

现在有很多数据是通过 http 上报到服务器,然后服务器收到数据直接写入 redis 的队列里面。 然后每个队列有单独的 python 脚本把队列里面的数据 pop 出来写入数据库。现在麻烦的就是 1.每个队列写一个脚本入库,脚本多了变得难以管理。2.当一下有大量数据上报会导致数据挤压,如果不小心还会撑爆内存。。 不知道有没有大佬有这样的场景,怎么样做才可以最优雅呢

大佬有話說 (6)

  • 資深大佬 : walkfish

    message queue

  • 資深大佬 : wysnylc

    写个脚本生成 python 脚本啊,不要觉得搞笑这就是解决方案

  • 主 資深大佬 : aladdindingding

    @walkfish ok 我去研究研究 之前一直是使用的 redis 的队列

  • 主 資深大佬 : aladdindingding

    @wysnylc 套娃了。。

  • 主 資深大佬 : aladdindingding

    还是没明白用消息队列和 redis 队列又啥区别和好处呢

  • 資深大佬 : wakzz

    用 kafka 、rocketmq 之类的消息队列呀,redis 的队列太鸡肋了,还需要注意内存问题。

文章導覽

上一篇文章
下一篇文章

AD

其他操作

  • 登入
  • 訂閱網站內容的資訊提供
  • 訂閱留言的資訊提供
  • WordPress.org 台灣繁體中文

51la

4563博客

全新的繁體中文 WordPress 網站
返回頂端
本站採用 WordPress 建置 | 佈景主題採用 GretaThemes 所設計的 Memory
4563博客
  • Hostloc 空間訪問刷分
  • 售賣場
  • 廣告位
  • 賣站?
在這裡新增小工具