威威
3
一个热爱编程的人
威威

简介:一个热爱编程的人

粉丝

0

关注

0

说说我的想法
同时监控淘宝上很多物品的价格,然后获取价格走势(这个我打算自己写爬虫获取,然后存在数据库里),但是问题来了
该如何存储数据,使我能分析哪些物品在最近2天或7天的价格波动最大(最好是任意天数),这个地方该怎么实现比较好。总不能说每天我都要遍历一次数据库来求价格的差值吧,能不能有经验的大师指点下。

2019-01-08 09:21 浏览 30 收藏 举报

分享你的真实观点和经验,通过汇编、洗稿的等方式拼凑的回答将会被折叠 完成
3个回答
  • 莫把无知当天真
    古木流风

    简介:莫把无知当天真

    粉丝

    0

    关注

    0

    数据分析的方法和java不是强相关的,java从某种角度说只是一种工具,可以将你的想法交给计算完成,可以实现你与计算机的交流,有基于java相关的haoop生态,可以了解一哈

    评论 0
    2019-01-08 17:55:30 点赞   举报  
    取消 评论
  • 平平淡淡最真,简简单单是福
    雪白梅香

    简介:平平淡淡最真,简简单单是福

    粉丝

    0

    关注

    0

    需要分析的变动快的 --> 热数据 --> redis , 放在内存;
    长期的历史数据 --> 冷数据 --> mysql / oracle ,放在磁盘。

    评论 0
    2019-01-08 17:55:43 点赞   举报  
    取消 评论
  • 四月
    10
    人间四月天
    四月

    简介:人间四月天

    粉丝

    0

    关注

    0

    总不能说每天我都要遍历一次数据库来求价格的差值吧 是觉得开销过大吗?那就把热点数据放Cache,过了这段热点时间就持久化到数据库。

    热点数据可以是但不限于:

    • 这几天刚采集的数据

    • 最常常分析的日期段,比如2天、7天、1个月

    评论 0
    2019-01-08 17:56:02 点赞   举报  
    取消 评论