半点优化网 http://www.bdxc.net/
当前位置首页 > 网站技术问题> 正文

网站数据大量分析是python比较好还是mysql shell好呢?

2021-08-18 17:23:25 暂无评论 86 网站技术问题 大量   比较   还是

怎么感觉你没问道点上呢,你是想问网站大量数据分析用什么语言好还是用什么数据库好?

1.首先第一个问题,数据量大,多大?你要分析的数据量是100w,1亿还是10亿,是单表、多表还是异构数据关联分析,不同的情况采用不同的方案:

mysql在单表1kw-2kw就不行了,如果数据量小于这个量级,还可以用,超过建议使用分布式数据库,例如在数据分析领域使用的比较多的OLAP型的数据库,譬如MPP型的

2.分析语言,如果仅仅是数据可视化需求的,可以不用自己编写语言,直接用前端可视化工具如table、quickbi、finebi、power BI等工具,都可以如果你想做的是比较深入的分析,不仅仅是数据展示,还有一些算法的东西在里面,python是个不错的工具,但是在数据量特别大的时候就不行了,比如分析10亿量级数据的时候,那个时候建议使用spark,当然底层架构也需要做大改了,总之,不同的数据量级、不同的分析目的采用不同的方案

猜你喜欢