当前位置: 开发笔记 > 数据库 > 正文

求指导如何均匀分配生成存放千万级用户的log文件

作者：jojo | 来源：互联网 | 2017-05-13 02:14

用户的唯一标识是111111111~999999999生成的随机数未来预估的用户量是千万级的存储用户上传的坐标点以来画行动轨迹没存储到数据库生成的log文件我是用取模算法来分配还是用hash来分配如果用hash分配请详细说一...

用户的唯一标识是111111111~999999999生成的随机数
未来预估的用户量是千万级的
存储用户上传的坐标点以来画行动轨迹没存储到数据库生成的log文件
我是用取模算法来分配
还是用hash来分配
如果用hash分配请详细说一下。

回复内容：

日志存储用nosql，比如mongodb, hbase或者elasticsearch，都自动帮你做了sharding

推荐阅读

sql
架构师必读：日均500万数据，如何进行数据存储选型？

点击上方关注我，选择“置顶或者星标”作者：麦田里的老农来源：https:zhuanlan.zhihu.comp37964096小编公司有一 ... [详细]

蜡笔小新 2023-10-13 09:35:19
sql
每天收获一点点Hadoop概述

一、Hadoop来历Hadoop的思想来源于Google在做搜索引擎的时候出现一个很大的问题就是这么多网页我如何才能以最快的速度来搜索到，由于这个问题Google发明 ... [详细]

蜡笔小新 2023-12-14 18:58:01
sql
关系型数据库和NoSQL数据库的介绍及应用场景

本文介绍了关系型数据库和NoSQL数据库的概念和特点，列举了主流的关系型数据库和NoSQL数据库，同时描述了它们在新闻、电商抢购信息和微博热点信息等场景中的应用。此外，还提供了MySQL配置文件的相关内容。 ... [详细]

蜡笔小新 2023-12-10 15:47:11
redis
mongodb数据迁移,程序员未来职场之路

一面自我介绍对象相等的判断，equals方法实现。可以简单描述挫折，并说明自己如何克服，最终有哪些收获。职业规划表明自己决心，首先自己不准备继续求学了，必须招工作了。希望去哪 ... [详细]

蜡笔小新 2023-10-17 13:57:50
insert
MongoDB创建数据库和用户

step1.为mongodb添加admin管理员root@12.154.29.163:~#mongoMongoDBshellversionv3.4.2connectingto:mo ... [详细]

蜡笔小新 2023-10-17 12:02:01
sql
Oracle数据库临时表空间问题

nsitionalENhttp:www.w3.orgTRxhtml1DTDxhtml1-transitional.dtd ... [详细]

蜡笔小新 2023-10-16 20:04:07
nosql
2亿简历遭泄漏，到底谁的锅？

前面刚有AWS开战MongoDB，双方“隔空互呛”，这厢又曝出2亿+简历信息泄露——MongoDB的这场开年似乎“充实”得过分了些。长期以来，作为“最受欢迎的NoSQL数据库”，M ... [详细]

蜡笔小新 2023-10-15 17:05:15
数据库
关于mysql原理与web系统开发的信息

本文目录一览：1、在做web开发的时候，MySQL主要功能是什么？ ... [详细]

蜡笔小新 2023-10-14 18:04:51
nosql
hackingTeam是如何被黑的

hackingTeam是如何被黑的 ... [详细]

蜡笔小新 2023-10-14 17:02:43
mariadb
数据库进入全新时代，腾讯云发布五大数据库提前布局

8月28日，腾讯云数据库在京正式启动战略升级，宣布未来将聚焦云原生、自治、超融合三大战略方向，以用户为中心，联接未来。并在现场面向全球用户同步发布五大战略级新品，包括数据库智能管家 ... [详细]

蜡笔小新 2023-10-14 16:03:56
join
MySQL：互联网公司常用分库分表

本文目录一、数据库瓶颈IO瓶颈CPU瓶颈二、分库分表水平分库水平分表垂直分库垂直分表三、分库分表工具四、分库分表步骤五、分库分表问题非partit ... [详细]

蜡笔小新 2023-10-13 17:48:53
sql
《Python3 网络爬虫开发实战》:高效实用的 MongoDB 文档存储

NoSQL，全称NotOnlySQL，意为不仅仅是SQL，泛指非关系型数据库。NoSQL是基于键值对的，而且不需要经过SQL ... [详细]

蜡笔小新 2023-10-13 12:58:52
sql
在Ubuntu中安装MongoDB

nsitionalENhttp:www.w3.orgTRxhtml1DTDxhtml1-transitional.dtd ... [详细]

蜡笔小新 2023-10-13 10:01:51
sql
SQL：数据世界的通用语

目录摘要SQL的现在NoSQL,NotOnlySQL要分布式，也要SQL总结引用摘要毫不夸张的说，关系数据库是企业软件系统的核心，企业形形色色信息行为的背后，都有关系数据库的支撑。 ... [详细]

蜡笔小新 2023-10-12 22:29:13
sql
Oracle中存储过程和函数的区别

nsitionalENhttp:www.w3.orgTRxhtml1DTDxhtml1-transitional.dtd ... [详细]

蜡笔小新 2023-10-12 21:18:36

jojo

这个家伙很懒，什么也没留下！

Tags | 热门标签

RankList | 热门文章