单机存储大量的小文件该如何选择?

myzincx:需求:一个小时大概有 180w 个不超过 10kb 的小文件要存储在单机设备上(只提供单机),目前直接写文件会直接造成程序性能基本不可用

想法:
1.目前有想过的是打包成一个大文件直接建立自有索引,但是这么做的话程序需要改动很多(主要是其他部门的),而且本部门人手有限,开发维护起来可能有困难。
2.也有查过一些文件存储框架,首先大部分框架是分布式的,我们只能提供单机,不知道这个会不会造成影响;其次,因为其他部门有个功能必须是对文件进行直接读取操作的(貌似 ceph 是可以当成一个挂载卷的这种,不太了解,如理解错误希望指出),不能够通过网络 api 调用操作(如 seaweedfs)。

所以想请教下大家,有没有那种单机适合这种小文件大量读写的。
写多,读少,不删除。

用户上传的敏感数据,需要加密吗?

lithium148:登录密码肯定是要加密的,但是敏感数据呢? 比如便签软件的便签内容,聊天软件的聊天内容,存储到服务器上需要加密吗? 实际各大公司有加密没有?应该在服务器端加密还是客户端加密? 谢谢!

想买个安卓当副机,求推荐

edinina:要求 5g 和高刷,拍照无所谓,存储也不用特别大,求推荐推荐,预算六千以内吧,华为小米除外,最近在看三星 vivo oppo 一加这几个牌子,但实在看不明白

云主机可以做哪些好玩的东西?

ipadpro4k:做个网页送女票 opengps:最基本的开发辅助:SVN,GIT,文件存储最普通的成果:个人博客,测试站点更无聊的用法:挂 QQ,登微信比较稳妥的用途:用于站点监控,端口可用性检测比较黑暗的用法:爆破扫描还有很多。。。

减少查询次数的骚操作

lithium148:假设我有一个记录,用来管理某元件开关的状态,{id:1;开关:ture;其他记录:etc…}。 所有开关的初始状态均为开,随机 X 分钟后变为关状态( X 由用户设定,可以读取到),关闭后永远不会开启。 现在我把 10000 个这样的记录存在数据库的一张表里。我的程序需要每分钟遍历 1 次所有的记录,找出开关是开的。问题是即使只有最后 …

老哥们,有一个关于用户结算时购物车可用优惠券筛选的需求,求助!

Gaussen:目前创建优惠券有三种形式: 1.全部商品可用(这种最简单)。 2.部分商品可用 /(商品分门店商品和网店商品,因此包含 [网店商品全部可用+部分门店商品可用] , [网店商品部分可用+全部门店商品可用] , [网店商品部分可用+全部门店部分可用] 这几种组合)。 3.部分商品不可用(商品分门店商品和网店商品,组合同上)。 当前的优惠券设计是一…