大流量高并发的业务产品,比如抖音,技术难点有哪些?计算实…

大流量高并发的业务产品,比如抖音,技术难点有哪些?
计算实例可以无限扩展,存储性能不足,分库分表,一主多从+cache
mq写入压力大,多搞几个分区,本质也是分片。
redis更简单了,最多可以搞16000多个实例来支撑?
有没有懂行的同学来喷喷我,我也涨涨见识

腾讯公司员工:占个楼

程序猿.恒山弟子:m

桃花仙:确实 我负责的计算实例,无限扩展就行。优化是为了省机器

字节跳动员工:m

广州虎牙信息科技有限公司员工:本质是这些,怎么用起来不出问题才是关键。

龙虎山张天师:分库后数据库连接不够用,单元化还是很复杂的

曹彰:m

程序猿.阮小七:m

少林弟子:m

京东员工:m

程序猿.少林弟子:m

美团点评员工:M

程序猿.归辛树:单元化吧。

程序猿.昆仑弟子:机器多的话,给一个用户分一台机器。

文鸯:数据一致性就够你玩的了……

北京字节跳动科技有限公司员工:你说的都对,但现在队列不够,存储不够,k8s不够怎么处理

程序猿.司马师:就是分片

衡山弟子:成本

宋兵乙:m

程序猿.昆仑弟子[2]:不说别的。分表后的非主键联表查询cache就让你喝一壶的。不过很大可能你不知道我在说什么。

程序猿.韩当:@程序猿.昆仑弟子[2] 都分表了,非主建查询肯定要搞到主键查询上去呀

程序猿.骇客神:m

程序猿.昆仑弟子[2]:@程序猿.韩当 菜鸡闭嘴吧。

华山弟子:1

程序猿.司马师:@程序猿.昆仑弟子[2] 技术选型有问题

程序猿.韩当:@程序猿.昆仑弟子[2] [害羞][害羞][害羞]

美团员工:m

美团点评员工[2]:如果无限扩充 机器不需要成本吗?机器成本非常高的,不优化一年几百亿

深信服科技员工:m

程序猿.低压锅蒂亚戈:m

字节跳动员工[2]:m

字节跳动员工[3]:基本正确,想看代码可以直接去查核心服务的代码,这种时候难点不是大流量高并发了,而是在这种超大流量下的稳定性该怎么保证

昆仑弟子:M

程序猿.陈近南:m

程序猿.衡山弟子:随便一个网络抖动都可能导致出问题

宋远桥:如果都是无状态,不考虑一致性,都能做到横向拓展,那是最理想的方案,但是核心的一致性才是最难解决的

美团点评员工[3]:@程序猿.昆仑弟子[2] 大神牛啤,此处破音

腾讯员工:@程序猿.昆仑弟子[2] 花大功夫解决原来不应该存在的问题[坏笑]

eight:短视频本来就这样啊, 基本没有一致性非常高的场景, 只是纯粹的高并法, 难度还不如之前的直播答题

字节跳动员工[4]:boy,说起来简单,生产环境中任何一个细节失误都可能导致系统故障

楼主:@字节跳动员工[3] 超大流量的稳定性建设,老哥指的是降级容灾之类的吗?核心场景下如抖音feed,应该就是一层一层的兜底了。至于其他场景可以就直接返回错误?

得物App员工:@程序猿.昆仑弟子 客户端人上人

诸葛瑾:mm

楼主:@广州虎牙信息科技有限公司员工 老哥能否展开讲讲?

玄天机:抖音和并发有啥关系?是流量大,本质上一个视频播放,一个评论系统。视频播放核心在于编解码和带宽,应该说核心是带宽,关键还是钱[害羞],技术没鸟用

楼主:@北京字节跳动科技有限公司员工 这个应该就是在大框架下的小优化了,比如原来串行的改成并行。日志不要随便打了,降低网络流量等等吧。可能要从业务出发了,再具体的我就想象不出来了老哥能指点一二吗?

字节跳动员工[4]:如果你有机会实地参与一次阿里双十一、字节春晚活动,这种规模的活动,你就不这么想了。这就跟知道发动机的原理,和造一台汽车,这是两回事好吗

楼主:@程序猿.昆仑弟子[2] 非主键联表查,如果有这种业务场景,那么就应该增加数据冗余,将无法分片的数据额外存储一份。或者只是数据分析用,那么应该将数据导入hive,提供额外服务

楼主:@美团点评员工[2] 嗯,优化应该也是在上面大框架下,根据具体的业务特点进行的对吧?因为没接触过相关业务,想象不到。。老哥给指点下?

腾讯公司员工:@字节跳动员工[4] 哪里有机会[哈哈]

两个男同事经常当着我的面聊黄色,经常就是一个男生提黄色,…

两个男同事经常当着我的面聊黄色,经常就是一个男生提黄色,另外一个男生就接他话,两个人就这样聊起来了??真是受不了陆龟蒙:人品真差 前阿里巴巴(中国)网络技术有限公司员工:为啥不走开呢 中公教育员工:经常?或许他们以为你也喜欢听?[笑哭] 雷神之锤的续集:45MA上的人大概率都会谴责你…[做鬼脸] 百度员工:性骚扰了 百度员工:录下来,报给hr可以开除。 程序…

女朋友已经拿了阿里offer,但前段时间被师兄忽悠,准备…

女朋友已经拿了阿里offer,但前段时间被师兄忽悠,准备去一个国企,虽然给户口,但一个月才18k,而且过去三年内都不能跳槽。我国庆劝她不要去,北京房价动辄上千万,拿了户口也没啥用,不如去互联网挣高薪,以后买房买车用工作居住证,小孩上私立出国就行了。为了这事跟她大吵一架,真是郁闷鲁肃:阿里包多少 一棵沉默的树:拿户口就一个窗口期,过了这村没这店了,前三年不是还…

和恋爱一年半的男友因为结婚买房面临分手,结婚到底该男方买…

和恋爱一年半的男友因为结婚买房面临分手,结婚到底该男方买房还是一起买房?美团点评员工:他有钱就他买,钱不够就一起 少林弟子:住水泥管 百度在线网络技术(北京)有限公司员工:因为啥 風陵渡:他买就房本就只上他的名,最怕不掏钱还想分一杯羹[不开心][不开心] 快手员工:说说你自己的看法呗 美团点评员工[2]:如果是北京的房子,一个人的力量是有限的 中公教育员工:…

有了老公就不能有异性朋友吗?总觉得男性朋友比较聊得开 ,…

有了老公就不能有异性朋友吗?总觉得男性朋友比较聊得开 ,就怕老公会不高兴 吃醋之类的衡山弟子:不建议,并且最好不要私聊,聊公不聊私。 快手员工:大部分结婚的女性都会退出自己的社交圈子,而结婚的男性不会。 程序猿.衡山弟子:@快手员工 [吐血] 孙乾:只要你老公天天和异性聊的开,你不在意说行[挖鼻屎] 徐盛:有了老婆可以有异性朋友吗?总觉得女性闺蜜比较聊得来,…

去老公家里上桌吃饭,老公端了饭一个人跑到阳台吃,剩下我和…

去老公家里上桌吃饭,老公端了饭一个人跑到阳台吃,剩下我和他父母在桌上吃饭合理吗?桃实仙:不合理,为啥跑去阳台吃? 程序猿.萧让:你没来之前他应该不止在自己家端着饭跑阳台吃 还可能在别人家墙根吃 百度员工:蹲着吃比较自在 阿里巴巴集团员工:可能就是这个怪习惯,不过你要是第一次去,这种怪习惯也该收收的。 程序猿.小灰灰:很多地方客户端开发不许上桌吃饭的 前北京字…