标签:count hdfs += 分布 稳定性 提升 false UNC log
短URL设计。
案例: Rate Limit 流量限制
编程语言太多。Go语言。Python动态语言。类型没有检查。随意改变类。
Spring : 反转。
数据流: 分布式。
Storage:
HDFS,MySQL
cloud Platform
amazon google
流量大了怎么弄? consistent, 挂机了怎么样?
习惯: 激情,弱点,公司长远的目标。
系统设计问题:
1 Tiny Url
2 RateLimit
3 Messenger/ Chatroom
4 Stats Server
5 News Feed
6 Web Crawler
7 Location Based Service
8 Web Applicatio
9 Word Count 数据计算
怎么计算系统设计?
压缩: zip
数据映射: 数据库。
url --> 转为5位。
http//: www.baidu.com
建立数据映射。 id 映射到数据库。
base64: 24+24+9+2
def base(string:str)->str:
oldstr = ‘‘
newstr = []
base = ‘‘
base_list = [‘A‘, ‘B‘, ‘C‘, ‘D‘, ‘E‘, ‘F‘, ‘G‘, ‘H‘, ‘I‘, ‘J‘, ‘K‘, ‘L‘, ‘M‘, ‘N‘, ‘O‘, ‘P‘,
‘Q‘, ‘R‘, ‘S‘, ‘T‘, ‘U‘, ‘V‘, ‘W‘, ‘X‘, ‘Y‘, ‘Z‘, ‘a‘, ‘b‘, ‘c‘, ‘d‘, ‘e‘, ‘f‘,
‘g‘, ‘h‘, ‘i‘, ‘j‘, ‘k‘, ‘l‘, ‘m‘, ‘n‘, ‘o‘, ‘p‘, ‘q‘, ‘r‘, ‘s‘, ‘t‘, ‘u‘, ‘v‘,
‘w‘, ‘x‘, ‘y‘, ‘z‘, ‘0‘, ‘1‘, ‘2‘, ‘3‘, ‘4‘, ‘5‘, ‘6‘, ‘7‘, ‘8‘, ‘9‘, ‘+‘, ‘/‘]
# 把字符串转化为二进制, 用bin转化后是以0b开头, 所以把b替换了,首位补0 补齐八位
for i in string:
oldstr += ‘{:08}‘.format(int(str(bin(ord(i))).replace(‘0b‘)))
# 将二进制按照6位一组分好,最后一组不足六位补零
for j in range(0, len(oldstr), 6):
newstr.append(‘{:<06}‘.format(oldstr[j:j+6]))
# 在base_list 中找到对应的字符拼接
for l in range(len(newstr)):
base += base64_list[int(newstr[1],2)]
if len(string) %3 ==1:
base += ‘==‘
elif len(string) %3 ==2:
base += ‘=‘
return base
频率统计: MySQL慢。 key_value()
URL ---> md5(128bit)
扩展性稳定性: 前端和数据库。
访问1号机器。做备份。一部分流量。分布式。
ECMAScript:
var 定义变量:
变量提升, 暂时性死区。
for (let i = 0; i< 10 ; i++)
{
let i = ‘abc‘;
}
()父作用域 {}子作用域
function func(arg){
let arg; // 重复申明
}
func()
未申明,未定义。
基本类型, 引用类型。
var tmp = newDate()
let tmp = new Date();
function f(){
console.log(tmp)
if (false)
{
let tmp = ‘hello world‘
}
}
标签:count hdfs += 分布 稳定性 提升 false UNC log
原文地址:https://www.cnblogs.com/countryboy666/p/12407359.html