服务端相关技术总结

服务端相关技术总结

   在实际产品中,主要涉及到的计算机技术包括网络、数据库和多媒体,其中后端主要是处理数据,所谓的逻辑大多是,什么情况下怎样增删改查。个人理解,各个技术之间的发展关系如下:

   db、nosql-->大数据->数据分析、机器学习->自然语言处理

   图形学、图像处理->模式识别->计算机视觉+人机交互->VR AR

   网络->分布式->高可用->云计算、普适计算

web后端的主要技术 交易处理+分析

   cdn

   nginx反向代理和负载均衡

   应用程序

   分布式session

   RPC和服务治理(连接不同的功能)

   消息队列(可靠存储和连接不同的系统)

   分布式缓存

   nosql

   数据库sharding、读写分离,添加代理层实现分布式数据库

   分布式存储

   搜索   

   大数据

   实时计算

技术的发展

   计算机是研究计算和信息的学科,之前的互联网本质上是数据的增删改查。有了数据之后希望能使用数据,所以需要处理数据。互联网的特点是,数据量大,数据多,希望不依赖昂贵的硬件,所以基于网络和RPC等实现了大数据的存储平台,比如hadoop的hdfs(可以认为是分布式的文件系统)。数据不仅要存下来还需要能够使用,所以出现了基于hdfs的处理数据的计算框架(map reduce)。实际应用中有快速出结果的需求,原来的基于文件的计算方式map reduce不满足要求,需要有基于内存的计算框架,所以出现了spark。还有一些应用需要尽可能的实时的处理数据(不需要长期存储,也就是所谓的流计算),这时需要实时的大数据处理框架,所以出现了storm

相关推荐