中小型互联网公司如何搭建自己的技术架构

2023-09-20 10:36:05

适用范围

本文主要针对中小型互联网公司,特别适用于手机APP或者pc的后台架构,基本可以支撑5万日活

本文会对可能用到的相关技术进行技术选型的说明,以及技术的架构介绍,技术架构的介绍课程后面有地址,可以点进去查看。

技术指标

说一下一些技术指标的计算过程可以作为其他同学的参考

QPS, 如果是5万日活,使用集中在每天的4小时,每个用户大概产生100的请求,那么平均下来,我们系统大概应该支撑的请求为:50000 100 / (4 60 * 60) = 350 qps/s

业务数据 业务量,我们自己是新闻业务,可能会有其他的业务,比如游戏,商城等等,基本每天新增的业务数据都会在同一个量级, 每日10000, 另外跟用户相关的信息也是比较大的一块,比如用户的订阅等行为,一共5万的用户,保存相关信息可能大概需要100条的数据。

缓存大小 主要业务数据和用户相关的热点数据限时保存在缓存中, 大概需要5个G左右。

日志大小 用户日志和请求日志。 大概每天3个G左右

技术架构

[img59cde995b396e.png]

[img59cde995b396e.png]

整体架构因为是小公司,我们基于阿里云来搭建,对图中的内容和技术选型进行一下说明:

负载均衡

可选方案: SLB, Nginx.

SLB要收钱,但是比较便宜,有保证,不会挂。 但是可配置的很少,不能根据域名做ip映射

Nginx, 没啥缺点,需要一定的知识。

建议: SLB + Nginx, SLB绑定域名作为统一的入口,然后每个服务器上再搭建Nginx.

CDN

用于缓存静态文件等等。 七牛和阿里的都还可以。

七牛要做的久一点, 各种图片处理的接口要完善一些

阿里的CDN要稍微好一点点, 但是没有不安全的访问方式,访问稍微没有那么灵活。 图片处理功能弱一点。

分布式调用框架

目前可选的有ZK + dubbo. ZK + Motan, ZK + dubbox, edas。

dubbo, 阿里的服务治理框架,已经不维护了,切换反应有点慢

dubboX, 当当基于dubbo搞的,还在维护可以一用,推荐。

Motan, 微博的服务治理矿建, 刚开源,需要学习一下, 推荐。

Edas, 阿里云服务,要收钱,侵入型很强,不推荐

MQ

可选的有: ActiveMQ, rocketMQ, robbitMQ,Kafka

各有好处, 但是考虑到运维的难度,推荐rocketMQ。

Redis

用来做缓存, 自建成本有点高,需要Codis, 分片,集群,主从等等,很麻烦。 建议直接用阿里的

数据库

主要基于读写分离和主从复制考虑,目前可以自建和选用阿里的DRDS。

DRDS 要花钱,成本较高,没有必要

自建, 不用中间件,直接1写2只读, 然后配置读写分离的数据源,内网SLB进行读集群。解决之。

搜索

建议ELK, 可以自动同步数据库,除了搜索引擎的功能外,还可以做日志搜索,监控系统。

一些典型的业务场景说明

把业务底层做成SOA模块,通过分布式调用框架对外提供服务。

后期进行SOA到微服务的改造都会涉及。

单独做一个小的系统来运行定时任务

热点数据放缓存,然后通过MQ来更新缓存

日志等数据有必要可以考虑上个Mongo

更多推荐

MongoDB 是什么和使用场景概述(技术选型)

一、从NOSQL(NotOnlySQL)说起常见的数据库可以分为下面的两种类型:RDBMS(关系型数据库):常见的关系型数据库有Oracle、DB2、MicrosoftSQLServer、MicrosoftAccess、MySQL;NoSQL(非关系型数据库):常见的非关系型数据库有MongoDB、Redis、Vold

基于微信小程序的音乐播放器设计与实现(源码+lw+部署文档+讲解等)

前言💗博主介绍:✌全网粉丝10W+,CSDN特邀作者、博客专家、CSDN新星计划导师、全栈领域优质创作者,博客之星、掘金/华为云/阿里云/InfoQ等平台优质作者、专注于Java、小程序技术领域和毕业项目实战✌💗👇🏻精彩专栏推荐订阅👇🏻2023-2024年最值得选的微信小程序毕业设计选题大全:100个热门选

python入门篇09- 文件操作,函数, 包及模块的综合案例

全文目录,一步到位1.前言简介1.1专栏传送门2.前文知识梳理3.前文总结案例3.1案例介绍3.1.0案例包结构3.1.1案例拆解3.1.2案例操作效果如图所示:文字形式(直观展示)3.2代码实现3.2.1工具包一:file_util.py3.2.2工具包二:string_util.py3.2.3导入控制:__init

spring MVC

1.什么是SpringMVCSpringMVC是一个基于Java的实现了MVC设计模式的请求驱动类型的轻量级Web框架,通过把Model,View,Controller分离,将web层进行职责解耦,把复杂的web应用分成逻辑清晰的几部分,简化开发,减少出错,方便组内开发人员之间的配合。2.工作原理1.用户发来一个请求,

Java开发 - 深入理解Redis Cluster的工作原理

前言前面我们讲过RedisCluster的搭建方式,也是本着应用优先的原则,所以对其基础概念和原理几乎没有涉及,但当学会了Redis集群的搭建方式之后,对于其原来我们还是要知道一些的,所以这篇博客,我们将一起来学习RedisCluster的一些相关知识。导读在开始RedisCluster的讲解之前,还不熟悉RedisC

网卡和智能网卡

文章目录网卡是什么?以太网、无线局域网(Wi-Fi)和蓝牙的区别智能网卡是什么AWS智能网卡Mellanox智能网卡DPU网卡是什么?网卡(NetworkInterfaceCard,NIC)是计算机中用于连接计算机与网络之间的硬件设备。它负责将计算机内部的数据转换为网络可以传输的格式,并将接收到的网络数据转换为计算机可

【MySQL系列】使用C语言连接MySQL

「前言」文章内容大致是使用C语言连接MySQL。「归属专栏」MySQL「主页链接」个人主页「笔者」枫叶先生(fy)目录一、Connector/C使用二、MySQL的C接口介绍2.1连接MySQL2.2发送SQL请求2.3获取结果集一、Connector/C使用按照前面MySQL的安装流程,安装完MySQL,MySQL相

【操作系统笔记】进程和线程

进程的组成进程要读取ELF文件,那么:①要知道文件系统的信息,fs_struct②要知道打开的文件的信息,files_struct一个进程除了需要读取ELF文件外,还可以读取其他的文件中的数据。进程中肯定有一个mm_struct实例,每个进程都有自己的虚拟地址空间,用于进程访问内存的。进程中肯定得知道下一条需要执行指令

【Verilog教程】2.4Verilog表达式

表达式表达式由操作符和操作数构成,其目的是根据操作符的意义得到一个计算结果。表达式可以在出现数值的任何地方使用。例如:a^b;//a与b进行异或操作address[9:0]+10'b1;//地址累加flag1&&flag2;//逻辑与操作操作数操作数可以是任意的数据类型,只是某些特定的语法结构要求使用特定的操作数。操作

Leetcode算法入门与数组丨4. 数组排序

文章目录1冒泡排序2选择排序3插入排序4归并排序5希尔排序6快速排序7堆排序8计数排序9桶排序10基数排序task05task061冒泡排序冒泡排序(BubbleSort)是一种简单的排序算法。它重复地遍历待排序的元素列表,一次比较相邻的两个元素,并按照顺序交换它们,直到整个列表排序完成。基本步骤下面是冒泡排序的基本步

【深度学习】 Python 和 NumPy 系列教程(十一):NumPy详解:3、数组数学(元素、数组、矩阵级别的各种运算)

目录一、前言二、实验环境三、NumPy0、多维数组对象(ndarray)多维数组的属性1、创建数组2、数组操作3、数组数学1.元素级别a.直接运算b.加法:np.add()函数c.减法:np.subtract()函数d.乘法:np.multiply()函数e.除法:np.divide()函数f.幂运算:np.power

热文推荐