做漂亮的网站,谷德设计网gooood,如何做网站首页收录,南庄建网站文章目录 12、brpc的优化2.1 brpc网络有啥降级#xff1f; 3、移动语义4、python协程 二、1. mq怎么保障数据的顺序#xff1f;3.brpc中上下游通信#xff0c;怎么测评新增字段大小#xff0c;对耗时的影响#xff1f; 1
1、brpc和grpc区别#xff0c;为啥选择brpc? gr… 文章目录 12、brpc的优化2.1 brpc网络有啥降级 3、移动语义4、python协程 二、1. mq怎么保障数据的顺序3.brpc中上下游通信怎么测评新增字段大小对耗时的影响 1
1、brpc和grpc区别为啥选择brpc? grpc是google公司开发的rpc框架使用protocol buffer作为默认序列化框架。brpc是百度使用多种序列化框架pb、thrift协议和自定义协议。
grpc支持各种语言着重跨语言brpc主要支持c,
grpc强调标准化brpc强调高性能低延迟强调定制化。
2、brpc的优化
1、序列化因为要遍历各种数据结构所以耗时更高
2、brpc在序列化和反序列化时做的优化 2.1 使用零拷贝技术内存映射等减少拷贝减少cpu开销。 2.2 使用异步序列化反序列化方式在高并发场景下提高吞吐和响应速度。 2.3 使用压缩技术减少网络传输数据量降低延迟 2.4 使用内置序列化协议pb,thrift, 2.5 定制序列化、反序列化接口根据业务定制序列化反序列化逻辑。 2.6 支持一个动态反序列化因为有些数据在编译时不能确定具体类型所以就得放在运行时处理运行时的反序列化就是动态反序列化。
3、网络优化 3.1 IO多路复用技术epoll,提高网络io效率。 3.2 零拷贝 3.3 TCP连接管理brpc实现对tcp自动管理建立、复用、断开、重连提高连接的复用率和系统稳定性。 3.4 流量控制令牌桶算法对请求的并发量进行控制防止资源耗尽和网络拥堵。 3.5 多种负载均衡策略轮循、最小连接数、一致性哈希下游cpu感知权重 3.6 错误恢复机制brpc实现了网络超时重传断线重连保障可靠性。
2.1 brpc网络有啥降级
在部分机器出现故障或性能下降时通过降级来保障整体系统的稳定。
超时配置合理设置超时时间避免因个别请求阻塞而导致整体性能。timeout_ms重试机制max_retry负载均衡和故障转移健康检查熔断 当某个服务出现大量错误或者响应过慢时切断对该服务的调用业务代码降级处理当某个服务不可用时使用默认值或者混存数据或者使用备用服务。
3、移动语义
为了高效管理对象的资源c增加一种语言特性把一个对象B变成右值引用类型结合移动构造函数和移动赋值运算符把对象B的资源内存、文件句柄等转移到另外一个对象A。避免数据的拷贝实现高效管理资源。 std::move()是一个函数模板可以把一个对象变成右值引用在代码中明确指出来一个对象马上要被销毁且他的资源要被窃取。
4、python协程
协程轻量级的并发编程方式在单线程内实现并发执行并且可以方便地进行任务切换和异步操作。Python 的协程实现主要依赖于生成器Generator和 async/await 关键字。 当一个函数被声明为 async def它就成为了一个协程函数可以使用 await 关键字来挂起当前协程的执行等待异步操作的完成。 Python 的协程基于事件循环Event Loop的机制事件循环负责调度并发任务的执行而协程则通过 async/await 实现了在任务间的挂起和恢复。当一个协程被挂起时事件循环会转而执行其他可以执行的任务从而实现并发执行的效果。
在底层Python 的协程利用生成器的特性来实现挂起和恢复的操作。当一个协程函数内部使用 await 挂起时实际上在生成器对象上进行了暂停操作将控制权交给事件循环。当等待的异步操作完成后事件循环会重新激活该协程使其从上次暂停的地方继续执行。
总的来说Python 的协程通过生成器和 async/await 关键字实现了在单线程内的并发执行利用事件循环来调度任务的执行从而实现了高效的异步操作和并发编程。
二、
1. mq怎么保障数据的顺序
单一队列分区Partitioning 对于需要处理大量消息的系统可以采用分区Partition机制将消息分散到多个分区每个分区内部保持顺序而分区之间无顺序性要求。例如Apache Kafka 使用分区来提高吞吐量和扩展性。
保证顺序的关键点
消息根据某种逻辑如消息中的键或ID路由到特定的分区。 同一键值的消息总是进入同一个分区从而保障这些消息的顺序。 3. 顺序队列Ordered Queue 一些消息队列系统如 RabbitMQ通过顺序队列来保障消息的顺序。顺序队列是一种特殊类型的队列设计上保证了消息的顺序性。
示例 RabbitMQ 中可以使用“Queue per Consumer”模式每个消费者绑定到一个独立的队列从而保证消息的顺序性。 多级队列Multi-level Queue 多级队列可以用于复杂的场景通过将消息划分为不同级别并在每个级别上各自保证顺序性。这样可以在一定程度上兼顾顺序性和系统的扩展性。 消费者端排序 在某些场景下可以在消费者端实现顺序保障。即使消息可能乱序到达消费者消费者会根据消息中的某个顺序标识如时间戳、序列号进行重排然后再处理。
优点
灵活不依赖于消息队列系统本身的顺序保障能力。 缺点
增加了消费者的复杂度需要额外的逻辑来实现重排。
3.brpc中上下游通信怎么测评新增字段大小对耗时的影响
编写测试用例跑一下。
