Kafka-分区日志文件的清理原理
Kafka-分区日志文件的清理原理 清理 一般情况下，kafka会根据设置的时间保留数据，把熬过时效的旧数据删除掉。 早于保留时间的旧事件会被删除，为每个键保留最新的值，从而达到清理的效果。只有当应用程序生成的事件里包含了键值对时，为这些主题设置compact策略才有意义。如果主题包含null键，清理就有失败。 清理的工作原理 每个日志片段可以分为以下两个部分 干净的部分：这些消息之前被清理过，每个键只有一个对应的值，这个值是上一次清理时保留下来的。 污浊的部分：这些消息时上一次清理之后写入的
Kafka-分区日志文件的索引
Kafka-分区日志文件的索引 消费者可以从kafka的任意可用偏移量位置开始读取消息。假设消费者要读取从偏移量100开始的1MB消息，那么broker必须立即定位到偏移量100（可能是在分区的任意一个片段里），然后开始从这个位置读取消息。为了帮助broker更快地定位到指定的偏移量，kafka为每个分区维护了一个索引。索引把偏移量映射到片段文件和偏移量在文件里的位置。 索引也被分成片段,所以在删除消息时，也可以删除相应的索引。kafka不维护索引的校验和。如果索引出现损坏，kafka会通过重
狗蛋带仨妞【Beta】Scrum meeting 4
一.前言 经过前两天的链接，内容等测试与bug修复我们小组有了一定的收获，今天我们继续进行优化。 二.任务分配 今天完成的任务 贡献的小时数 王国伟 继续优化以及修复bug 5 杨雪雪 分配任务，进一步优化前台 5.1 张琳 浏览器测试,PPT制作 4.8 王英雪 平台测试，博客撰写，github上传 4.8 三. 燃尽图 四.站立会议照片 五.1.Beta冲刺阶段共计运行了多少个测试用例，合计发现了多少Bug？ 共运行了16个测试用例，合计发现bug20个. 2.用户场景测试 用户姓名:王丽
jmeter利用bean shell加密解密方法
加密解密方法（我用的是RSA加密解密）只需加密解密的看前5步就可以了 1.先找开发拿到代码或者直接叫开发打jar包，直接拿包的话可以跳过前2步 2.导出jar包 3.将jar包放入jmeter的lib\ext文件夹里面 4.设置线程组（要设置全局变量的话线程组选setUp Thread Group），设置http请求，添加前置处理器BeanShell PreProcessor和后置处理器BeanShell PostProcessor，然后添加一个Debug Sampler，如图： 设置http
（2020.6.29）集成学习初探
果然机器学习学起来要涵盖的主题真不少，初探了这么多了，还是可以不断发现新的主题。 参考资料：https://www.youtube.com/watch?v=tH9FH1DH5n0 Bagging (weighted) average or voting 使用情景：模型复杂，容易overfit，例如决策树。 Boosting 迭代，每次re-weighting训练样本。 Adaboost：每次重新weight样本，使得让上一版分类器的加权准确率为0.5，最后把所有的分类器加权求和（权重恰好是前面
不同智能优化算法如何进行性能分析比较？
不同智能优化算法如何进行性能分析比较？ 智能优化算法一类随机优化算法，算法每次执行结果略有差异， 该类算法通常通过模仿现实生活中的某种行为机制的方式而被提出，不同种类的算法优化机理不同，即使同一算法及其改进算法在搜索机理上也往往存在很大差别。对于搜索性能稳定的算法这种差异相对较小，而对于搜索性能波动较大的算法每次执行结果差异较为明显。如何衡量算法间的优劣呢？为此，学术界提出了多种不同的算法性能评价基准，其中较为典型的就是国际进化计算会议提出的CEC系列基准测试函数，通过重复测试算法寻找函数全局
Java中ArrayList边遍历边修改
用for-each 边遍历ArrayList 边修改时： public static void main(String[] args) {
ArrayList<String> list = new ArrayList<>();
list.add("aa");
list.add("bb");
list.add("cc");
list.add("dd");
System.out.println(list
GF4 Beta 冲刺Scrum meeting4
项目 内容 课程班级博客链接 https://edu.cnblogs.com/campus/xbsf/nwnu2020SE/ 这个作业要求链接 https://www.cnblogs.com/nwnu-daizh/p/13190137.html 团队名称 GF4 团队成员分工描述 徐思：项目总结 杨其菊：文档整理 杨蓉庆：PPT 张燕：编辑博客 团队的课程学习目标 1. 项目总结 2. 掌握软件项目确认测试内容，编制软件项目总结PPT。 3.文档整理 这个作业在哪些方面帮助团队实现学习目标 掌
技术整理（1）--Mybatis
Mybatis 老懒狗直接附上视频和图文解说 这个链接是俺看的视频教程： https://www.bilibili.com/video/BV1Fg4y1q7xN?p=3 图文解说： https://blog.csdn.net/weixin_43184769/article/details/91126687 mybatis一二级缓存： https://www.cnblogs.com/happyflyingpig/p/7739749.html mybatis官网论坛： http://www.myb
【LeetCode】链表
24. Swap Nodes in Pairs https://leetcode.com/problems/linked-list-cycle/ Given a linked list, swap every two adjacent nodes and return its head. You may not modify the values in the list's nodes, only nodes itself may be changed. Example: Given 1->2
《C#开发实战1200例(第II卷)》.( 王小科,王军).[PDF].@ckook
《C#开发实战1200例(第II卷)》.( 王小科,王军).[PDF].@ckook 链接：https://pan.baidu.com/s/1fJV7qKieQ9DdyhCsf4BnfA 提取码：dhyp
FRP+WoL实现远程开机+远程桌面
FRP+WoL实现远程开机+远程桌面 故事背景 这是一个很复杂而且很久远的故事，如果要讲的话，这个故事可以追溯到1981年（「都是废话，没有干货，如果不感兴趣请从第二章开始」），简单来说： 1981年RFC791定义了IPv4地址，自此拉开了TCP/IP一统天下的序幕 1991年，我出生了 2011，IANA宣布IPv4地址正式佣金 不知道的某个时间节点，三大运营商开始使用多级NAT技术解决家庭宽带IPv4地址紧张问题，同时带来了内网无法无法访问的问题 2020年2月，新冠疫情来袭，在家办公，
Maven(二) 构建生命周期
构建生命周期 Maven的生命周期（lifecycle）可以理解为由Maven的各种plugin按照一定的顺序执行来完成java项目清理、编译、打包、测试、布署等整个项目的流程的一个过程。 Maven内置了各种插件，如果再pom中没有显示配置就会调用默认的内置插件，如果pom中配置了就会调用配置的插件。 1. Maven生命周期插件配置-build build标签描述了如何编译及打包项目，具体的编译和打包工作是通过其中的plugin配置来实现的。 plugin不是必须的，即使不添加默认也会引入
Graphviz 安装并使用 (Python)
目录 概述 Graphviz 工具安装 Graphviz 库安装 IDLE anaconda 至关重要的一步 基础用法 参考资料 概述 Graphviz 是一款由 AT&T Research 和 Lucent Bell 实验室开源的可视化图形工具，可以很方便的用来绘制结构化的图形网络，支持多种格式输出。Graphviz 输入是一个用 dot 语言编写的绘图脚本，通过对输入脚本的解析，分析出其中的点、边及子图，然后根据属性进行绘制。Graphviz layout 以简单的文本语言描述图形，并以实
周排行