很遗憾，由于这篇文章有大量的公式，如果直接发表内容公式会显示不了，因此只能发成图片。 如果想获得更好的阅读体验，请点击：从科学记数法到浮点数标准IEEE 754 参考 https://zh.wikipedia.org/wiki/IEEE_754 https://zh.wikipedia.org/zh-hans/%E6%B5%AE%E7%82%B9%E6%95%B0 https://zh.wikipedia.org/wiki/%E7%A7%91%E5%AD%A6%E8%AE%B0%E6%95%B0%E6%B3%95 https://zh.wikipedia.org/wiki/NaN 《Java虚拟机规范（Java SE 7）》 《深入理解计算机系统》第2版 《码出高效》Java开发手册 htt...阅读全文
0 摘要 在Flink实时流数据处理中，经常用到keyBy算子, 虽然能够大致不差的使用它，实现自己的需求。然而这个算子到底做了什么事情，心里一直没有底。这篇文章算是对keyBy算子稍微深入一点的探究。 1 Spark中的按key分组操作 对于经常使用spark的同学而言，分组操作数据，那是再熟悉不过。比如groupBy, reduceBy, aggregateBy等一系列算子。基本思路都是指定key之后, 将相同key的元素集合到一个集合里面，形成一个新的集合元素，然后对每个key对应的元素集合进行操作 1.1 准备数据 1.2 spark分组操作处理数据 下面的操作以groupBy算子为例，分组后，输出结果数据，观察结果数据结构 def main(args: Array[String])...阅读全文
Flink的Watermark细节介绍一文中提到了Watermark其实主要就是解决Event Time + Window中的数据完整性问题的，本文作为那篇文章的补充，再介绍一下Window这个概念。关于这部分，我觉得官方文档已经介绍的非常详细了，如果你是Flink使用者，强烈建议好好读几遍。我这里就主要概括性的介绍一下，作为前面文章的补充，同时解决前文遗留的一个问题。What & Why什么是Window？为什么需要Window？流处理里面一般都是事件驱动的（Spark是微批），即每个事件来就会触发算子（Operator）进行计算，典型的比如map、flatmap、filter等，这些都是无状态的计算。有些时候需要在流处理里面进行有状态的计算，比如电商场景分析1分钟的访问人数、购买人数各是...阅读全文
1234567891011121314151617181920212223IRT_ENTRY_NO_ASYNC(void, InterpreterRuntime::monitorenter(JavaThread* thread, BasicObjectLock* elem))#ifdef ASSERT thread->last_frame().interpreter_frame_verify_monitor(elem);#endif if (PrintBiasedLockingStatistics) { Atomic::inc(BiasedLocking::slow_path_entry_count_addr()); } Handle h_obj(thread, elem->obj()); ...阅读全文
这个问题困扰了我不少时间，最近有个比较清晰的认识，和大家分享。 这个问题首先要从数位表示法说起。今天我们看到的123这样的十进制数，是自然而然的理解其意义，但是有没有深究其内在的数学原理呢？ 所谓十进制是0~9十个基本符号为基础的一种数字表示法，数位表示法是将一串基本符号从左到右连续排列的一种方法。为什么12时表示一十二，而不是二十一，或者是一加二的意思呢？因为数字所处的位置是有特别意义的，最右边第一个数字符号，代表基本的数0~9，而第二位的意义并不是0~9，而是0*10~9*10。推而广之，百位是x*100，（x是符号），用简练的数学公式就是x*10^k , 个位k是0，十位是1，百位k是2，从右到左一直数下去。123的意思就是1*10^2+2*10^1+3*10^0。 位置，进制，符号这...阅读全文
背景 又是一年一度的秋季校招开始了，以往的校招各个公司都会在公司现场或者学校现场安排学生进行现场面试？但是今年由于疫情的原因，不允许让同学在现场进行一个面试，所以今年的面试形式就从线下转到了线上，面试形式的转变，但是我们考核学生的方式依旧没有转变。校招的同学和社招的同学有很大的不同，他们没有丰富的工作经验，没有太多的项目经历，那么我们如何去衡量一个校招的同学呢？那就是基础和潜力，怎么去理解基础呢？俗话说不积跬步,无以至千里,不积小流,无以成江海，如果没有一个好的基础那么怎么才能成为一个优秀的工程师呢。如何去考察一个学生基础的好坏呢？我觉得有三个方面比较重要，计算机网络，操作系统以及算法和数据结构，通常来说计网考察得特别多，常见的一些问题：网络模型分层TCP和UDP的区别TCP三次握手和四次挥...阅读全文
Hello，小伙伴们，大家好，我是才辰。今天和大家一起学习的是排序算法中的插入排序和希尔排序。为什么把这两个排序放在一起呢？这是因为这两种排序有一定的关联，希尔排序实际上是对插入排序的一种变形。还是老样子，我先总体上介绍一下算法的过程，接着以一个例子分步讲解，最后给出了详细的代码以及相关分析。插入排序插入排序，就和我们平时玩牌是一样的因为你想，我们在打牌的时候，是不是先把手里的牌由小到大排好，然后每摸到一张牌，就依照大小把它放在排在正确的位置。同样，插入排序也是如此。步骤：首先选取数组第二个元素,若小于数组第一个元素，则插入到第一个位置，否则保持不动；接着选取第3个元素，把它和左边第一个元素比较，如果其小于左边第一个元素，则继续与左边第二个元素比较，知道遇到不比它大的元素，然后插入到这个元素...阅读全文
背景 又是一年一度的秋季校招开始了，以往的校招各个公司都会在公司现场或者学校现场安排学生进行现场面试？但是今年由于疫情的原因，不允许让同学在现场进行一个面试，所以今年的面试形式就从线下转到了线上，面试形式的转变，但是我们考核学生的方式依旧没有转变。校招的同学和社招的同学有很大的不同，他们没有丰富的工作经验，没有太多的项目经历，那么我们如何去衡量一个校招的同学呢？那就是基础和潜力，怎么去理解基础呢？俗话说不积跬步,无以至千里,不积小流,无以成江海，如果没有一个好的基础那么怎么才能成为一个优秀的工程师呢。如何去考察一个学生基础的好坏呢？我觉得有三个方面比较重要，计算机网络，操作系统以及算法和数据结构，通常来说计网考察得特别多，常见的一些问题：网络模型分层TCP和UDP的区别TCP三次握手和四次挥...阅读全文
ES系列之原来查看文档数量有这么多姿势犀牛饲养员发布于 2020-04-03 1、引言 有人可能觉得，查看文档数量不是很简单吗？直接 GET /_cat/count/index_name?v 不就可以了吗。 事实上远不止这么简单，比如嵌套文档的情况等。相信你看了我这篇文章之后你会感叹原来统计文档有这么多讲究啊。 2、正文 cat/count 首先是最常用的的方式，也是一种快速查询文档的优先推荐方式，cat count api我们使用kibana自带的电商索引来实验。 GET _cat/count/kibana_sample_data_ecommerce?v 返回， epoch timestamp count 1585910697 10:44:57 4675 cat count api的方式能...阅读全文
目录一、概述二、Grafana Alerting 模块介绍三、配置图表四、告警告警规则五、配置告警通道（Contact points）1）Email1、配置smtp（grafana.ini）2、配置消息模板3、配置告警通道2）WebHook1、编写webhook api服务2、在grafana页面上配置3）Alertmanager 一、概述 在版本4.0+ grafana中增加了Alerting 告警模块，丰富了grafana功能，以前告警需要借助AlertManager，但是有grafana告警模块之后就可以不使用AlertManager告警了，但是grafana也支持对接AlertManager，所以还是非常方面，又可以省区一个组件的维护和资源开销。 下图概述了 Grafana 告警的工...阅读全文
Home Github About 28 September 2016 B+ Tree、LSM、Fractal tree index 读写放大分析 最近刚看完一个还不错的基于B+ Tree实现的kv引擎，借着这股劲儿刚好补充了一下相关理论知识，对比着看其他资料（资料1、资料2、资料3、资料4）看了下《A Comparison of Fractal Trees to Log-Structured Merge (LSM) Trees》论文，我比较愿意扣细节，所以看得那叫一个费劲，不过里面的分析还挺有意思，所以这里写篇博客，套着论文的结论，按着自己的理解总结一下 相关定义 1. RAM、DAM RAM（Random Access Machine model）假设计算机有无穷大小的内存，并且访问内存...阅读全文
本文分享自天翼云开发者社区《内容分发网络 CDN 概述》,作者:JerryCDN（Content Delivery Network）是一种分布式网络架构，旨在提供高效、可靠地将内容传送给全球用户的服务。CDN 的主要目标是通过将数据缓存到位于不同地理位置的多个服务器上，使用户能够从离他们更近的服务器获取内容，从而减少访问延迟、提高加载速度和改善网站的性能。在这篇文章中，我将详细介绍 CDN 的工作原理、使用 CDN 的好处，并举例说明它如何优化内容传递的过程。一、CDN 的工作原理CDN 的工作原理基于两个主要的技术：缓存和就近访问。缓存：CDN 将网站的静态内容（例如图片、CSS、JavaScript 文件等）缓存在多个地理分布的服务器上。当用户请求访问网站时，CDN 会检查是否有相应的缓...阅读全文
之前文章提到过Kafka的broker端有ISR机制，它可以看成多个副本的集合，里面有leader副本和多个follower副本，数量是我们可以配置的，只有ISR中的副本才有可能成为leader副本。 我们可以通过一些参数的配置，例如ack的配置、生产者重试、isr最小数量，消费者改为手动提交等方式来尽可能的保障Kafka的消息可靠性。 Kafka在保证数据的可靠性上使用的是‘数据冗余’的方式，即将一个分区下的数据保存到多个副本中，起到备份数据的作用。这样如果leader挂了，会重新选举follower作为leader继续工作，那么Kafka中leader副本是如何将数据同步到follower副本中的呢？今天想通过这篇文章总结记录下。 1.副本中的高水位（High Watermark） 什么...阅读全文
获课：youkeit.xyz/2543/获取ZY↑↑方打开链接↑↑定义与职责： 物联网工程师是指通过全面系统的学习，能够从事物联网工程项目的运行维护、管理监控、优化及故障排除的专业人员。他们通常负责物联网设备制造、项目实施和管理，担任系统集成工程师、设备安装工程师、现场应用工程师、设备维护/调试工程师等技术岗位1。职业前景： 随着物联网技术在智能家居、智能交通、工业4.0、智能医疗等领域的广泛应用，企业对物联网技术工程师的需求不断攀升。无论是传统制造业的智能化转型，还是新兴互联网企业的发展，都离不开物联网工程师的支持2。技能要求： 物联网工程师需要掌握物联网基础知识、相关技术解决方案和行业应用。例如，华为认证物联网工程师（HCIA-IoT）需要具备基于华为物联网解决方案架构实现端到端物联网业...阅读全文
获课：weiranit.fun/13872/获取ZY↑↑方打开链接↑↑马士兵是马士兵教育的创始人。1994-1999 年就读于清华大学，他笃信学习改变人生，致力于成为广大 IT 人的职业生涯引路人，目前正致力于打造像面授一样高质量的网课平台。马士兵教育与嵌入式物联网工程相关内容课程体系中的嵌入式物联网相关课程5：马士兵教育有完善的课程体系，虽未明确强调嵌入式物联网单独课程，但在其涵盖的多个热门领域中，如大数据、人工智能等课程中会有与物联网相关技术结合的部分，例如在涉及传感器数据处理、网络通信等内容时，会与嵌入式物联网领域有一定的关联性。相关师资力量2：马士兵教育有一些讲师具备嵌入式物联网相关经验，如肖斌老师，连续三年担任北京某兵器研究所嵌入式软件开发顾问，精通 Linux C/C++ 编程...阅读全文
数据库工程师入门培训实战教程（从Oracle11g 到 Oracle19c）获课：97java.xyz/4223/获取ZY↑↑方打开链接↑↑要撰写一篇关于“Oracle数据库工程师入门培训实战教程”的文章，可以遵循以下结构和要点来编写：标题：Oracle数据库工程师入门：从新手到实战专家的完整指南引言简述Oracle数据库的重要性及其在现代企业中的应用。介绍成为Oracle数据库工程师的基本路径。Oracle数据库基础数据库概念简介：什么是数据库、关系型数据库管理系统（RDBMS）等。Oracle数据库架构概述：包括实例、数据库、表空间、数据文件等基本概念。安装与配置如何安装Oracle数据库软件。配置环境变量以及基本的网络设置。SQL语言基础SQL语句的基础知识：SELECT, INSER...阅读全文
https://97it.top/3558/ 摘要 递归是一种强大的编程技术，通过函数调用自身来解决问题。斐波那契数列是递归的经典应用之一，其定义简单但具有深远的数学和实际应用价值。本文从递归的理论基础出发，详细探讨了类似斐波那契数列的递归问题的定义、性质、优化方法及其在不同领域的应用。通过深入分析递归的数学原理和计算特性，本文旨在为开发者和研究人员提供理论支持和实践指导，帮助其更好地理解和应用递归技术。 1. 引言 递归是计算机科学中一种重要的编程技术，通过函数调用自身来解决问题。斐波那契数列是递归的经典应用之一，其定义简单但具有深远的数学和实际应用价值。类似斐波那契数列的递归问题在数学、计算机科学、生物学等多个领域中都有广泛的应用。本文将从理论层面探讨类似斐波那契数列的递归问题的定义、性...阅读全文
获课：youkeit.xyz/13677/获取ZY↑↑方打开链接↑↑Dubbo 的集群容错机制是其核心特性之一，旨在提高分布式服务调用的可靠性和稳定性。通过集群容错机制，Dubbo 能够有效地处理服务调用过程中可能出现的各种异常情况，如服务不可用、网络故障等，从而保证系统的整体可用性和健壮性。以下是对 Dubbo 集群容错机制的详细解释：1. 集群容错的基本概念集群容错是指在分布式系统中，当某个服务提供者节点出现故障时，调用方（消费者）能够自动切换到其他可用的服务提供者节点，从而保证服务的连续性和可用性。Dubbo 提供了多种集群容错策略，以适应不同的应用场景和需求。2. 集群容错的主要组件Cluster 接口：定义了集群容错的基本行为，是所有集群容错策略的顶层接口。源码路径：dubbo-...阅读全文
「完结15章」系统玩转OpenGL+AI，实现各种酷炫视频特效获课：97java.xyz/2540/获取ZY↑↑方打开链接↑↑看起来您想要一篇关于如何使用系统玩转音频模式的文章，尤其是针对完结第15章的内容。虽然我不清楚具体上下文或特定章节的具体内容，但我可以提供一个通用框架来帮助你撰写这篇文章。标题：玩转音频模式：解锁系统的全声音潜力引言介绍音频模式在现代多媒体系统中的重要性，以及它如何增强用户体验。提及随着技术进步，用户可以通过不同的音频设置和模式享受更加个性化和沉浸式的听觉体验。第一部分：了解音频模式的基础定义音频模式：解释什么是音频模式，它是如何工作的。常见的音频模式类型：如立体声、环绕声、杜比全景声等，并简要说明每种模式的特点和适用场景。第二部分：探索系统中的音频选项调整设置：详细...阅读全文
对于想要深入了解 Dubbo 源码的小白来说，理解其内部工作原理和架构设计是关键。下面是一个简化的入门指南，帮助你开始对 Dubbo 源码的探索之旅。获课：keyouit.xyz/13646/获取ZY↑↑方打开链接↑↑Dubbo 采用分层架构，每一层都有特定的功能。了解这些层次有助于更好地理解源码结构：选择一个具体的流程进行深入分析，例如服务暴露和服务引用过程：重点学习几个核心组件的设计与实现：通过上述步骤，你可以逐步建立起对 Dubbo 源码的理解。记住，源码学习是一个长期的过程，需要耐心和持续的努力。希望这些建议能为你提供一个好的起点...阅读全文
