概述数据的价值在于把数据变成行动。这里一个非常重要的过程是数据分析。提到数据分析，大部分人首先想到的都是Hadoop、流计算、机器学习等数据加工的方式。从整个过程来看，数据分析其实包含了4个过程：采集，存储，计算，展示。大数据的数据采集工作是大数据技术中非常重要、基础的部分，具体场景使用合适的采集工具，可以大大提高效率和可靠性，并降低资源成本。Flume、Logstash和Filebeat都是可以作为日志采集的工具，本报告将针对这三者进行分析。一、FlumeFlume是一种分布式、高可靠和高可用的服务，用于高效地收集、聚合和移动大量日志数据。它有一个简单而灵活的基于流数据流的体系结构。它具有可调的可靠性机制、故障转移和恢复机制，具有强大的容错能力。它使用一个简单的可扩展数据模型，允许在线分析...阅读全文
本文分享自天翼云开发者社区《如何在弹性云主机上部署高效的数据库系统》，作者：二进制诗人在当今云计算的时代，弹性云主机（Elastic Cloud Compute, EC2）为我们提供了前所未有的灵活性和扩展性，使得在云端部署高效的数据库系统成为可能。本文将从选择合适的云服务配置、优化数据库配置、数据备份与恢复策略以及保障数据库安全四个方面分享如何在弹性云主机上部署高效的数据库系统。1.选择合适的云服务配置选择合适的实例类型弹性云主机提供了多种实例类型，针对不同的用途（如计算优化、内存优化等）。对于数据库系统，通常需要考虑内存优化或存储优化的实例类型，例如AWS的R5实例（内存优化）或I3实例（存储优化）。配置高性能存储数据库性能很大程度上取决于存储性能。推荐使用SSD（固态硬盘）作为数据库的...阅读全文
本文分享自天翼云开发者社区《云内GSLB技术及应用场景》，作者:c****n云业务容灾建设节奏一般是同城双活—异地双活—两地三中心（同城双活+异地多活），因为要解决的问题的复杂度和难度也是在逐步上升的，不可能一蹴而就。gslb可以实现两地三中心容灾，这时应用在多数据中心的情况下，业务需要分布式部署，无论哪个数据中心都可以独立承担业务，数据中心内通过服务器负载均衡（lb）进行数据中心内的业务负载，gslb是通过dns给lb做负载均衡，配合健康检查实现业务的故障切换，数据中心切换，一些算法如静态就近性可以就近访问加速等。一、基本概念1.业务域名用户访问应用服务的dns域名。2.服务成员域名最后返回的ip的地址，这个ip地址一般就是slb负载均衡设备的ip。3.地址池一组服务成员的集合，可以选择服...阅读全文
1月4日，国家数据局会同中央网信办、科技部、工业和信息化部等17个部门联合印发《“数据要素×”三年行动计划（2024—2026年）》，旨在充分发挥数据要素乘数效应，赋能经济社会发展。在推动发挥数据要素乘数效应，释放数据要素价值的攻坚路上，海南省一直走在前面。近日，海南省大数据管理局印发全国首部明确开展数据产品所有权确权登记的政策文件《海南省数据产品超市数据产品确权登记实施细则（暂行）》（以下简称《实施细则》），率先探索确定数据产品所有权，从源头上解决数据产品后续资产化、资本化应用，促进数据资源开发利用。基于全省统一的数据产品开发利用、流通交易平台——海南省数据产品超市，《实施细则》进一步明确数据产品所有权的确权登记流程，引导数据产品进行权属确认、流转备案，探索数据资产化、资本化管理。遵循依法...阅读全文
HBase模式设计是需要注意的问题：1．设计准则1）行键设计读访问模式：通过行键索引提升查询效率。HBase中唯一可用的索引只有行键索引，需要对行键精心设计来尽可能地优化数据查询。某项数据放在行键中会得到更好的查询性能，但是行键的长度变长，行键索引会占用更多的内存资源，由于行键在每个列族中保存，也会需要更多的磁盘空间。写访问模式：避免同一时间段里写入的数据形成热点。随机前缀：在原先彼此相邻的行键前面加上一个随机生成的前缀。哈希前缀：针对随机前缀生成的行键具有不确定性的缺陷，哈希前缀做了改进，通过对原行键调用选定的哈希函数生成前缀。反转键：将原先彼此相邻的行键按字节序反转生成新的行键。以上几种策略都会失去数据按特定行键顺序存放的特性，在进行范围查询时需要访问全部索引数据且需要有更多的磁盘IO操...阅读全文
学习地址1：https://pan.baidu.com/s/1OeNVv-9zowTbFVIpjSl8aQ 提取码：86h5 学习地址2：https://pan.baidu.com/s/187GgonRED21EseHMNE5ayg 提取码：bwsj 今天给大家讲解关于Qt的内容，我会在文章里面带着大家从0到1为你系统构建Qt知识体系，然后全流程实战开发项目“云对象存储浏览器”，让大家少走弯路，更快速的掌握Qt技术。 那么我们先来认识一下，什么是QT，他的具体作用是什么，应用在哪些方面？ Qt是一个1991年由Qt Company开发的跨平台C++图形用户界面应用程序开发框架。它既可以开发GUI程序，也可用于开发非GUI程序，比如控制台工具和服务器。 QT之所以能够在全世界范围内得到广大软件...阅读全文
11月2日，国际数据公司（IDC）最新发布的《中国公有云服务市场（2023上半年）跟踪》报告显示，在中国公有云IaaS市场，中国电信天翼云份额占比再度大幅攀升，稳居业内前三；同时，在公有云IaaS+PaaS市场，天翼云同样增势强劲，以领先优势，位列第三。从中国企业和MNC使用国内公有云IaaS资源的市场角度来看，中国电信天翼云排名第三。天翼云强劲增势离不开持续的科技创新与行业赋能。作为云服务国家队，天翼云在持续优化算力资源布局的基础上，全面突破云操作系统、分布式数据库等关键核心技术，以云操作系统为核心，从底层基础软硬件技术，到上层高阶云能力，实现了全栈技术的自主可控，打造了具备“科技创新、自主可控、安全可信、云网融合、生态开放、绿色低碳”六大特征的国家关键信息基础设施平台，为各行业数字化...阅读全文
本文分享自天翼云开发者社区《云主机AI服务的性能测试和优化》，作者：无敌暴龙兽在云计算的时代，越来越多的人选择将AI模型部署在云主机上，以便利用云服务提供商的弹性和可扩展性。然而，仅仅将AI模型部署到云主机上并不足以保证其性能和效率。本文将介绍云主机AI服务的性能测试和优化的具体操作过程，以帮助您充分发挥云计算平台的优势。第一部分：性能测试性能测试是评估系统在不同负载下的性能表现的过程。在云主机AI服务中，性能测试可以帮助我们了解模型的推理速度、资源利用情况和响应时间等指标。以下是进行性能测试的具体操作步骤：步骤1：选择合适的测试工具选择一个适合的性能测试工具，如Apache JMeter、Gatling或Locust。这些工具可以模拟多个并发用户对云主机AI服务发起请求，以测试系统的性能和...阅读全文
当时其实我是被他的这个图片给吸引到了（里面的 12 qps 应该是 12k qps）： 他介绍了两个核心系统在经过一个“数据压缩”的操作之后，分别节约了 204C 和 2160C 的服务器资源。共计就是 2364C 的服务器资源。如果按照一般标配的 4C8G 服务器，好家伙，这就是节约了 591 台机器啊，你想想一年就节约了多大一笔开销。 视频中介绍了几种数据压缩的方案，其中方案之一就是用了高性能集合： 因为他们的系统设计中大量用到“本地缓存”，而本地缓存大多就是使用 HashMap 来帮忙。所以他们把 HashMap 换成了性能更好的 IntObjectHashMap，这个类出自 Netty。为什么换了一个类之后，就节约了这么多的资源呢？换言之，IntObjectHashMa...阅读全文
本文分享自天翼云开发者社区《存储程序和程序控制：开发经验分享及操作过程详解》，作者：二进制诗人存储程序和程序控制是计算机行业中非常重要的一部分。它涉及到如何将程序和数据存储在计算机内存中，并通过程序控制来实现各种功能。本文将分享我的开发经验，并详细解释如何进行存储程序和程序控制的操作过程。1.理解存储程序和程序控制的基本概念 在计算机中，存储程序是指将程序和数据存储在内存中的过程。程序控制是指通过编写程序来控制计算机的运行，实现各种功能。理解这些基本概念是进行存储程序和程序控制开发的基础。2.选择合适的编程语言和开发环境根据具体的需求和开发经验，选择合适的编程语言和开发环境非常重要。常用的编程语言包括C、C++、Java等，而开发环境则可以选择Visual Studio、Eclipse等。根...阅读全文
2024年6月26日，2024世界移动通信大会上海（简称“MWC上海”）盛大开幕。围绕“未来先行”主题，来自全球的产业、技术和社区等各界代表齐聚一堂，共话产业高质量发展。在“智启云领 向新未来”主题馆内，天翼云展出了“息壤”“云骁”“慧聚”三大智算平台和“天翼AI云电脑”“一体化紫金算力基础设施”等最新智算成果，全方位展示在人工智能时代的科技创新实力。算力分发网络平台“息壤”一体化计算加速平台“云骁”一站式智算服务平台“慧聚”一体化紫金算力基础设施天翼AI云电脑夯实智算底座全栈赋能AI产业创新与应用落地天翼云智算云体系中，“息壤”平台可实现跨域、跨服务商异构算力的统一调度管理、并网交易，加快全国一体化算力体系形成，让智算更普惠。“云骁”具备超大规模集群管理、运营和算力加速能力，集“...阅读全文
本文分享自天翼云开发者社区《玩转云端|天翼云边缘安全加速平台AccessOne实用窍门之上传下载极速推进，纵享丝滑体验！》，作者：天翼云社区官方账号随着传媒行业数字化转型驶入深水区，如何提升内容生产与服务能力成为传媒产业新的时代命题。传媒业务数据量庞大，包含海量视频、音频、图像及文字等数据，这意味着传媒业务的内容上传和下载工作成为从业者工作中的重要部分。受限于传输速度和网络拥堵等因素，传媒业务中的上传和下载工作往往会遇到诸多困难。那么，如何提高传媒业务的上传下载速度，助力传媒行业提升平台运营水平与服务效率？天翼云边缘安全加速平台AccessOne来支招！某主流媒体平台为推动线上业务蓬勃发展，搭建了门户网站、APP客户端等多类用户入口，在线提供视频、音频、图片等高质量内容。然而，由于平台用户数...阅读全文
本文分享自微信公众号：中国电信天翼云你是具有“社牛”属性的“e人”还是“社恐”属性的“i人”？在年轻群体中火起来的“MBTI人格测试”中“i”代表intraversion（内倾型）“e”则代表extraversion（外倾型）也就是大家平时所说的内向和外向在征服internet的道路上总有些痛是i人和e人都无法承受的……比如，网络连接比i人还“内向”尤其在“国际社交”方面跨国链路抖动，远程会议卡顿应用登录超时，协同效率低下跨境玩家同服对战延时道具交易、指令互动、语音聊天延迟卡顿除了网络连接，安全也是个老大难近年来，网络大流量攻/击逐年攀升DDoS攻/击成本低廉海外攻/击态势愈加严峻然而，在提升跨国网络传输性能方面常规物理专线铺设周期长、价格贵难以覆盖全球区域在强化跨国网络安全方面传统单...阅读全文
各种资源，各种教程，请=》 当时其实我是被他的这个图片给吸引到了（里面的 12 qps 应该是 12k qps）： 他介绍了两个核心系统在经过一个“数据压缩”的操作之后，分别节约了 204C 和 2160C 的服务器资源。 共计就是 2364C 的服务器资源。 如果按照一般标配的 4C8G 服务器，好家伙，这就是节约了 591 台机器啊，你想想一年就节约了多大一笔开销。 视频中介绍了几种数据压缩的方案，其中方案之一就是用了高性能集合： 因为他们的系统设计中大量用到“本地缓存”，而本地缓存大多就是使用 HashMap 来帮忙。 所以他们把 HashMap 换成了性能更好的 IntObjectHashMap，这个类出自 Netty。 为什么换了一个类之后，就节约了这么多的资源呢？ 换言之，Int...阅读全文
在数据驱动的时代，高效地存储和处理数据成为了开发者们的重要任务。Redis，作为一个开源的高性能键值对（key-value）数据库，以其独特的数据结构和丰富的功能，成为了众多项目的首选。 今天，我们就来揭开Redis的神秘面纱，看看它是如何通过不同的数据类型，为我们提供高效、灵活的数据存储和处理能力的。 ### 一、字符串（String）：数据的基石 #### String类型简介 字符串是Redis最基本的数据类型，它可以存储文本、数字或者二进制数据。 使用字符串类型，你可以执行原子性的操作，如追加（APPEND）、设置（SET）和获取（GET）。例如，你可以将用户信息作为字符串存储，并通过键快速检索。 - 一个key对应一个value。 - String类型是二进制安全的。只要内容可以使...阅读全文
本文分享自天翼云开发者社区《nvme磁盘故障注入方法》，作者：曹****飞在存储系统中，磁盘的故障是很可能出现的问题。存储软件的设计需要对故障进行处理，提高系统的健壮性。然而磁盘的故障是不可控的，当我们想测试软件故障处理的分支时，不是很方便。用软件模拟的方法能覆盖的场景比较少，而且和实际故障的差距会比较大。因此，如果能让故障下沉到磁盘，尽可能的靠近磁盘，才能构造出尽可能真实的故障场景。本文针对nvme磁盘，在磁盘驱动这一层调研了几种可以注入磁盘故障的方法。1. write uncorrectable通过向nvme控制器发送write uncor命令，标记指定的LBA范围为invalid，当读到这个LBA范围时，ctrl会返回Unrecovered Read Error错误。可以用于模拟读的m...阅读全文
近日，由中国通信企业协会主办的“第13届数据中心产业发展大会暨AIDC智能算力生态合作展览会”在北京顺利举行。现场展示了天翼云“AIDC”“紫金”“云骁”“息壤”等技术和平台能力；中国电信天翼云2023年智算资源池上海节点建设工程获得大会“算力基础设施高质量发展企业案例奖”；天翼云科技有限公司云网发展部副总经理李启荣围绕天翼云新一代智算中心建设方案与创新实践展开分享。随着人工智能的飞速发展，国家出/台一系列政策，为底层算力基础设施建设，以及人工智能赋能经济社会发展指明了方向。2024年政府工作报告中指出，深化大数据、人工智能等研发应用，开展“人工智能+”行动，打造具有国际竞争力的数字产业集群，适度超前建设数字基础设施，加快形成全国一体化算力体系，培育算力产业生态。人工智能已成为引领未来发展...阅读全文
本文分享自天翼云开发者社区《网络审计：为什么定期检查您的网络很重要》，作者：易乾在数字化时代，网络安全成为组织和个人必须面对的重要挑战。网络审计是一种关键的安全措施，通过定期检查和评估网络系统的安全性，帮助发现潜在的安全漏洞和弱点，从而防止数据泄露和其他安全威胁。本文将介绍网络审计的重要性，并提供一系列具体的操作步骤，帮助您有效地执行网络审计。为什么网络审计很重要？发现潜在的安全漏洞：网络审计可以帮助识别网络中存在的安全漏洞，防止未经授权的访问和数据泄露。遵守法律法规：许多国家和地区的法律法规要求定期进行网络安全审计，以保护用户数据的安全。提高网络性能：网络审计还可以帮助识别网络性能问题，优化网络配置，提高网络效率。增强用户信任：通过定期的网络审计和改进，可以增强用户对组织的信任。如何执行网...阅读全文
获课： 97java. xyz/ 5285/ 从设计 - 开发 - 测试到运营一站式搞定：打造高效项目流程 在当今竞争激烈的商业环境中，产品或服务的成功与否，很大程度上取决于其从设计、开发、测试到运营整个流程的效率和质量。采用一站式搞定的模式，能够将各个环节紧密衔接，形成一个有机的整体，不仅可以提高工作效率，还能确保项目的顺利推进和最终成功。 一、设计：奠定项目基础 设计是项目的起点，如同建筑的蓝图，它决定了产品或服务的整体架构和用户体验。在这个阶段，设计师需要深入了解用户需求和市场趋势，通过市场调研、用户访谈等方式，收集并分析相关信息，为后续的设计工作提供有力依据。 用户界面（UI）设计和用户体验（UX）设计是设计阶段的核心内容。UI 设计关注的是产品的视觉呈现，包括色彩搭配、图标设计、界...阅读全文
【保姆级教学】Python爬虫、Selenium、Scrapy爬虫框架、反爬与反反爬、Appium 视频课程分享——【保姆级教学】Python爬虫、Selenium、Scrapy爬虫框架、反爬与反反爬、Appium，附源码+文档下载。 Python爬虫是一种自动化获取互联网数据的技术，它可以通过编写程序自动访问网站并抓取所需的数据。在本文中，我们将介绍Python爬虫的基础知识、常用库和实际应用。 一、Python爬虫的基础知识 1. 爬虫的定义 爬虫是一种自动化获取互联网数据的技术，它可以通过编写程序自动访问网站并抓取所需的数据。 2. 爬虫的工作原理 爬虫的工作原理是通过模拟浏览器的行为，向目标网站发送请求并获取响应，然后解析响应中的数据。 3. 爬虫的分类 根据爬虫的目的和实现方式，可...阅读全文
本文分享自天翼云开发者社区《云数据库MySQL多人协同开发实践》，作者：不知不觉随着云计算技术的快速发展，云数据库作为云计算的重要组成部分，为企业提供了高效、灵活和可靠的数据存储和管理服务。其中，MySQL作为一款流行的开源关系型数据库，在云数据库领域具有广泛的应用。多人协同开发是软件开发过程中的重要环节，本文将探讨云数据库MySQL多人协同开发的实践。一、云数据库MySQL多人协同开发的优势高效协作：云数据库MySQL支持多人同时在线编辑和操作，实现了实时同步和冲突解决，提高了团队协作效率。数据安全：云数据库MySQL提供了数据加密、访问控制等安全措施，确保数据在传输和存储过程中的安全性。灵活扩展：云数据库MySQL可以根据业务需求进行弹性扩展，满足不同规模的应用需求。高效性能：云数据库M...阅读全文
本文分享自天翼云开发者社区《ceph数据重构原理》，作者:x****n在分布式存储系统Ceph中，硬盘故障是一种常见问题。为了保证数据安全，当发生硬盘故障后，分布式存储系统会依据算法对故障硬盘上的数据进行数据重构及转储。和一般分布式系统一样的是，Ceph同样使用多副本机制来保证数据的高可靠性（注：EC在实现层面可以理解为副本机制的一种），给定一份数据，Ceph在后台自动存储多份副本（一般使用3个副本），从而使得在硬盘损毁、服务器故障、机柜停电等故障情况下，不会出现数据丢失，甚至数据仍能保持在线。不过在故障发生后，Ceph需要及时做故障恢复，将丢失的数据副本补全，以维系持续的数据高可靠性。一.PG和PGLogCeph中对象数据的维护由PG（Placement Group）负责，PG作为Ceph...阅读全文
获课：789it.top/14037/在当今快速发展的技术世界中，人工智能（AI）已经成为推动创新和效率的关键力量。Spring AI 结合 DeepSeek 的强大功能，为开发者提供了一个简单而强大的平台来构建和部署 AI 应用。本文将引导你如何使用 Spring AI 和 DeepSeek 轻松打造你的第一个 AI 应用。1. 环境准备首先，确保你的开发环境已经安装了以下工具：Java Development Kit (JDK): Spring AI 是基于 Java 的，所以需要 JDK 8 或更高版本。Maven 或 Gradle: 用于项目依赖管理和构建。IDE: 如 IntelliJ IDEA 或 Eclipse，用于代码编写和调试。2. 创建 Spring Boot 项目使用 ...阅读全文
近日，知名开源大规模并行处理 (MPP) 数据库Greenplum的源代码在其官方GitHub页面突然消失，引发了用户和开发者的广泛关注， PostgreSQL生态系统或将产生新变数。开源软件在面对商业化和盈利需求时的举措，将对行业产生巨大影响：开源信任的挑战：频繁的开源协议变更可能会导致企业和开发者对开源项目的信任度下降。法律和合规考虑：新协议条款可能引发企业对法律和合规风险的重新评估，影响其技术选型和投资决策。作为云服务国家队，天翼云不断加快关键核心技术自主攻关，针对市场需求自研TeleDB数据库，能够助力客户平滑迁移Greenplum数据库，实现应用无缝切换，以更可靠的产品和更优质的服务，提供企业数据管理更优解。TeleDB分析型实例，企业数据库领先之选天翼云TeleDB分析型实例是一...阅读全文
近日，第十三届PostgreSQL技术大会在杭州举行。本次大会以“聚焦云端创新，汇聚智慧共享”为主题，行业大咖、学术精英、技术专家和技术爱好者齐聚一堂，共同探讨数据库领域的发展趋势、技术创新和实践经验。中国电信天翼云受邀参会并斩获数据库最佳产品奖。天翼云数据库产品线首席技术官李跃森在大会主论坛发表《天翼云下一代分布式数据库的探索和实践》演讲，分享了天翼云TeleDB分布式数据库的发展历程、对下一代分布式数据库的技术探索以及当前数据库产品的落地实践与应用效果，并对数据库产品的未来发展做出展望。天翼云数据库产品线首席技术官 李跃森他表示，数据库是IT基础设施领域重要的组成部分，天翼云紧跟数据库行业技术方向与创新趋势，积极探索下一代分布式数据库技术，通过RDA有效解决进程数量暴涨问题，赋予数...阅读全文
近日，国际数据公司IDC发布的《中国专属云服务市场（2023上半年）跟踪》报告显示，2023上半年，专属云服务市场同比增长26.6%。中国电信天翼云以18.7%的份额占比稳居中国专属云服务市场第一，连续四次登顶，持续领跑中国专属云服务市场。全面数字化浪潮推动下，随着合规要求的趋严、敏捷性需求的增加，以及生成式AI的火热，具备极-致安全与敏捷可靠等独特性能优势的专属云，逐渐成为产业数智化转型的优选，市场需求持续释放。天翼云作为云服务国家队，以科技创新持续夯实国云底座，赋能千行百业数字化转型，目前已形成“2+4+31+X+O”的整体资源布局，并实现了全栈技术的自主可控，打造了“云网边端数智安”全栈云服务产品体系，为海内外客户提供包括公有云、专属云、私有云、边缘云等多类型的高品质云服务。天翼专...阅读全文
本文分享自天翼云开发者社区《云迁移中的CT-CMS任务操作指南》，作者：每日知识小分享随着企业业务的快速发展和数据量的不断增长，传统的IT架构逐渐面临性能瓶颈、扩展性不足等问题。为了解决这些问题，越来越多的企业选择将业务迁移到云平台，以实现更高效、灵活和可扩展的IT服务。在云迁移的过程中，CT-CMS（内容管理系统）的迁移是一项重要而复杂的任务。本文将详细介绍云迁移中CT-CMS任务操作的关键步骤、注意事项以及最/佳实践，帮助读者顺利完成CT-CMS的云迁移工作。CT-CMS作为企业内容管理的核心系统，承载着网站内容管理、信息发布、工作流程自动化等重要功能。在云迁移过程中，如何确保CT-CMS系统的稳定性、数据的安全性和业务的连续性，成为了迁移任务的关键。本文将围绕CT-CMS云迁移的任务操...阅读全文
本文分享自天翼云开发者社区《CBR云备份与恢复管控简介》，作者:c****n1.CBR云备份与恢复介绍CBR (Cloud Backup & Restore)是一般云厂商提供的备份与恢复服务。用户可以在云端对数据进行备份和恢复，保证数据的安全性和可靠性。使用CBR，用户可以方便地随时随地备份和恢复数据。采用增量备份、快照备份、跨区域复制等先进的备份和恢复技术，提供快速、高效、可靠的数据保护。此外，CBR还提供了基于agent的备份、快照备份、VSS备份等多种备份方式，以适应不同类型的数据和应用。2.云备份与恢复管控介绍CBR 管理架构旨在为用户提供安全、可靠、易用的备份与恢复服务。该架构由几个关键组件组成，包括备份服务端、消息中间件、备份仓库、备份引擎和恢复引擎。备份服务端为用户提供了基于...阅读全文
今天来介绍一款工具Squaretest，它是一款自动生成单元测试的插件，为什么会用到它？ 主要因为最近公司上了代码质量管控的指标，会考评各个项目的单元测试覆盖率，以及sonar扫描出来的各种问题，很多老项目老代码，或者着急交付的项目，单元测试严重缺失，覆盖率只有5%不到。 所以几个小伙伴这几天就在疯狂的堆单元测试，3个人堆了2天才堆到30%，于是我也来上手帮忙写了两个，写到第二个的时候就发现，这个活不应该是人干的，要去看原来的代码，然后根据逻辑写各种Mock，感觉是有迹可循的东西，所以就查了下，发现果然有插件帮我们来干这个事情，那么解下来就来看看。 另外，更多 IDEA 好用的插件全部整理好了，微信搜索Java技术栈，在后台发送：工具，可以在线阅读。 我使用的是idea，我们先来下载一下插件...阅读全文
本文分享自天翼云开发者社区《S3基准测试工具 - Warp使用简介》，作者:y****n1.Warp⼯具简介warp 是⼀款开源的S3基准测试⼯具，开源S3项⽬minio下的⼀个⼦项⽬，可以对兼容S3语义的服务进⾏基准测试。2.Warp主要功能及配置常⽤功能有mixed，put，get，analyze等；mixed：是混合读写模式，可以指定put、get、delete、stat类型的请求的不同⽐例。put：只进⾏上传请求。get：先上传部分数据进⾏预热，然后只进⾏下载请求。analyze：将其他模式的输出结果进⾏分析，warp数据取样间隔5s例：mixed 混合读写1：9warp mixed --put-distrib=90 --get-distrib=10 --stat-distrib=0...阅读全文
近日，弗若斯特沙利文（Frost & Sullivan，简称“沙利文”）联合头豹研究院发布《2023年中国边缘云市场报告》，天翼云在2023H1中国边缘云IaaS层细分市场位列第一，领跑中国边缘云市场。近年来，随着5G、物联网等技术的飞速发展，智能终端设备数量迅速增加，产生的数据量呈指数级增长，这对数据处理的时效性、可靠性提出更高要求。边缘云通过将网络、计算、存储资源部署到离用户设备更近的位置，更好地满足用户在敏捷连接、实时业务等不同方面的需求。作为云服务国家队，天翼云立足客户需求，持续深耕边缘计算领域，不断加速算力基础设施建设，并构建完善的边缘云产品矩阵，以低时延、高可靠、高安全、可调度的边缘云服务，助力企业实现敏捷业务响应、释放业务价值，推动算力普惠。在边缘算力布局方面，天翼云充分发挥...阅读全文
本文分享自天翼云开发者社区《RocksDB 二级缓存》，作者：b****nRocksDB 团队正在实现对非易失性介质上的块缓存的支持。可以看作是 RocksDB 当前的易失性块缓存的扩展。非易失性块缓存充当第二层缓存，其中包含从易失性缓存中逐出的块。当这些块由于访问而变得更热时，它们会被提升到易失性缓存中。此功能适用于数据库位于远程存储或云存储上的情况。非易失性缓存在 RocksDB 中被称为 SecondaryCache。通过维护比 DRAM 大一个数量级的二级缓存，需要从远程存储读取的次数会更少，从而减少读取延迟和网络带宽消耗。从用户的角度来看，本地闪存缓存将支持以下需求：1.打开数据库时提供指向二级缓存的指针。2.能够在同一进程中跨DB共享二级缓存。3.一台主机上有多个二级缓存。4.通...阅读全文
获课：weiranit.fun/14043/获取ZY↑↑方打开链接↑↑一、 项目概述本项目旨在利用 DeepSeek 强大的自然语言处理能力和 Spring AI 的便捷开发框架，构建一个 AI 家庭医生应用。该应用能够通过自然语言交互，为用户提供初步的医疗咨询、症状分析、健康建议等服务，并引导用户进行正确的就医流程。二、 技术栈DeepSeek: 用于医疗领域的自然语言理解、症状分析、疾病预测等。Spring AI: 提供便捷的 AI 模型集成、API 接口开发、用户交互等功能。Spring Boot: 用于构建高效、稳定的后端服务。数据库: 可选 MySQL、PostgreSQL 等关系型数据库，用于存储用户信息、医疗数据等。前端: 可选 Vue.js、React 等前端框架，构建用户...阅读全文
Spring Cloud Alibaba: 实现服务的无损下线功能作者：谁偷走了我的奶酪2024.01.18 02:49浏览量：2简介：在微服务架构中，服务的上线和下线是一个常见的操作。然而，直接关闭服务可能会导致数据丢失或服务中断。本文将介绍如何使用Spring Cloud Alibaba实现服务的无损下线功能。在微服务架构中，服务的上线和下线是一个常见的操作。但是，直接关闭服务可能会导致数据丢失或服务中断，这被称为“有损下线”。为了解决这个问题，我们可以使用Spring Cloud Alibaba提供的解决方案来实现服务的无损下线。无损下线的原理是在服务关闭之前，将所有待处理的任务或者请求全部处理完成，保证服务的正常运行，然后再安全地关闭服务。这样就可以避免数据丢失和服务中断的问题。要实...阅读全文
近日，由中国互联网协会主办的2024（第二十三届）中国互联网大会在北京举行。天翼云凭借“慧泽”大模型项目荣获首届“金灵光杯”中国互联网创新大赛金灵光大奖以及人工智能专题赛一等奖，天翼云电脑荣获信息技术应用创新专题赛优秀奖。天翼云科技有限公司副总经理、首席网络安全官广小明出席中小企业数据安全工具箱上线仪式，天翼云科技有限公司资深安全专家闫斐围绕“构筑原生安全基础设施，赋能企业数字转型发展”进行分享。以科技创新为引领匠心打造数智化产品服务大会开幕式上，中国工程院院士、中国互联网协会专家咨询委员会主任邬贺铨院士为获奖单位颁发了“金灵光”奖杯和获奖证书。“慧泽”是天翼云推出的政务行业大模型，此次获奖的天翼云“慧泽”大模型项目是基于政府惠民和政务管理的实际需求，在开源基模的基础上，通过持续预训练和有监...阅读全文
近日，2023年海关科技装备博览会（简称“关博会”）在北京举办。中国电信围绕“数字政务助力海关事业发展”主题，在主展区展出了数字政务最新成果和实践经验。2023年海关科技装备博览会中国电信展区展区汇集了数字底座、政务数据服务体系、大模型·一网通办-12345政务热线平台、一网协同平台、5G+智慧海关、量子产业布局、卫星手机直连等10余个展项，充分展现了中国电信在数字政务领域富有成效的探索及取得的阶段性成果。自主可控“国云”底座天翼云提供全栈自主可控、一云多芯的安全可靠云基础设施，可以在智慧海关的关键业务领域提供基础底座服务，满足客户技术升级要求，形成基于天翼云的数字信息基础，助力客户实现“多方共识、多元治理、协同共治”的治理局面。一体化智能算力平台为了向政务应用提供安全可靠的算力服务，天翼...阅读全文
本文分享自天翼云开发者社区《云审计与大数据审计：区别、优势与应用场景》，作者：每日知识小分享随着信息技术的飞速发展，审计领域也迎来了革命性的变革。云审计和大数据审计作为两种新兴的审计模式，各有其独特的特点和应用场景。本文将对云审计和大数据审计进行深入的比较分析，探讨它们之间的区别、优势以及适用的场景，旨在帮助读者更好地理解这两种审计模式，并为企业选择合适的审计方法提供参考。云审计和大数据审计都是信息技术在审计领域应用的产物。云审计主要利用云计算技术的优势，实现审计数据的集中存储、处理和分析；而大数据审计则侧重于利用大数据技术的能力，对海量数据进行挖掘和分析，以发现潜在的风险和问题。虽然两者在某些方面有相似之处，但它们在数据结构、处理方式、技术应用等方面存在明显的区别。一、云审计与大数据审计的...阅读全文
本文分享自天翼云开发者社区《双栈网络使用什么技术实现总部网络能访问分部网络？》，作者：SD万为了实现总部和分部之间的IPv4和IPv6互访，可以使用以下隧道技术：1、IPv4隧道技术：可以使用GRE（Generic Routing Encapsulation）隧道技术，在IPv4网络中隧道传输IPv6数据包。在总部和分部之间分别配置一个GRE隧道接口，并将IPv6数据包封装在IPv4数据包中进行传输。配置完成后，总部的IPv4地址就可以访问分部的IPv4地址。2、IPv6隧道技术：可以使用6to4、Teredo等IPv6隧道技术，在IPv4网络中隧道传输IPv6数据包。在总部和分部之间分别配置一个6to4或Teredo隧道接口，并将IPv4数据包封装在IPv6数据包中进行传输。配置完成后，总...阅读全文
一文读懂蓝绿发布、A/B 测试和金丝雀发布的优缺点 2022-01-06 10:03 来源: 阿里云云栖号 原标题：一文读懂蓝绿发布、A/B 测试和金丝雀发布的优缺点 简介：目前，业界已经总结出了几种常见的服务发布策略来解决版本升级过程中带来的流量有损问题。本文首先会对这些普遍的发布策略进行简单的原理解析，最后结合阿里云的云原生网关对这些发布策略进行实践。 作者 | 扬少 背景 目前，业界已经总结出了几种常见的服务发布策略来解决版本升级过程中带来的流量有损问题。本文首先会对这些普遍的发布策略进行简单的原理解析，最后结合阿里云的云原生网关对这些发布策略进行实践。 发布策略 被业界广泛采用的服务发布策略包括蓝绿发布、A/B 测试以及金丝雀发布。 1、蓝绿发布 蓝绿发布需要对服务的新版本进行冗余部...阅读全文
近日，国际数据公司IDC发布的《中国专属云服务市场（2023下半年）跟踪》报告显示，2023下半年，专属云服务整体市场规模同比增长18.0%。中国电信天翼云以21.8%的市场份额，蝉联中国专属云服务市场第一。天翼云连续五次登顶，以实力持续领跑中国专属云服务市场。IDC报告指出，2023下半年，中国专属云服务市场继续从“规模发展”向“规模+质量并行发展”进阶，企业对于专属云服务的能力要求随着用云深度的不断加深而不断提高。依托自主可控的全栈云服务产品体系，天翼云可为客户提供公有云、专属云、私有云、边缘云等多类型高品质云服务。天翼专属云能够为用户实现资源物理隔离、网络隔离、存储隔离，消除用户之间的资源相互影响和网络互访隐患，具有安全隔离、稳定可靠、灵活可控、易于管理等优势。在专属云内，用户可独享...阅读全文
flink实时规则营销系统（39期，2023版） 给大家分享一套课程——flink实时规则营销系统（39期，2023版），附源码+文档+虚拟机下载。 CEP 在 Flink 中以 library 形式存在，并不和其底层引擎代码相绑定，只是继承很多 low-level 的 API，阅读 cep 的代码过程中也可以学习到不少 Flink 上新颖的使用方式。我们可以将 Flink 内部的 CEP 实现简要分成以下几个步骤： 规则解析 规则匹配 匹配事件提取 flink可以广泛用于实时计算,特别是无限流的场景，比如在双11这天,淘宝或者天猫这天网页在某个时间段被用户浏览了多少次，那些热门商品是用户喜欢的。比如说，每隔5分钟，想看看最近一小时内被点击最多的商品。这就是一个很典型的flink-windo...阅读全文
本文分享自天翼云开发者社区《浅谈Redis的三种集群策略及应用场景》，作者：段林Redis提供了三种集群策略：1.主从模式：这种模式⽐较简单，主库可以读写，并且会和从库进⾏数据同步，这种模式下，客户端直接 连主库或某个从库，但是但主库或从库宕机后，客户端需要⼿动修改IP，另外，这种模式也⽐较难进⾏ 扩容，整个集群所能存储的数据受到某台机器的内存容量，所以不可能⽀持特⼤数据量。2.哨兵模式：这种模式在主从的基础上新增了哨兵节点，但主库节点宕机后，哨兵会发现主库节点宕机， 然后在从库中选择⼀个库作为进的主库，另外哨兵也可以做集群，从⽽可以保证但某⼀个哨兵节点宕机 后，还有其他哨兵节点可以继续⼯作，这种模式可以⽐较好的保证Redis集群的⾼可⽤，但是仍然不能 很好的解决Redis的容量上限问题。3...阅读全文
C++大型流媒体项目-从底层到应用层千万级直播系统实战（完结）获课：jzit.top/5300/C++在大型流媒体项目中的应用是非常广泛的，尤其是在要求高性能、低延迟和高可靠性的场景下。成功开发和部署一个大型流媒体项目通常需要精心设计和技术选型。以下是一些关键的步骤和考虑因素，帮助你了解如何实现C++大型流媒体项目的成功：1.明确需求和目标在开始开发之前，必须明确项目的目标。流媒体项目通常包括直播、视频点播（VOD）、实时通信等不同类型的流媒体服务。明确需求有助于制定清晰的架构设计和技术选型。直播流媒体： 如实时视频、音频传输，通常要求低延迟。点播流媒体： 视频的按需播放，可以容忍较高的延迟，但需要良好的缓存和分发策略。实时通信： 例如视频会议、在线互动，这要求非常低的延迟和高可用性。2....阅读全文
本文分享自天翼云开发者社区《云服务器怎么搭建：从零到运行的基础指南》，作者：每日知识小分享随着云计算技术的快速发展，云服务器已经成为企业和个人首选的计算服务。云服务器具有高性能、高可用性、安全可靠、灵活扩展等优势，能够满足各种大规模数据处理、存储、应用部署和管理等需求。本文将详细探讨云服务器的搭建，帮助读者从零开始构建并运行云服务器的基础设施。一、云服务器搭建的前期准备在开始搭建云服务器之前，需要做好以下准备工作：选择合适的云服务商和平台：不同的平台提供的云服务器产品和服务也有所不同，需要根据自身业务需求选择合适的云服务商和平台。了解云服务器的硬件配置：云服务器通常包括CPU、内存、存储、网络带宽等配置，需要根据业务需求选择合适的配置，并根据需要进行扩展或缩减。确定应用系统和架构：确定需要部...阅读全文
【20章全】AI最火Agent实战(打造你代理) 一、Agent的基本概念 Agent是指能够感知环境并采取行动以影响该环境的实体。在人工智能领域，Agent通常指具有一定智能行为的软件实体，它们可以自主地执行任务，并与外部环境或其他Agent交互。随着大模型的发展，Agent能够利用这些模型的强大能力来完成更为复杂的任务。 常用Agent介绍 自然语言询问数据库Agent 在数据库管理中，我们通过结构化查询语言（SQL）来完成所有操作。SQL是一种专门的语言，用于向计算机明确传达我们从数据库中提取信息或执行操作的需求。这意味着，我们不仅需要掌握这种技术，还要深入了解我们正在处理的数据。 但是现在我们可以通过Agent完成从"人为使用SQL告诉数据库我们想要什么”到“直接告诉数据库我们想要什...阅读全文
位于海南省陵水黎族自治县的清水湾，是一个拥有碧海蓝天与温暖阳光的热带海湾。早春三月，海岸线旁的沙滩上满是享受假期生活的游客。在不远处的海域，重量与1000辆小汽车相当、单个罐体直径与“天和号”空间站核心舱相当的几个“大家伙”正隐于波涛之下，安静地工作着。自去年3月底在陵水正式投入运营以来，全球首/个商用海底数据中心已平稳运行近一年，为人工智能、大数据等互联网企业提供数据存储和计算服务。“把数据存进海底”，这一天马行空的想象变成现实，互联网和数据行业与海洋科技打通，形成了全新的交叉业态。数据中心为何由陆向海？错综复杂的海洋环境能否保障数据安全和稳定？“陆数海算”将如何助力我国算力迈上新台阶？一起走近海南陵水商用海底数据中心。海底数据舱正在进行车间建造集成将海洋能源转化为海洋算力在几乎不消耗淡...阅读全文
1 问题回顾1.1 问题描述在项目的性能测试中，相关的接口的随着并发数增加，接口的响应时间变长，接口吞吐不再增长，应用的CPU使用率较高。1.2 分析思路谁导致的CPU较高，阻塞接口TPS的增长？接口的响应时间的调用链分布是什么样的，有没有慢的点？1）使用火焰图分析应用的CPU如下，其中log4j2日志占了40%左右CPU，初步怀疑是log4j2的问题。2）调用链的分析通过pfinder查看调用链发现，接口总耗时78ms，没有明显慢的调用方法和慢sql等，先排除接口的本身的代码问题。1.3 初步结论log4j2的问题，需详细分析日志的相关配置log4j2.xml。上面可以看到asyncRollingFile和errorAsynchRollingFile都是打印的同步日志。同步日志是程序的业务...阅读全文
近日，天翼云TeleDB数据库在中国信通院“可信数据库”系列测试的赛道上，一次性跨越“分布式事务型数据库基础能力测试”与“性能测试”的双重大关，以云服务国家队的卓越实力为数据库领域树立了新标杆。中国信通院开展的“可信数据库”系列测试是国内面向数据库产品及周边工具、数据库服务商和应用侧为评价目标的权威测试体系，是厂商产品研发和用户采购选型的风向标。其中，分布式事务型数据库基础能力测试依据YD/T 3775-2020《大数据 分布式事务数据库技术要求与测试方法》行业标准，对分布式事务型数据库的基础能力、兼容能力、管理能力、高可用能力、扩展能力、安全能力、性能七大能力域进行测试；分布式事务型数据库性能测试则是针对金融场景下分布式事务型数据库的性能水平进行测试的标准化测试体系，并能对数据库在故障场...阅读全文
本文分享自天翼云开发者社区《接口性能测试---locust脚本编写（一）》，作者：丁****乐一、安装locust是用python编写的一款开源接口性能测试工具，以python3为例，直接使用pip安装即可，pip3 install locust。安装完成之后可使用locust --version查看对应的版本。二、脚本编写通过编写python脚本模拟用户行为进行性能测试，locust python脚本一种比较常见的写法是将脚本分成三部分，第一部分进行相关导入、第二部分进行用户行为定义，第三部分进行用户定义。以一个例子进行讲解首行进行了包导入，导入了常用的类、装饰器和函数。Behave定义了进行用户行为定义，声明了两个操作，一个是get请求，一个是post请求。TestUser定义了用户...阅读全文
之前文章提到过Kafka的broker端有ISR机制，它可以看成多个副本的集合，里面有leader副本和多个follower副本，数量是我们可以配置的，只有ISR中的副本才有可能成为leader副本。 我们可以通过一些参数的配置，例如ack的配置、生产者重试、isr最小数量，消费者改为手动提交等方式来尽可能的保障Kafka的消息可靠性。 Kafka在保证数据的可靠性上使用的是‘数据冗余’的方式，即将一个分区下的数据保存到多个副本中，起到备份数据的作用。这样如果leader挂了，会重新选举follower作为leader继续工作，那么Kafka中leader副本是如何将数据同步到follower副本中的呢？今天想通过这篇文章总结记录下。 1.副本中的高水位（High Watermark） 什么...阅读全文
