java技术圈 为您找到相关结果 717

干货|8000字长文,深度介绍Flink在字节跳动数据流的实践!

DataLeap 字节跳动数据流的业务背景 数据流处理的主要是埋点日志。埋点,也叫Event Tracking,是数据和业务之间的桥梁,是数据分析、推荐、运营的基石. 用户在使用App、小程序、Web等各种线上应用时产生的行为,主要通过埋点的形式进行采集上报,按不同的来源分为客户端埋点、Web端埋点、服务端埋点。 不同来源的埋点都通过数据流的日志采集服务接收到MQ,然后经过一系列的Flink实时ETL对埋点进行数据标准化、数据清洗、实时风控反作弊等处理,最终分发到下游,主要的下游包括ABTest、推荐、行为分析系统、实时数仓、离线数仓。 所以,如果用一句话来概括数据流主要业务,其实就是埋点的收集、清洗、分发。 目前在字节跳动,清洗和分发环节是基于Flink搭建的。 01 - 数据流业务规模 ...阅读全文

博文 2024-10-28 14:51:29 亿信华辰

数据搬家到海底!全球首个商用海底数据中心大揭秘!

位于海南省陵水黎族自治县的清水湾,是一个拥有碧海蓝天与温暖阳光的热带海湾。早春三月,海岸线旁的沙滩上满是享受假期生活的游客。在不远处的海域,重量与1000辆小汽车相当、单个罐体直径与“天和号”空间站核心舱相当的几个“大家伙”正隐于波涛之下,安静地工作着。自去年3月底在陵水正式投入运营以来,全球首/个商用海底数据中心已平稳运行近一年,为人工智能、大数据等互联网企业提供数据存储和计算服务。“把数据存进海底”,这一天马行空的想象变成现实,互联网和数据行业与海洋科技打通,形成了全新的交叉业态。数据中心为何由陆向海?错综复杂的海洋环境能否保障数据安全和稳定?“陆数海算”将如何助力我国算力迈上新台阶?一起走近海南陵水商用海底数据中心。​海底数据舱正在进行车间建造集成将海洋能源转化为海洋算力在几乎不消耗淡...阅读全文

博文 2024-05-11 10:18:32 Tianyiyun

浅谈Redis的三种集群策略及应用场景

本文分享自天翼云开发者社区《浅谈Redis的三种集群策略及应用场景》,作者:段林Redis提供了三种集群策略:1.主从模式:这种模式⽐较简单,主库可以读写,并且会和从库进⾏数据同步,这种模式下,客户端直接 连主库或某个从库,但是但主库或从库宕机后,客户端需要⼿动修改IP,另外,这种模式也⽐较难进⾏ 扩容,整个集群所能存储的数据受到某台机器的内存容量,所以不可能⽀持特⼤数据量。2.哨兵模式:这种模式在主从的基础上新增了哨兵节点,但主库节点宕机后,哨兵会发现主库节点宕机, 然后在从库中选择⼀个库作为进的主库,另外哨兵也可以做集群,从⽽可以保证但某⼀个哨兵节点宕机 后,还有其他哨兵节点可以继续⼯作,这种模式可以⽐较好的保证Redis集群的⾼可⽤,但是仍然不能 很好的解决Redis的容量上限问题。3...阅读全文

博文 2024-06-07 11:20:29 Tianyiyun

安全可信 | 通过双项测试!TeleDB实力亮剑!

近日,天翼云TeleDB数据库在中国信通院“可信数据库”系列测试的赛道上,一次性跨越“分布式事务型数据库基础能力测试”与“性能测试”的双重大关,以云服务国家队的卓越实力为数据库领域树立了新标杆。​中国信通院开展的“可信数据库”系列测试是国内面向数据库产品及周边工具、数据库服务商和应用侧为评价目标的权威测试体系,是厂商产品研发和用户采购选型的风向标。其中,分布式事务型数据库基础能力测试依据YD/T 3775-2020《大数据 分布式事务数据库技术要求与测试方法》行业标准,对分布式事务型数据库的基础能力、兼容能力、管理能力、高可用能力、扩展能力、安全能力、性能七大能力域进行测试;分布式事务型数据库性能测试则是针对金融场景下分布式事务型数据库的性能水平进行测试的标准化测试体系,并能对数据库在故障场...阅读全文

博文 2024-07-15 16:40:06 Tianyiyun

TiDB体系架构

本文分享自天翼云开发者社区《TiDB体系架构》,作者:x****n​如图所示,TiDB体系中三大组成部分:PD、TiDB Server、TiKV1.PD:负责产生全局的TSO时间、控制Region在TIkv中的分布、产生全局事务ID、还有其他ID。2.TiDB:没有数据落地,接收客户端sql语句,对sql语句进行解析和编译,最终形成执行计划。DDL语句和基于MVCC的老版本数据的回收,也是TiDB Server操作。3.TiKV:数据以键值队存储在TiKV中,主要负责数据持久化、MVCC、Coprocessor、事务以及自身副本的高可用和强一致性(由Muti-raft实现)。4.TiFlash:列式存储引擎,主要由扩展的raft共识算法与Tikv进行数据同步,实现负载均衡、强一致读取和实时更...阅读全文

博文 2024-06-24 17:33:55 Tianyiyun

一文读懂蓝绿发布、A/B 测试和金丝雀发布的优缺点_服务_旧版本_流量

一文读懂蓝绿发布、A/B 测试和金丝雀发布的优缺点 2022-01-06 10:03 来源: 阿里云云栖号 原标题:一文读懂蓝绿发布、A/B 测试和金丝雀发布的优缺点 简介:目前,业界已经总结出了几种常见的服务发布策略来解决版本升级过程中带来的流量有损问题。本文首先会对这些普遍的发布策略进行简单的原理解析,最后结合阿里云的云原生网关对这些发布策略进行实践。 作者 | 扬少 背景 目前,业界已经总结出了几种常见的服务发布策略来解决版本升级过程中带来的流量有损问题。本文首先会对这些普遍的发布策略进行简单的原理解析,最后结合阿里云的云原生网关对这些发布策略进行实践。 发布策略 被业界广泛采用的服务发布策略包括蓝绿发布、A/B 测试以及金丝雀发布。 1、蓝绿发布 蓝绿发布需要对服务的新版本进行冗余部...阅读全文

博文 2024-03-28 10:45:18 www.sohu.com

UE5虚幻引擎汽车HMI设计高级研修课

UE5虚幻引擎汽车HMI设计高级研修课​获课:www.bcwit.top/4553/在UE5(虚幻引擎5)中进行汽车HMI(Human-Machine Interface,车载人机交互)设计,涉及到将虚拟技术与车辆控制系统、显示界面、信息反馈等集成,旨在为驾驶员提供更直观、安全、舒适的用户体验。以下是一个全面的汽车HMI设计过程的概述,涵盖技术要求、UI/UX设计和UE5的具体实现。1.目标与设计原则汽车HMI设计的主要目标是确保驾驶员能够安全、便捷地操作车辆的各种系统,同时尽量减少驾驶时的分心。设计原则包括:易用性:确保界面简洁、直观,符合驾驶员的认知习惯。响应性:确保界面响应快速,反馈清晰。安全性:设计必须遵循安全标准,避免干扰驾驶员的驾驶任务。个性化:根据用户的习惯,提供定制选项。2....阅读全文

博文 2025-01-19 20:49:44 rfgs

【20章全】AI最火Agent实战(打造你代理)

【20章全】AI最火Agent实战(打造你代理) 一、Agent的基本概念 Agent是指能够感知环境并采取行动以影响该环境的实体。在人工智能领域,Agent通常指具有一定智能行为的软件实体,它们可以自主地执行任务,并与外部环境或其他Agent交互。随着大模型的发展,Agent能够利用这些模型的强大能力来完成更为复杂的任务。 常用Agent介绍 自然语言询问数据库Agent 在数据库管理中,我们通过结构化查询语言(SQL)来完成所有操作。SQL是一种专门的语言,用于向计算机明确传达我们从数据库中提取信息或执行操作的需求。这意味着,我们不仅需要掌握这种技术,还要深入了解我们正在处理的数据。 但是现在我们可以通过Agent完成从"人为使用SQL告诉数据库我们想要什么”到“直接告诉数据库我们想要什...阅读全文

博文 2024-09-11 15:58:18 woaidaqipaiqiu1122

6种常用Bean拷贝工具一览|Java 刷题打卡

本文正在参加「Java主题月 - Java 刷题打卡」,详情查看 活动链接 在我们日常的工作中,经常需要做对象的拷贝或转化,例如在传递参数时,把入参的DTO转化为PO存入数据库,在返回前端时把PO再转化为VO。如果再分的细一点,可能还会有DO(Domain Object),TO(Transfer Object) ,BO(business object)等对象,随着业务的划分越来越细,对象的拷贝工作也越来越频繁,所以本文就来梳理一下常用的对象拷贝工具和它们的差异。 常用的工具大概有以下几种: Apache BeanUtils Spring BeanUtils cglib BeanCopier Hutool BeanUtil Mapstruct Dozer 准备工作,创建两个类PO和DTO: @...阅读全文

博文 2024-03-29 14:40:30 掘金

MQ大牛成长课–从0到1手写分布式消息队列中间件(完结)

MQ大牛成长课–从0到1手写分布式消息队列中间件(完结) 获课:www.bcwit.top/5291/ 获取ZY↑↑方打开链接↑↑ 如何吃透分布式MQ框架 要吃透分布式消息队列(MQ)框架,首先需要理解消息队列的基础概念、工作原理以及如何在分布式系统中应用它。以下是一个从基础到进阶的学习路线,可以帮助你全面掌握分布式消息队列框架。 1. 理解消息队列的基础概念 1.1 消息队列(MQ)的基本定义 消息队列(Message Queue, MQ)是一种进程间通信的中间件,它允许应用程序之间通过消息的形式交换信息。消息队列的核心是解耦系统间的依赖关系,使得生产者和消费者可以独立地运行。MQ系统通常支持异步通信,可以提高系统的性能和扩展性。 1.2 MQ的基本概念 生产者:产生消息的应用。 消费者:...阅读全文

log4j2同步日志引发的性能问题

1 问题回顾1.1 问题描述在项目的性能测试中,相关的接口的随着并发数增加,接口的响应时间变长,接口吞吐不再增长,应用的CPU使用率较高。1.2 分析思路谁导致的CPU较高,阻塞接口TPS的增长?接口的响应时间的调用链分布是什么样的,有没有慢的点?1)使用火焰图分析应用的CPU如下,其中log4j2日志占了40%左右CPU,初步怀疑是log4j2的问题。2)调用链的分析通过pfinder查看调用链发现,接口总耗时78ms,没有明显慢的调用方法和慢sql等,先排除接口的本身的代码问题。1.3 初步结论log4j2的问题,需详细分析日志的相关配置log4j2.xml。上面可以看到asyncRollingFile和errorAsynchRollingFile都是打印的同步日志。同步日志是程序的业务...阅读全文

博文 2024-07-08 10:42:54 京东云开发者社区

智榜样-高级网络安全工程师2414期(2024-2025)(湖南网安基地)

​获课:weiranit.fun/14111/获取ZY↑↑方打开链接↑↑智榜样-高级网络安全工程师 2414 期 (2024-2025) (湖南网安基地)一、 项目简介“智榜样-高级网络安全工程师 2414 期”是由湖南网安基地主办,面向全国招生的高级网络安全人才培养项目。项目旨在培养具备扎实理论基础、过硬实战技能和创新思维的高级网络安全工程师,为国家网络安全事业输送优秀人才。二、 培养目标掌握网络安全领域核心理论和技术,包括网络攻防、漏洞挖掘、安全运维、数据安全等。具备独立分析和解决复杂网络安全问题的能力。熟悉网络安全法律法规和行业标准,具备良好的职业道德和社会责任感。具备较强的团队合作精神和沟通能力,能够胜任网络安全团队的核心岗位。三、 培养模式理论学习: 邀请国内外知名网络安全专家授课...阅读全文

LLM算法工程师全能实战营

LLM算法工程师全能实战营获课:www.999it.top/13840/获取ZY↑↑方打开链接↑↑深入理解LLM架构和数据预处理与增强是构建高效、高性能大型语言模型(LLM)的两个关键方面。让我们逐一探讨这两个主题。1. 深入理解LLM架构Transformer及其变体Transformer:由Vaswani等人在2017年提出,是当前大多数LLM的基础架构。它摒弃了传统的RNN/CNN结构,完全依赖于自注意力机制(self-attention),使得模型能够并行化训练,并且在长序列上的表现更好。BERT (Bidirectional Encoder Representations from Transformers):一个双向编码器模型,通过masked language modeling...阅读全文

玩转云端 | 数据库管理“大师”来了!

数字时代,数据成为重要的生产要素。随着企业数据量的爆发式增长,管理和维护庞大的数据集合变得愈发复杂。数据库中存储了企业的核心数据资产,一款安全高效的数据库管理工具必不可少。天翼云数据管理服务(AOne-DMS),不仅能让你的数据库管理工作变得轻松简单,还能保障数据安全无忧! 数据安全 核心坚守安全,一直是数据库管理的重中之重,尤其是在面临管理多云异网数据库时,启用公网访问不仅增加了流量成本,还可能带来安全隐患。天翼云AOne-DMS支持多云异网数据安全管理,可提供“网络+数据”双效安全防护,管理经过AOne网络连接的数据库,并通过精细化的权限管理、操作风险管控、审批流及数据库审计等手段,保障用户数据安全无忧。​​​​全局管理 简化操作多云异网数据库面临的不仅仅是安全问题,日常数据库管理的复杂...阅读全文

博文 2024-05-17 10:55:42 Tianyiyun

安全、高效!天翼云HPFS助企业一臂之力!

近年来,随着各行业数智转型逐步深入以及人工智能大模型的蓬勃发展,气象分析、大模型训练、自动驾驶、石油勘探、EDA仿真、基因分析等高性能计算(HPC)场景和智算场景(AI)不仅对算力需求激增,也产生了图片、视频等大规模非结构性数据,企业在实践中面临着数据量大、存储性能不足等问题,导致训练阻塞、算力利用率低甚至训练中断现象频繁发生。在此背景下,企业需要不断创新和优化存储系统技术架构,以便实现更加高效、可靠和灵活的存储解决方案。作为云服务国家队,天翼云坚持科技创新,不断加快推进数据存储基础设施建设,创新推出并行文件服务HPFS(CT-HPFS,High Performance File Storage),助力企业构建高性能存储底座。天翼云HPFS支持全NVMe闪存和InfiniBand高速网络,并...阅读全文

博文 2024-08-15 16:35:21 Tianyiyun

容器镜像服务:云原生时代的核心基石

本文分享自天翼云开发者社区《容器镜像服务:云原生时代的核心基石》,作者:每日知识小分享随着云计算技术的快速发展,容器化技术已成为应用部署的主流方式。容器镜像服务作为容器技术的重要组成部分,为应用提供了可靠、高效、一致的运行环境。本文将对容器镜像服务的概念、原理、应用场景以及未来发展趋势进行深入探讨,旨在帮助读者更好地理解和应用容器镜像服务。一、容器镜像服务概述容器镜像的概念容器镜像是一个轻量级、可执行的独立软件包,用于创建和运行容器。它包含了应用及其所有依赖项,如库文件、配置文件等,确保应用在任何环境中都能以相同的方式运行。容器镜像采用分层构建的方式,每一层都记录了文件系统的更改,从而提高了镜像的构建和传输效率。容器镜像服务的原理容器镜像服务主要提供镜像的存储、管理和分发功能。它允许用户将构...阅读全文

博文 2024-03-05 13:57:48 Tianyiyun

天翼云发布边缘安全加速平台AccessOne,四大产品能力助力企业安全高速发展

本文分享自天翼云开发者社区《天翼云发布边缘安全加速平台AccessOne,四大产品能力助力企业安全高速发展》,作者:天翼云社区官方账号2023年5月30日全国科技工作者日,以“连接世界从边缘开始”为主题的天翼云边缘安全加速平台发布会在线上顺利举办。会上,天翼云重磅发布边缘安全加速平台AccessOne(后称AccessOne),并深入介绍了产品四大能力,以及在教育行业的实践成果,为企业提供性能、安全、算力等满足不同场景需求的智能边缘网络。应对多重网络应用挑战,一体化服务成优先选择数字化转型进程中,新型产业在改善人们生活质量的同时,也对网络应用服务提出挑战。天翼云智能边缘事业部副总经理鄢智勇指出,首先,越来越多的数据和应用需在离数据源更近的位置进行实时处理和分析,满足对低延迟和高带宽的需求。其...阅读全文

【完结21章附电子书】2024全新GO工程师面试总攻略,助力快速斩获offer

【完结21章附电子书】2024全新GO工程师面试总攻略,助力快速斩获offer GO工程师面试总攻略‌主要包括以下几个方面:基础知识复习、进阶知识掌握、项目经验准备、面试技巧提升、实战演练以及持续学习与社区参与。 一、基础知识复习 Go语言基础:理解Go语言的基本语法,如变量声明、控制结构、函数等。 类型系统:熟悉基本数据类型、复合类型以及类型转换。 并发模型:深入理解goroutine和channel的工作原理及其在并发编程中的应用。 内存管理:了解垃圾回收机制及如何避免内存泄漏。 标准库:熟悉常用的包如fmt、io/ioutil、net/http等,并能灵活运用。 二、进阶知识掌握 错误处理:掌握使用error类型进行错误处理的方法,了解如何优雅地处理程序中的异常情况。 测试:学会编写单...阅读全文

博文 2024-12-25 16:37:56 woaidaqipaiqiu1122

容器的优势,在Docker中运行Tomcat

本文分享自天翼云开发者社区《容器的优势,在Docker中运行Tomcat》,作者:d****e一、容器与虚拟机的区别是什么虚拟机:虚拟机是通过Hypervisor(虚拟机管理系统,常见的有VMWare workstation、VirtualBox),虚拟出网卡、cpu、内存等虚拟硬件,再在其上建立虚拟机,每个虚拟机是个独立的操作系统,拥有自己的系统内核。容器:容器是利用namespace将文件系统、进程、网络、设备等资源进行隔离,利用cgroup对权限、cpu资源进行限制,最终让容器之间互不影响,容器无法影响宿主机。二、Docker的优势运行在容器上的docker的程序,直接使用的都是宿主机的硬件资源,因此在cpu、内存、利用率上,Docker将会在效率上具有更大的优势。Docker直接利用...阅读全文

博文 2024-07-05 17:58:28 Tianyiyun

大数据平台也“云化”?这份改造指南收藏了!

6月19-20日,由中国通信标准化协会主办,中国通信标准化协会大数据技术标准推进委员会(CCSA TC601)承办的首届“数据智能大会”隆重召开。会议期间,天翼云科技有限公司携手中国信息通信研究院云计算与大数据研究所共同发布《大数据平台云化改造实践指南(2024年)》,天翼云智能边缘事业部副总经理、大数据产品线总经理任春德,中国信通院云大所大数据与智能化部主任姜春宇出席发布仪式;天翼云大数据产品线技术专家王小刚对指南进行了系统解读,并介绍了天翼云在大数据平台方面领先的技术能力以及大数据平台云化改造的实践与探索。​《大数据平台云化改造实践指南》正式发布发布改造实践指南引领数据基础设施云化新篇数据作为新型生产要素,已成为发展新质生产力的关键力量,在企业数字化转型进程中扮演着重要角色。大数据平台是...阅读全文

博文 2024-06-27 17:42:25 Tianyiyun

【摄影学堂】机械快门、电子快门、电子前帘快门的区别

当今的许多相机,尤其是无反相机,都可以让您在机械快门和电子快门之间进行选择。有些相机还有第三种选择,称为“电子前帘快门”(EFCS),它是机械快门与电子快门的混合体。每种快门机制都有利有弊,如果您选错了快门方式,可能会影响到图像质量。什么是机械快门?机械快门是静态摄影默认的快门机制。许多旧一些的相机只允许您使用机械快门拍照。机械快门使用物理“快门帘幕”,一般由两个帘幕组成,像舞台“拉幕”一样左右或上下缝隙“划过”,以便于光线照射到传感器中。您可以在图像底部附近看到两个快门帘幕之间的间隙,如下图所示。什么是电子快门?电子快门如今越来越流行,电子快门通过逐行读取相机传感器的数据来工作。一些电影摄影机有一种叫做“全局快门”的东西,它可以同时读取整个传感器,而不是逐行读取,但是,至少目前,这项技术还...阅读全文

博文 2024-11-04 11:37:31 www.360doc.com

Redis缓存异常及解决方案

本文分享自天翼云开发者社区《Redis缓存异常及解决方案》,作者:l****n本文向读者解释了Redis使用过程中,数据不一致、缓存雪崩、缓存击穿和缓存穿透等问题的定义,并给出对应的解决方案。1、数据不一致 一致指的是:缓存中有数据,那么,缓存的数据值需要和数据库中的值相同;缓存中本身没有数据,那么,数据库中的值必须是最新值。不一致如何发生:对于读写缓存来说,写缓存时同步写数据库,需要使用事务保证缓存和数据库的更新具有原子性。弱一致性情况下,可以使用异步写回。对于只读缓存,删改数据需要既更新数据库,又删除缓存。如果不使用事务,就会出现数据不一致。比如先更新数据库,再删除缓存。更新成功,删除缓存失败,则缓存中为旧值。如果先删除缓存再更新数据库,则缓存删除成功,数据库更新失败,再访问数据库,数据...阅读全文

博文 2024-08-16 16:29:52 Tianyiyun

AI Agent智能应用从0到1定制开发(完结)

获课:97java.xyz/5047/获取ZY↑↑方打开链接↑↑标题:AI Agent智能应用从0到1定制开发:全程解析与实战攻略导语:随着人工智能技术的不断发展,AI Agent智能应用已成为企业提高效率、降低成本的重要工具。本文将带领大家了解AI Agent智能应用的定制开发过程,从0到1打造一款专属的智能应用。一、概述AI Agent智能应用,是指利用人工智能技术,模拟人类智能行为,为用户提供个性化、智能化服务的应用。它广泛应用于客服、营销、数据分析等领域。定制开发一款AI Agent智能应用,需要经过以下几个阶段:需求分析技术选型数据准备与处理模型训练与优化应用部署与测试运维与优化下面,我们将逐一介绍这些阶段的具体内容。二、需求分析业务场景梳理:明确AI Agent智能应用要解决的业...阅读全文

博文 2025-01-19 14:44:39 xxmmy

慕K慕网 LLM算法工程师全能实战营

慕K慕网 LLM算法工程师全能实战营 获课:www.999it.top/13840/ 获取ZY↑↑方打开链接↑↑ 掌握大语言模型(LLM)应用开发框架是一个多层次的过程,需要理解从模型架构到应用开发的各个环节。以下是一个完整的框架,涵盖从模型开发、部署到应用场景实现的关键步骤。 1. 理解大语言模型(LLM)的基本原理 大语言模型,如 GPT 系列、BERT、T5 等,是基于 Transformer 架构的深度学习模型。这些模型通常用于自然语言处理任务,如文本生成、文本分类、情感分析、命名实体识别等。 Transformer架构:理解自注意力机制(Self-Attention)、编码器-解码器结构等基础概念。 预训练与微调:模型通常先在大量通用语料上进行预训练,然后在特定任务数据集上进行微调...阅读全文

博文 2025-01-19 18:14:44 qwrt

慕课甄选-2024年Flutter零基础极速入门到进阶实战

获课: 97java. xyz/ 4904/ 慕课甄选 - 2024 年 Flutter 零基础:开启跨平台开发之旅 在移动应用开发的广阔天地中,新技术如雨后春笋般不断涌现。其中,Flutter 凭借其独特的优势,吸引了众多开发者的目光。而慕课甄选推出的 “2024 年 Flutter 零基础极速入门到进阶实战” 课程,更是为渴望踏入 Flutter 开发领域的学习者提供了一条捷径。 Flutter 是由 Google 开发的开源 UI 工具包,它允许开发者使用单一代码库,为 iOS、Android、Web 和桌面平台(Windows、macOS、Linux)创建精美的用户界面。其显著特点包括响应式 UI,能根据用户输入和系统事件动态更新;拥有丰富的组件和布局工具,可创建美观且高度可定制的界...阅读全文

博文 2025-01-24 21:12:46 zsds

解锁Mysql中的JSON数据类型,怎一个爽字了得 - 码农Academy

引言 在实际业务开发中,随着业务的变化,数据的复杂性和多样性不断增加。传统的关系型数据库模型在这种情况下会显得受限,因为它们需要预先定义严格的数据模式,并且通常只能存储具有相同结构的数据。而面对非结构化或半结构化数据的存储和处理需求,选择使用非关系型数据库或者创建子表存储这些变化的结构可能会变得复杂。在这种情况下,我们可以利用MySQL的JSON字段类型来解决这个问题。JSON字段提供了灵活的数据存储方式,能够轻松应对数据结构的变化和动态性,从而更好地满足业务需求。 MySQL5.7.8版本引入了JSON数据类型,允许在数据库表中存储和操作符合JSON格式的数据。这种原生支持JSON(JavaScript对象表示法)的数据类型遵循RFC 7159标准,提供了有效存储复杂、半结构化数据的方式。...阅读全文

博文 2024-07-12 10:22:24 博客园

NestJS从拔高到精通,大型复杂业务架构落地实践

NestJS从拔高到精通,大型复杂业务架构落地实践 获课:itazs.fun/13402/ 获取ZY↑↑方打开链接↑↑ NestJS 是一个用于构建高效、可扩展的服务器端应用程序的框架,它使用 TypeScript 作为主要开发语言,并结合了 Express.js 的优势,提供了模块化的架构和大量的开箱即用的功能。以下是从基础到高级,再到大型复杂业务架构落地实践的全面技术探讨: 基础篇 入门知识: 安装 NestJS 和理解其基本概念,如模块(Modules)、控制器(Controllers)、服务(Services)和提供者(Providers)。 学习 TypeScript 的基础,因为它对于 NestJS 开发至关重要。 核心概念: 掌握 NestJS 的控制反转(IoC)和依赖注入(...阅读全文

博文 2024-12-20 12:01:54 dvfvde

AI全流程落地实战:从设计-开发-测试到运营一站式搞定(完结)

xia仔ke:xingkeit.top/9577/ 引言 人工智能(AI)作为21世纪最重要的技术之一,正在深刻地改变我们的生活、工作和思维方式。从最初的机器学习到现在的深度学习和智能革命,AI的发展历程充满了创新与挑战。本文将探讨AI的发展阶段,重点分析机器学习的关键概念、技术进步,以及它们如何推动智能革命的到来。 1. 人工智能的历史与发展 人工智能的概念可以追溯到20世纪50年代,艾伦·图灵的“图灵测试”成为衡量机器智能的经典标准。随着计算能力的提升和算法的改进,AI经历了几个发展阶段: 早期探索:1940-1960年代,研究人员主要集中在基于规则的专家系统上,这些系统可以处理特定领域的问题。 机器学习的兴起:1970-1990年代,研究者们开始关注如何使机器通过数据学习,而不是依赖手...阅读全文

博文 2025-01-22 22:22:45 www123456

CRISP-DM的应用与理解

本文分享自天翼云开发者社区《CRISP-DM的应用与理解》,作者:吴****嫄CRISP-DM是一个数据挖掘项目规划的开放标准流程框架模型,主要分为业务理解、数据理解、数据准备、建模、评估、部署六个阶段。业务理解从业务的角度理解项目的目标和需求,将业务的目的转换为一个数据挖掘的问题,制定一个初步的实现计划计划。商业理解是明确要达到的业务目标,并将其转化为数据挖掘主题。要从商业角度对业务部门的需求进行理解,并把业务需求的理解转化为数据挖掘的定义,拟定达成业务目标的初步方案。具包括商业背景分析、商业成功标准的确定、形势评估、获得企业资源清单、获得企业的要求和想、评估成本和收益、评估风险和意外、初步理解行业术语,并确定数据挖掘的目标和制定数挖掘计划。在整个CRISP-DM的过程当中,围绕数据为核心...阅读全文

博文 2024-09-02 14:22:25 Tianyiyun

「17章」AI助手Copilot辅助Go+Flutter打造全栈式在线教育系统

「17章」AI助手Copilot辅助Go+Flutter打造全栈式在线教育系统​获课:666it点top/13512/获取ZY↑↑方打开链接↑↑随着互联网技术的迅猛发展和人工智能的不断创新,在线教育已成为教育行业的重要组成部分。然而,传统的在线教育系统面临着技术复杂、开发周期长、用户需求多样化等挑战。为了应对这些挑战,并构建一个高效、稳定且用户体验良好的在线教育平台,越来越多的开发者开始采用现代编程语言和技术栈,并结合AI助手来加速开发进程。本文将探讨如何利用AI助手Copilot结合Go语言和Flutter框架,打造一个全栈式的在线教育系统。一、系统架构设计构建一个全栈式在线教育系统,通常涉及多个技术栈的整合,包括后端开发、前端开发、数据库管理等多个方面。系统的基本功能可以分为用户管理、课...阅读全文

博文 2025-01-10 21:18:59 qwefg

javaagent使用指南 - rickiyang

今天打算写一下 Javaagent,一开始我对它的概念也比较陌生,后来在别人口中听到 字节码插桩,bTrace,Arthas后面才逐渐了解到Java还提供了这么个工具。 JVM启动前静态Instrument Javaagent 是什么? Javaagent是java命令的一个参数。参数 javaagent 可以用于指定一个 jar 包,并且对该 java 包有2个要求: 这个 jar 包的 MANIFEST.MF 文件必须指定 Premain-Class 项。 Premain-Class 指定的那个类必须实现 premain() 方法。 premain 方法,从字面上理解,就是运行在 main 函数之前的的类。当Java 虚拟机启动时,在执行 main 函数之前,JVM 会先运行-javaa...阅读全文

博文 2024-06-24 10:37:14 博客园

AI助手Copilot辅助Go+Flutter打造全栈式在线教育系统

AI助手Copilot辅助Go+Flutter打造全栈式在线教育系统​xia仔ke:itazs.fun/13891/获取ZY↑↑方打开链接↑↑利用Copilot加速:构建基于Go和Flutter的高效在线教育平台在构建基于Go和Flutter的高效在线教育平台时,AI助手Copilot可以显著加速开发进程,提高代码质量和开发效率。以下是一个详细的方案,展示了如何利用Copilot来辅助构建这样的平台。一、平台概述目标是构建一个支持多终端访问(Web、iOS、Android)的在线教育平台,该平台不仅具备课程展示、视频播放、作业提交等功能,还能提供个性化学习路径推荐等智能化服务。二、技术选型前端应用层:使用Flutter进行跨平台移动应用开发,确保一次编码即可在不同设备上运行。Flutter以...阅读全文

博文 2024-12-10 12:45:11 zxcs

独“数”一帜 双证加冕!TeleDB亮相可信数据库发展大会

近日,2024可信数据库发展大会在北京召开,主题为“自主、创新、引领”。大会重磅发布多项中国信通院及中国通信标准化协会大数据技术标准推进委员会(CCSA TC601)在数据库领域最新研究和实践成果。一众数据库领域的专家、学者、创业者汇聚一堂,围绕金融、电信、能源与政务领域的数据库应用创新带来切实的落地经验,分享AI+DB、搜索与分析型数据库、多模数据库、数据库生态、数据库国际化等前沿技术趋势。天翼云数据库产品线首席技术官李跃森在大会发表《天翼云在数据库领域的创新探索和深入实践》演讲,分享了天翼云数据库的发展历程、产品布局、核心优势及生态建设相关情况 。他表示,围绕多云时代、多样化的数据库需求,天翼云TeleDB数据库致力于为企业数据库全栈上云提供一站式服务,帮助用户高效上云、用云,并为客户提...阅读全文

博文 2024-08-01 17:48:35 Tianyiyun

DBA数据库工程师(已完结)

DBA数据库工程师(已完结)​获课:www.999it.top/13241/优秀的数据库管理员(DBA,Database Administrator)在信息技术领域中扮演着至关重要的角色,尤其是在数据成为企业核心资产的今天。一个出色的DBA不仅需要掌握深厚的技术技能,还需要具备良好的沟通能力和业务理解力,以确保数据库系统的稳定、安全和高效运行。以下是优秀DBA的社会地位的一些体现:1.技术权威专业知识:作为数据库专家,DBA拥有对特定数据库管理系统(如Oracle, MySQL, PostgreSQL等)及其相关工具和技术的深入理解。问题解决者:当系统出现问题时,DBA往往是第一个被求助的人,因为他们有能力快速诊断并解决问题。2.业务伙伴战略决策支持:随着数据分析的重要性日益增加,DBA与业...阅读全文

Netty+SpringBoot开发即时通讯系统|ppt齐全|完结无秘15章

Netty+SpringBoot开发即时通讯系统|ppt齐全|完结无秘15章​获课:Netty+SpringBoot开发即时通讯系统|ppt齐全|完结无秘15章获取ZY↑↑方打开链接↑↑在使用Netty与SpringBoot开发即时通讯系统的过程中,企业开发者必须掌握一系列关键技能,以确保系统的稳定性、高效性和安全性。以下是一些核心技能:一、Netty基础与核心组件事件驱动模型理解Netty的事件驱动编程模型,这是Netty高效处理网络连接和I/O操作的基础。Channel和ChannelHandler熟悉Channel接口,它是Netty中与实际数据传输相关的连接。掌握ChannelHandler,它是处理网络事件(如连接、读写等)的关键组件。异步编程掌握Java的CompletableF...阅读全文

博文 2025-02-10 19:34:42 wwee

真实高质量低代码商业项目,前端/后端/运维/管理系统(完结)

真实高质量低代码商业项目,前端/后端/运维/管理系统(完结)​获课:aixuetang.xyz/5050/低代码平台在商业项目中的应用能够极大地提高开发效率,减少技术门槛,帮助团队快速交付应用。对于前端、后端、运维以及管理系统的设计,可以通过低代码平台实现以下几个方面:1.前端部分:低代码平台为前端开发提供了可视化的界面设计工具,开发者可以通过拖拽组件来快速构建用户界面。常见的低代码平台(如OutSystems、Mendix、Appian等)为前端开发提供以下支持:拖拽式界面设计:无需编写大量HTML、CSS和JavaScript代码,通过可视化工具拖动组件并配置属性来构建用户界面。响应式设计:很多低代码平台内建支持响应式布局,能确保应用在不同设备上的良好展示。集成第三方库与组件:可以集成第...阅读全文

Go从入门到进阶,大厂案例全流程实践(完结)

Go从入门到进阶,大厂案例全流程实践(完结)获课:789it.top/5244/Go 从入门到进阶:大厂案例全流程实践Go(又叫 Golang)是一种开源编程语言,因其简洁、高效和并发支持的特性,成为许多大厂和新兴技术公司开发的首选语言之一。下面是从入门到进阶的完整学习路线和实践,包括一些大厂常用的案例和技术栈。一、Go 入门Go 简介Go 的优势: 高效的并发支持(goroutines 和 channels) 简单易用的语法 编译快速,生成独立的二进制文件 丰富的标准库 对大型系统开发非常友好环境搭建在 Go 官方网站 下载并安装 Go。配置 Go 环境变量,确保 GOPATH 和 GOROOT 配置正确。使用 go version 确保 Go 已安装。基本语法变量声明:var x int...阅读全文

博文 2025-02-16 17:33:29 eere

低代码全栈项目实战 商业级海报编辑器全流程落地

低代码全栈项目实战 商业级海报编辑器全流程落地​获课:itazs.fun/5050/获取ZY↑↑方打开链接↑↑编辑器基本布局,及业务组件库初步开发的流程介绍,不要代码在开发编辑器应用时,创建一个合理的基本布局和构建业务组件库是至关重要的步骤。以下是一个高层次的流程介绍,涵盖了从规划到实现的关键阶段,不涉及具体代码:一、编辑器基本布局设计需求分析确定编辑器的目标用户群体及其使用场景。收集功能需求,明确编辑器需要支持的核心操作(如文本编辑、格式化、插入媒体等)。信息架构规划编辑器内部的信息组织方式,包括菜单栏、工具栏、工作区、状态栏等主要区域。决定各个部分之间的层次关系和交互逻辑。界面草图与原型绘制初步的线框图或低保真原型,展示编辑器的整体结构。使用工具(如Figma、Sketch、Adobe ...阅读全文

博文 2024-12-10 12:42:23 zxcs

Flink【环境搭建 01】(flink-1.9.3 集群版安装、配置、验证)

我使用的安装文件是 flink-1.9.3-bin-scala_2.12.tgz ,以下内容均以此版本进行说明。 说明 搭建集群首先要进行集群的规划【哪台做主节点,哪些做从节点】,这里简单搭建一个 3 节点的 Flink Standalone 集群,其中三台主机Flink01、Flink02、Flink03 均为 worker 节点,Flink01 为 master 节点。 1. 配置免密登录【每台服务器】 Flink 组件之间需要基于 SSH 进行通讯。 1.1 配置映射 配置 ip 地址和主机名映射:==很关键==通过ifconfig查询本机的ip地址,这个地方没有配置正确的话节点会有问题。 vim /etc/hosts xxx.xx.x.x flink01 flink01 xxx.xx...阅读全文

博文 2024-10-11 18:01:25 阿里云开发者社区

AI+Go 打造你的智能办公助手

AI+Go 打造你的智能办公助手(同步更新)​​学习AI+Go 打造你的智能办公助手随着人工智能(AI)技术的快速发展,越来越多的企业和个人开始探索如何利用AI技术来提高工作效率,特别是在办公自动化领域。Go语言因其简洁、高效、并发能力强等特点,在后端开发中非常受欢迎,同时也非常适合用来构建高性能的AI应用。本文将介绍如何结合AI技术和Go语言,打造一个个性化的智能办公助手。一、准备工作环境搭建:安装Go环境:访问Go官方网站下载并安装最新版本的Go。安装必要的开发工具:如VSCode、GoLand等IDE,这些工具提供了强大的代码编辑、调试功能。选择AI框架:对于自然语言处理(NLP),可以使用TensorFlow、PyTorch等流行的机器学习框架。虽然这些框架主要是用Python编写的...阅读全文

博文 2024-11-27 16:22:34 asdas

「完结36章」NestJS从拔高到精通,大型复杂业务架构落地实践

「完结36章」NestJS从拔高到精通,大型复杂业务架构落地实践​获课:666it.top/13453/要从基础到精通 NestJS,并在大型复杂业务架构中落地实践,涉及到多个方面的内容。以下是逐步提升的过程,主要通过理论和实践的结合,帮助你更好地理解并应用 NestJS:1.理解NestJS的基本原理与框架特性模块化设计:NestJS 是基于模块化架构的。每个模块代表一个特定功能单元,这使得代码的组织更加清晰且易于管理。在学习初期,理解如何划分模块、定义模块间的关系、如何进行依赖注入等,是非常重要的。依赖注入(DI):NestJS 使用依赖注入的设计模式来管理服务和组件之间的依赖关系。了解它的工作原理有助于你组织代码,减少耦合,提高代码可维护性。装饰器(Decorators):NestJS...阅读全文

博文 2025-01-19 20:49:12 rfgs

React面试宝典

React面试宝典 React 是靠数据驱动视图改变的一种框架,它的核心驱动方法就是用其提供的 setState 方法设置 state 中的数据从而驱动存放在内存中的虚拟 DOM 树的更新。 更新方法就是通过 React 的 Diff 算法比较旧虚拟 DOM 树和新虚拟 DOM 树之间的 Change ,然后批处理这些改变。 React 性能优化的手段 React 中进行性能优化的手段可以从多个维度进行分类,以下是一些关键类别及其对应的优化策略: 1. 组件优化 使用PureComponent或React.memo:对于仅根据props和state改变才重新渲染的组件,使用React.PureComponent或者对其包装一层React.memo,它们都能通过浅比较props来避免不必要的重...阅读全文

博文 2024-10-24 15:15:02 woaidaqipaiqiu1122

容器、容器云和容器化PaaS平台之间到底是什么关系?

本文分享自天翼云开发者社区《容器、容器云和容器化PaaS平台之间到底是什么关系?》,作者:s****n一直都有很多人迷惑于容器应该属于 IaaS 或是 PaaS 层,也搞不清楚容器云到底是该归到哪里,该由哪个团队来建设、哪个团队来维护。K8s 是不是就等同于容器云?所以我们看到概念和定义的混乱,在实施容器云的时候也会有众多的分歧,无所适从。目前又有众多的公司推出容器化 PaaS 的概念,更搞不清楚谁是谁了。那么容器、容器云、容器化 PaaS 以及与 Docker 、 Kubernetes 之间是个什么样的关系?这是需要我们明确并理解的问题。​容器是一种操作系统级虚拟化技术, Docker 是一种容器引擎。使用 Docker 来运行操作容器。但从容器自身来说,其提供的是 IaaS 层能力。Ku...阅读全文

博文 2024-11-05 16:19:39 Tianyiyun

AI全流程落地实战:从设计-开发-测试到运营一站式搞定(完结)

AI全流程落地实战:从设计-开发-测试到运营一站式搞定(完结)​获课:www.999it.top/5285/AI全流程落地实战:从设计-开发-测试到运营一站式搞定随着人工智能技术的不断进步,越来越多的行业和企业开始在业务中引入AI,以提升效率、优化决策和创造新的商业价值。然而,将AI技术从理论落地到实际应用并非易事。本文将详细讲解AI项目从设计到开发、测试再到运营的全流程,帮助企业更好地掌握AI项目的实施路径,做到一站式搞定。1. 设计阶段:明确目标与需求AI项目的成功与否,首先取决于设计阶段的准备工作。无论是语音识别、图像处理、推荐系统还是自然语言处理,设计阶段的核心任务是明确项目目标与需求,确保团队理解问题的本质。1.1 需求分析与场景选择在设计阶段,首先需要与业务团队沟通,深入了解公司...阅读全文

2024 Java 高分面试宝典 一站式搞定技术面&项目面【完结】

2024 Java 高分面试宝典 一站式搞定技术面&项目面【完结】​获课:aixuetang.xyz/5297/获取ZY↑↑方打开链接↑↑Spring 框架是一个非常流行的企业级 Java 应用程序开发框架,它提供了一个全面的编程和配置模型,支持多种不同的应用程序类型(如 web 应用、企业应用、微服务等)。Spring 的核心思想是将企业级应用开发中的复杂性减少,并提供松耦合的架构。接下来将详细介绍 Spring 框架的各个核心部分及其常见的应用。1.Spring 框架概述Spring 是一个开源框架,旨在简化 Java 企业应用程序的开发。它的设计理念是通过依赖注入(DI)和面向切面编程(AOP)来管理应用程序的对象和事务,从而减少代码的复杂性,并提高应用的可扩展性和维护性。Spring...阅读全文

博文 2025-01-19 20:48:17 rfgs

DBA数据库工程师

DBA数据库工程师 获课地址:itazs.fun/13241/ 获取ZY↑↑方打开链接↑↑ DBA(数据库管理员)和数据库工程师是两个密切相关但有所区别的职业。以下是对这两个角色的探讨: DBA(数据库管理员) DBA主要负责管理和维护数据库管理系统(DBMS),属于运维工程师的一个分支。他们的工作职责包括但不限于: 数据库设计:确定数据库的需求、建立数据库模型、定义表结构、数据字典设计以及性能优化。 安装和升级:安装和升级数据库服务器,以及应用程序工具。 存储管理:熟悉数据库系统的存储结构,预测未来的存储需求,制订数据库的存储方案。 安全性和权限管理:控制和监控用户对数据库的存取访问,制定合理的用户权限和角色管理策略,以确保数据库的安全性。 备份和恢复:负责定义和实施适当的数据库备份和恢复...阅读全文

完结12章]AI Agent智能应用从0到1定制开发

获课:yinheit.xyz5047AI Agent 智能应用从 0 到 1 定制开发(完结 12 章)第一章:AI Agent 概念与价值认知在数字化浪潮席卷全球的当下,AI Agent 作为人工智能领域的新兴力量,正逐渐成为改变行业格局的关键因素。AI Agent 是一种能够感知环境、自主决策并执行任务的智能实体,它具备学习、推理和适应能力,可模拟人类的思维与行为模式,在复杂环境中高效完成特定任务。从应用场景来看,AI Agent 在智能客服、智能办公、智能家居、医疗诊断等多个领域都展现出了巨大的价值。以智能客服为例,AI Agent 可以 7×24 小时不间断工作,快速准确地回答用户的常见问题,处理大量咨询请求,极大地提高了服务效率,降低了企业的人力成本。通过对这一概念和价值的深入剖析...阅读全文

博文 2025-05-29 07:48:45 Yhhyx153

小谈容灾备份

本文分享自天翼云开发者社区《小谈容灾备份》,作者:胡****静一.容灾分类从其对系统的保护程度来分,可以将容灾系统分为:数据容灾和应用容灾 1.数据容灾数据容灾,指建立一个异地的数据系统,该系统是本地关键应用数据的一个可用复制。在本地数据及整个应用系统出现灾难时,系统至少在异地保存有一份可用的关键业务的数据。该数据可以是与本地生产数据的完全实时复制,也可以比本地数据略微落后,但一定是可用的。采用的主要技术是数据备份和数据复制技术。数据容灾技术,又称为异地数据复制技术,按照其实现的技术方式来说,主要可以分为同步传输方式和异步传输方式(各厂商在技术用语上可能有所不同),另外,也有如“半同步”这样的方式。半同步传输方式基本与同步传输方式相同,只是在Read占I/O比重比较大时,相对同步传输方式,可...阅读全文

Springboot3+Vue3实现副业(创业)智能语音项目开发-mk

Springboot3+Vue3实现副业(创业)智能语音项目开发(完结)​获课:itazs.fun/5303/获取资源:上方URL获取资源使用Spring Boot 3 + Vue 3 实现副业(创业)智能语音项目开发随着人工智能技术的飞速发展,智能语音助手已成为许多企业和个人创业者的新宠。本文将详细介绍如何使用Spring Boot 3和Vue 3构建一个智能语音项目,涵盖从项目设计到开发、测试和部署的全过程。1. 项目概述1.1 项目背景智能语音助手可以帮助用户通过语音指令完成各种任务,如查询天气、播放音乐、设置闹钟等。该项目的目标是开发一个基于Web的智能语音助手,用户可以通过语音与助手互动,获取所需的信息和服务。1.2 技术栈后端:Spring Boot 3前端:Vue 3语音识别:...阅读全文

博文 2024-12-02 08:02:09 asdas

Django 小程序打造微信小程序助手 完结

以下是使用 Django + 小程序技术打造微信小程序助手的一般步骤:获取ZY↑↑方打开链接↑↑获课:keyouit.xyz/1424/Django 环境:安装 Python,建议使用 Python 3.6 及以上版本。通过pip安装 Django 框架,如pip install django。选择合适的数据库,如 MySQL、PostgreSQL 等,并安装相应的 Python 数据库驱动。创建项目:在命令行中,使用django-admin startproject project_name命令创建 Django 项目,其中project_name为项目名称。用户模型:包含用户 ID、用户名、密码、手机号、邮箱等字段。定义视图函数:在 Django 应用的views.py文件中,定义处理微...阅读全文

博文 2025-03-11 10:33:57 huo1234567