精彩博客

激活数据价值,探究DataOps下的数据架构及其实践丨DTVision开发治理篇

必威体育app手机版据中国信通院发布,2012年到2021年10年间,我国数字经济规模由12万亿元增长到45.5万亿元,在整个GDP中的比重由21.6%提升至39.8%。顺应时代发展新趋势,“数据”成为新的生产要素已是毋庸置疑...

今天 10:51
229
0
源码学习之MyBatis的底层查询原理

导读 本文通过MyBatis一个低版本的bug(3.4.5之前的版本)入手,分析MyBatis的一次完整的查询流程,从配置文件的解析到一个查询的完整执行过程详细解读MyBatis的一次查询流程,通过本文可以详...

今天 10:01
1.1K
1
Apache Kyuubi 高可用的云原生实现

本文作者为中国移动云能力中心大数据团队软件开发工程师洪冬冬,文章主要介绍了 Apache Kyuubi 基于 Apache ZooKeeper 实现高可用的原理,以及在云原生场景下,利用现有的组件和技术实现云原...

今天 09:24
479
0
从Model-Centric到Data-Centric,MLOps帮助AI多快好省的落地

必威体育app手机版1. 从Model-Centric到Data-Centric   近年来在国际国内的人工智能研究和应用上出现明显的趋势即AI应用对于模型和算法的提升目前达到一个瓶颈,目前正在从传统的Model-centric(即以模型为中...

昨天 18:44
1.2K
1
深度解读7个场景,破解研发效能障碍

必威体育app手机版伴随着数字化与信息化的发展,研发效能和降本增效日渐成为企业管理焦点。尤其对于研发型团队而言,快速地、保质保量地交付价值是优先级最高的任务,但在实际的开发过程中,我们总会遇到技术债...

昨天 16:51
770
0
TAP 文章系列-13 | 基于 Knative 的 TAP 云原生运行时

必威体育app手机版当前CNCF主导的云原生以及相应生态发展如火如荼,企业IT和研发部门都在花大力气尝试通过K8S进行微服务应用的部署、编排和生命周期的管理,进而解放开发和运维,使开发者真正聚焦在业务代码的...

昨天 16:47
280
0
分享一次查找GfxDriver内存暴涨的经历

前言 网上有很多有关内存的优秀文章(比如《Unity游戏内存分布概览》),看完后收益颇多,总感觉对内存(比如PSS的分布)已经了如指掌。直到最近遇到游戏中播放奥义导致GfxDriver内存暴涨500...

昨天 15:41
212
0
得物基于 StarRocks 的 OLAP 需求实践

1. 什么是 StarRocks 新一代极速全场景MPP数据库,可以用 StarRocks 来支持多种数据分析场景的极速分析; 架构简洁,采用了全面向量化引擎,并配备全新设计的 CBO 优化器,查询速度(尤其是多...

昨天 11:36
622
0
58 同城一键部署运维架构的实践 - 集群搭配管理平台多场景降本增效

>>>> 图计算业务背景介绍 我们为什么选择 NebulaGraph? 在公司各个业务线中,有不少部门都有着关系分析等图探索场景,随着业务发展,相关的需求越来越多。大量需求使用多模数据库来实现,开...

昨天 10:28
1.8K
2
爱番番企业查询结果优化实践

作者 | summer 导读:爱番番企业查询汇集了全网2亿+企业多维度全方位信息,使用开源全文搜索引擎Elasticsearch(下文简称ES)作为搜索平台,致力于让用户更快更准的找到所需企业,但怎样能让...

昨天 10:20
1.5K
0
干货分享 | HZERO系列组件之数据分发组件(三),自定义代码处理

必威体育app手机版前面我们讲了利用数据分发,如何把数据同步到ElasticSearch,利用ElasticSearch优秀的查询性能轻松支撑千万级别数据量的查询,同时也有一个点:将数据聚合至一处,Join查询字段做字段冗余,订...

昨天 10:16
158
0
Optional源码解析与实践

必威体育app手机版1 导读 NullPointerException在开发过程中经常遇到,稍有不慎小BUG就出现了,如果避免这个问题呢,Optional就是专门解决这个问题的类,那么Optional如何使用呢?让我们一起探索一下吧! 2 源...

昨天 10:10
1.7K
0
图片、视频、DNA序列……非结构化数据井喷,新技术风向标在哪?

必威体育app手机版万物互联的今天,数据井喷,数据类型也不断增长,其中包括图片、视频、分子结构等在内的非结构化数据暴涨。根据 IDC 预测,到 2025 年,中国数据总量预计增加至 48.6ZB,独占全球份额的 27.8...

昨天 10:06
7.9K
0
Longhorn 的正确使用姿势:如何处理增量 replica 与其中的 snapshot/backup

作者简介 吴硕,SUSE Senior Software Development Engineer,已为 Longhorn 项目工作近四年,是项目 maintainer 之一。 本文将介绍 Longhorn 的基本功能和架构,replica 和 backup 这两个最...

昨天 08:30
365
0
Python办公实战!​按姓名拆分Excel为单独文件,微信自动发给相应联系人

大家好,这里是Python程序员晚枫,今天给大家分享一篇读者的来稿:Python + Excel自动化办公,在工作中的实际应用。 欢迎大家总结pip install python-office的使用经验,联系我投稿哟~ 一、前...

前天 22:09
453
1
WPS二次开发之加载项(一)

官方对WPS加载项的解释: WPS 加载项是一套基于 Web 技术用来扩展 WPS 应用程序的解决方案。每个 WPS 加载项都对应打开了一个网页,并通过调用网页中 JavaScript 方法来完成其功能逻辑。 WP...

前天 17:25
737
0
分布式系统中自适应统计信息收集策略

开务数据库(原:云溪数据库)始终坚持在产学研合作领域的创新发展,通过建立校企联合实验室,针对国家和行业的重大需求,致力于攻克数据库技术难题。 如果你对数据库核心技术、前沿科学研究等...

前天 16:27
396
0
HashMap源码,看我这篇就够了

HashMap源码深度剖析 * HashMap底层数据结构(为什么引入红黑树、存储数据的过程、哈希碰撞相关问题) * HashMap成员变量(初始化容量是多少、负载因子、数组长度为什么是2的n次幂) * HashMap扩...

前天 14:23
1K
0
DophineSheduler上下游任务之间动态传参案例及易错点总结

必威体育app手机版作者简介 淡丹 数仓开发工程师 5年数仓开发经验,目前主要负责百得利MOBY新车业务 二手车业务及售后服务业务系统数仓建设 业务需求 在ETL任务之间调度时,我们有的时候会需要将上游的计算结果...

前天 11:46
756
0
助力字节降本增效,大规模企业级 HTTP 框架 Hertz 设计实践

日前,字节跳动技术社区 ByteTech 举办的第七期字节跳动技术沙龙圆满落幕,本期沙龙以《字节高性能开源微服务框架:CloudWeGo》为主题。在沙龙中,字节跳动字节跳动基础架构服务框架资深研发...

前天 11:23
2.1K
0

没有更多内容

必威体育app手机版加载失败,请刷新页面

Dubbo 泛化调用在vivo统一配置系统的应用

作者:vivo 互联网服务器团队- Wang Fei、LinYupan Dubbo泛化调用特性可以在不依赖服务接口API包的场景中发起远程调用, 这种特性特别适合框架集成和网关类应用开发。 本文结合在实际开发过程...

09/27 10:05
4.2K
1
语雀桌面端技术架构实践

作者:易芝林(维骏) 语雀桌面端作为语雀为用户提供的生产力工具,上线两年多来一直保持高频的迭代和健康的业务增长。本次主要介绍我们在做桌面端时的一些技术架构思考和实践,同时也将分享我...

09/22 15:09
1W
2
日均数亿推送稳定性监控实践

必威体育app手机版前言: 得物消息中心每天推送数亿消息给得物用户,每天引导数百万的有效用户点击,为得物App提供了强大,高效且低成本的用户触达渠道。这么庞大的系统,如何去监控系统的稳定性,保证故障尽早...

09/21 16:17
7K
3
Seata AT 模式代码级详解

文| 刘月财 seata-go 项目负责人 北京小桔科技有限公司【滴滴】开发工程师 赵新(花名:于雨 ) 蚂蚁集团 Seata 项目开源负责人 本文5343字 阅读 14分钟 背景 Seata 四种事务模式中,AT 事务...

09/21 15:18
5.7K
3
Redis数据倾斜与JD开源hotkey源码分析揭秘

必威体育app手机版1 前言 之前旁边的小伙伴问我热点数据相关问题,在给他粗略地讲解一波redis数据倾斜的案例之后,自己也顺道回顾了一些关于热点数据处理的方法论,同时也想起去年所学习JD开源项目hotkey——专...

09/20 10:22
5.5K
3
社区收藏缓存设计重构实战

原创 Sky 得物技术 一、背景 社区收藏业务是一个典型的读多写少的场景,社区各种核心Feeds流都需要依赖用户是否收藏的数据判断,早期缓存设计时由于流量不是很大,未体现出明显的问题,近期通...

09/16 17:25
7K
3
一步步搞懂MySQL元数据锁(MDL)

必威体育app手机版某日,路上收到用户咨询,为了清除空间,想删除某200多G大表数据,且已经确认此表不再有业务访问,于是执行了一条命令‘delete from bigtable’,但好长时间也没删完,经过咨询后,获知drop ...

09/16 10:58
7.7K
3
类型体操的9种类型运算、4种类型套路总结

今天给大家分享的主题是一起来做类型体操。 主要分为 4 个部分进行介绍: 类型体操的背景,通过背景了解为什么要在项目中加入类型体操; 了解类型体操的主要类型、运算逻辑、和类型套路; 类...

09/15 18:00
4.3K
0
爬虫与反爬虫技术简介

必威体育app手机版vivo 互联网安全团队- Xie Peng 互联网的大数据时代的来临,网络爬虫也成了互联网中一个重要行业,它是一种自动获取网页数据信息的爬虫程序,是网站搜索引擎的重要组成部分。通过爬虫,可以获...

09/14 20:59
1.6W
12
高性能 Java 计算服务的性能调优实战

作者:vivo 互联网服务器团队- Chen Dongxing、Li Haoxuan、Chen Jinxia 随着业务的日渐复杂,性能优化俨然成为了每一位技术人的必修课。性能优化从何着手?如何从问题表象定位到性能瓶颈?如...

09/14 20:59
9.9K
9
云上OLAP引擎查询性能评估框架:设计与实现

必威体育app手机版作者:南京大学顾荣、吴侗雨 背景 公有云是一种为用户提供经济方便的计算资源的平台。随着云计算技术的快速发展,以及大数据查询需求的日益增加,很多公有云的云计算应用市场中,出现了越来越...

09/14 11:36
4.7K
1
里程碑!用自己的编程语言实现了一个网站

前言 在上一篇《终于实现了一门属于自己的编程语言》 介绍了自己写的编程语言 GScript ,在文中提到希望最终可以使用 GScript 开发一个网站。 到目前为止确实是做到了,必威体育app手机版地址: http://...

09/14 06:28
9.6K
2
详谈 MySQL 8.0 原子 DDL 原理

柯煜昌 青云科技研发顾问级工程师 目前从事 RadonDB 容器化研发,华中科技大学研究生毕业,有多年的数据库内核开发经验。 文章字数 3800+,阅读时间 15 分钟 背景 MySQL 5.7 的字典信息保存在...

09/13 14:22
9.2K
4
从负载均衡到路由,微服务应用现场一键到位

作者:屿山、十眠 微服务体系架构中,服务之间的依赖关系错综复杂,我们往往会使用负载均衡组件配合注册中心来实现服务间的感知。而这种感知行为需要调用方、负载均衡组件、注册中心、被调用...

09/13 10:49
7.2K
1
Flink 流批一体在字节跳动的探索与实践

必威体育app手机版背景 字节跳动旗下拥有今日头条、抖音等多款产品,每天服务着数亿用户,由此产生的数据量和计算量也是很大的: EB 级别海量的存储空间 每天平均 70PB 数据的增量 每秒钟百万次数的实时推荐请...

从系统架构分析安全问题及应对措施

必威体育app手机版在日常生产生活中,我们常说,“安全第一”、“安全无小事”。围绕着安全问题,在各行各业都有对各类常见安全问题的解决方案和突发安全问题的应急预案。在互联网、软件开发领域,我们日常工作...

09/07 11:06
4.1K
1
终于实现了一门属于自己的编程语言

前言 都说程序员的三大浪漫是:操作系统、编译原理、图形学;最后的图形学确实是特定的专业领域,我们几乎接触不到,所以对我来说换成网络更合适一些,最后再加上一个数据库。 这四项技术如果...

09/07 01:09
1.1W
10
Rust 的错误信息输出原理概述

作者:宗喆@KusionStack开发组 原文:http://mp.weixin.qq.com/s/eGS95WGU814RdD6Vs3J6yQ 1. 背景 最近在参与 KusionStack 内置的领域语言 —— KCL 配置语言编译器 的开发,需要开发编译器...

09/06 18:21
5.2K
0
【云原生 】Kubernetes(k8s)标签详解

文章目录 前言 一、什么是Kubernetes标签 二、设计标签的目的 三、标签的语法 四、标签选择运算符 五、标签的使用 前言 我们知道使用pod控制器创建的pod,在pod故障以后重建后的pod ip地址和...

09/02 09:35
4.1K
0
虚拟机内存管理之内存分配器

必威体育app手机版小编:本文由 WebInfra 团队姚忠孝、杨文明、张地编写。意在通过深入剖析常用的内存分配器的关键实现,以理解虚拟机动态内存管理的设计哲学,并为实现虚拟机高效的内存管理提供指引。 在现代...

09/01 16:10
5.4K
1

没有更多内容

加载失败,请刷新页面

返回顶部
顶部