在大规模数据存储中,实现索引查询也是一个重难点,由于树节点存储的元素数量有限,因此就会导致在应用二叉搜索树结构时,会因为树深度过大而造成磁盘I/O读写过于频繁,进而导致查询效率低下。那不同的索引区别在哪里?时序数据库(TimeSeriesDatabase)又应该如何选择索引方式实现科学的数据结构?本文将以 TDengine 为例为大家展开分析。 B树、B+树、LSM树 B树即平衡多路查找树,也称为B-树。通常我们描述一棵B树时需要指定它的阶数,阶数表示一个节点最多有多少个孩子节点,一般用字母m表示阶数。当m取2时,就是我们常见的二叉搜索树。B树是一种自平衡树状数据结构,...

在烟草工业场景里,多数设备的自动控制都是通过PLC可编程逻辑控制器来实现的,PLC再将采集的数据汇聚至OPC服务器。传统的PISystem、实时数据库、组态软件等与OPC相连,提供分析、可视化、报警等功能,这类系统存在一些问题: 收费是按照测点数进行的,价格昂贵,而且需要有商务谈判才能开始PoC,无法在购买决策前做足够的验证测试工作; 系统封闭,如果想集成一个新的BI、AI或可视化工具,需要原厂商的支持,十分困难; 数据的实时分发、分享功能薄弱; 架构落后,往往基于Windows,部署维护十分复杂。 TDengine 恰恰能够解决这几方面的问题。作为高性能、分布式的物联网、工业大...

近日,北京涛思数据科技有限公司(以下简称“涛思数据”)与山东胜软科技股份有限公司(以下简称“胜软科技”)于山东东营签署战略合作协议。双方围绕石油行业数字化转型趋势,合力打造石油行业数字化转型解决方案进行深入探讨与交流。 涛思数据商业化总裁&联合创始人李广、生态渠道总监郭浩、解决方案专家刘溢清一行与胜软科技总裁张皓、副总裁蔡晓蕾、智能油气事业部总经理周涛、资深技术专家王杭州举行会议签约仪式,并一同参观胜软创新中心。 合作共赢,驱动石油、能源企业数字化转型 胜软科技成立于2002年,是一家致力于为能源企业及政企客户提供战略规划、方案设计、软件开发实施、系统集成运维服务的高新技术...

近日,BenchCouncil(国际测试委员会)公布了“世界首个开源贡献榜”,该榜单号称“只以贡献分高下”。值得一提的是,涛思数据、TDengine 上榜BenchCouncil发布的开源计算机系统机构榜、成果榜,TDengine创始人&核心开发陶建辉(JeffTao)也入选了开源系统贡献榜。 据了解,该榜单是由BenchCouncil(国际测试委员会)邀请了多位独立科学家,从20世纪60年代至今的开源或对开源产生重要影响的成果中,遴选出了145项代表性成果,在确定主要贡献者的基础上产生了开源领域五十年成果榜、机构榜、人才榜。其中人才榜共264人...

在云计算、物联网、5G等新兴技术快速发展的当下,制造企业想要运用新兴技术实现数字化转型,工业互联网平台的应用和打造是非常关键的转型要素。在工业互联网平台的发展中,数据处理上存在的问题一直都是令企业所头疼的,越来越多的案例证明,在物联网场景下,面对庞大的时序数据处理需求,Oracle、PostgreSQL等传统关系型数据库越来越吃力。目前国内外主流工业互联网平台几乎都已经采用[时序数据库]),来承接海量涌入的工业数据。 近日,涛思数据与中国恩菲完成兼容互认证工作,经双方共同严格测试,涛思数据旗下高性能、分布式的物联网、工业大数据平台[TDengine]V3.0与中国恩菲旗下工业互联网平台完成产品...

介绍 TDengine™是一种开源的云原生时序数据库(TimeSeriesDatabase,TSDB),专为物联网(IoT)、连接汽车和工业物联网进行了优化。它能够高效地实时摄取、处理和监控一天内由数十亿个传感器和数据收集器产生的PB级别的数据。许多用户将由物联网设备、汽车或IT基础设施生成的海量数据实时存储到TDengine中,并使用标准的SQL命令从TDengine中查询数据。TDengine支持过滤、分组、窗口、连接和许多聚合函数以查询数据,帮助用户根据其目的查询数据。许多用户也希望更深入地了解现有数据。例如,根据当前趋势,未来将会发生什么情况?随着AI时代的到来,最近出现了许多新技术或...

  Fwpsa1GdkMP8   2023年11月13日   17   0   0 数据html/xmlpython

当前,全球数字经济加速发展,数据正在成为重组全球要素资源、重塑全球经济结构、改变全球竞争格局的关键力量。数据库作为存储与处理数据的关键技术,在数字经济大浪潮下,全球数据库产业中新技术、新业态、新模式不断涌现。7月4日,由中国通信标准化协会和中国信息通信研究院主办,大数据技术标准推进委员会承办,InfoQ联合主办的“2023可信数据库发展大会”在北京国际会议中心隆重召开。大会发布多项中国信通院及相关机构在数据库领域的研究成果,助力我国数据库产业高质量发展。TDengine创始人&核心研发陶建辉在本次大会“产品创新”分论坛下,受邀进行了题为《不只是时序数据库,而是一个极简时序数据平台》主题...

  Fwpsa1GdkMP8   2023年11月13日   21   0   0 数据库时序数据库大数据

2023年7月4日6日,由中国石油和化学工业联合会主办,中国石油油气和新能源分公司、中国石化油田勘探开发事业部、中国海洋石油有限公司勘探开发部协办的“中国油气田企业智慧油田技术交流大会”在北京市召开。本次大会邀请了中国石油、中国石化、中国海油、延长石油等集团公司油气田企业主管领导及行业专家参加会议,结合中国油气田企业数字化转型、智能化发展进程,系统总结智能油田智慧油田建设的成功经验,深入探讨影响智慧油田建设的全局性关键问题,广泛分享数字化智能化技术赋能油气田智能操控智能研究、智能运行、智能决策等优秀解决方案。作为国内外时序数据库(TimeSeriesDatabase)的优秀代表,随着产品的不断...

  Fwpsa1GdkMP8   2023年11月13日   29   0   0 时序数据库数据处理解决方案

大家都知道:由于单机数据库在数据规模、并发访问量等方面存在瓶颈,无法满足大规模应用的需求。因此才有了把数据切割分片,分布存储分布处理在多个节点上的数据库,也就是分布式数据库的由来。而为了实现数据库的高可用,又有了多副本的概念,副本之间的数据需要用特定算法保持一致,从而可以随时切换身份对外提供高可用服务——TDengine就是一款这样的分布式时序数据库(TimeSeriesDatabase)。选择什么样的一致性或者共识算法,可以直接代表一款数据库的产品思路。 一.WhyRAFT 在3.0之前,结合时序数据的十大特点(《我为何要开发一个专用的物联网大数据平台,还开源它?》),我们针对性地创造了多项...

  Fwpsa1GdkMP8   2023年11月13日   20   0   0 数据数据库高可用

小T导读:为满足地震预警数据存储、检索和处理的建设与集成需求,以及响应国家国产软件自主可控的号召,中国地震台网中心决定选用国产数据库TDengine来存储和处理地震波形数据。本文将针对TDengine3.0在地震领域的应用展开详细讲解。 关于企业: 中国地震台网中心是作为中国地震局直属的公益一类事业单位,是我国防震减灾工作的业务枢纽和国际交流窗口,是地震监测预报预警、应急响应和信息化工作的国家级业务中心。 项目背景 近年,随着国家对防震减灾要求不断提高,我国先后实施了多个大型地震监测工程项目。随着地震台站密集建设,台站仪器采集汇入中国地震台网中心的地震波形数据也增长了一个数量级。 地震波形数据...

  Fwpsa1GdkMP8   2023年11月12日   21   0   0 数据库数据数据库数据SQLSQL

自3.0版本发布以来,在研发人员和社区用户的不断努力下,TDengine做了大量更新,产品稳定性和易用性也在不断提升。近日,TDengine3.2.0.0成功发布,本文将向大家简单介绍一下该版本涉及到的重大更新。 开源的时序数据库功能更新(所有版本同步更新): 1、查询性能优化: 优化partitionby普通列的查询性能,大幅增加需要分组数较多时的查询性能。该优化通过关键字Hints实现,具体用法可以参考官方文档。 https://docs.taosdata.com/taos-sql/select/hints 优化partitionby普通列+slimit查询性能,该优化不需用户配置。 2、...

近日,北京涛思数据科技有限公司(以下简称“涛思数据”)与山东胜软科技股份有限公司(以下简称“胜软科技”)于山东东营签署战略合作协议。双方围绕石油行业数字化转型趋势,合力打造石油行业数字化转型解决方案进行深入探讨与交流。 涛思数据商业化总裁&联合创始人李广、生态渠道总监郭浩、解决方案专家刘溢清一行与胜软科技总裁张皓、副总裁蔡晓蕾、智能油气事业部总经理周涛、资深技术专家王杭州举行会议签约仪式,并一同参观胜软创新中心。 合作共赢,驱动石油、能源企业数字化转型 胜软科技成立于2002年,是一家致力于为能源企业及政企客户提供战略规划、方案设计、软件开发实施、系统集成运维服务的高新技术企业,业务...

10月26日-28日,2023年度中国计算机大会(CNCC2023)在沈阳新世界博览馆成功举办,本届大会以“发展数字基础设施,支撑数字中国建设”作为会议主题,参会规模头一次达到上万人。本届CNCC组织了19个特邀报告、3场大会论坛、130场技术论坛、20余场专题活动和100多个科技成果展示等,涵盖人工智能、安全、计算+、软件工程、教育、网络、芯片、云计算等30余个领域,旨在全方位、多角度为与会者诠释数字技术的发展脉络与强大力量,推进企业数字化、数智化转型的加速落地。 作为国内外大数据平台的优秀代表,TDengine在不断迭代和技术更新下,产品实力和生态建设都在迅速发展,在应对海量时序数据处理上...

在烟草工业场景里,多数设备的自动控制都是通过PLC可编程逻辑控制器来实现的,PLC再将采集的数据汇聚至OPC服务器。传统的PISystem、实时数据库、组态软件等与OPC相连,提供分析、可视化、报警等功能,这类系统存在一些问题: 收费是按照测点数进行的,价格昂贵,而且需要有商务谈判才能开始PoC,无法在购买决策前做足够的验证测试工作; 系统封闭,如果想集成一个新的BI、AI或可视化工具,需要原厂商的支持,十分困难; 数据的实时分发、分享功能薄弱; 架构落后,往往基于Windows,部署维护还十分复杂。 借助TDengine3.0云服务或TDengineEnterprise(企业版),上述问...

PERCENTILE函数用于统计表中某列的值百分位数,某一百分位所对应数据的值就称为这一百分位的百分位数,比如90%的分位数的值,代表有90%的数小于该分位数的值,10%的数大于该分位数的值。0和100也就相当于集合的最小值跟最大值。在具体业务中,我们经常用这一函数来衡量服务响应延迟,以最常用的p99为例,它衡量了99%的情况下能达到的最大延迟,99%的请求都低于这个数值,即绝大多数情况下的最差情况。 今天我们为大家分享一个关于TDengine在PERCENTILE函数性能优化上的真实案例。 麦当劳中国 这一案例主角是麦当劳中国,其在运维领域用TDengine来存储服务器监控相关数据,目前麦当...

在烟草工业场景里,多数设备的自动控制都是通过PLC可编程逻辑控制器来实现的,PLC再将采集的数据汇聚至OPC服务器。传统的PISystem、实时数据库、组态软件等与OPC相连,提供分析、可视化、报警等功能,这类系统存在一些问题: 收费是按照测点数进行的,价格昂贵,而且需要有商务谈判才能开始PoC,无法在购买决策前做足够的验证测试工作; 系统封闭,如果想集成一个新的BI、AI或可视化工具,需要原厂商的支持,十分困难; 数据的实时分发、分享功能薄弱; 架构落后,往往基于Windows,部署维护十分复杂。 TDengine恰恰能够解决这几方面的问题。作为高性能、分布式的物联网、工业大数据平台,T...

作为一款在Java开发社区中广受欢迎的技术框架,SpringBoot在开发者和企业的具体实践中应用广泛。具体来说,它是一个用于构建基于Java的Web应用程序和微服务的框架,通过简化开发流程、提供约定大于配置的原则以及集成大量常用库和组件,SpringBoot能够帮助开发者更快速、更高效地构建应用程序。 为了帮助开发者更好地进行SpringBoot的开发,避免开发盲点,我们将TDengine资深研发所做的内部分享——《SpringBoot多语言支持方案》进行了相关整理,给到有需要的开发者参考。 添加依赖 首先,SpringBoot作为一个强大的Java开发脚手架工具框架,已经提供了多语言定义、...

  Fwpsa1GdkMP8   2023年11月02日   40   0   0 TDenginetdenginespringbootspringboot

关于采访嘉宾 在关胜亮的学生时代,“神童”这个称号如影随形,很多人初听时会觉得这个称谓略显夸张,有些人还会认为这是不是就是一种调侃,但是如果你听说过他的经历,就会理解这一称号的意义所在了。 受到教师母亲的影响,关胜亮从记事起就“长”在了教室后排,提前开启了启蒙教育,这也使得他在四周岁直接就读了一年级。尽管所在村庄的教育条件非常有限,他仍然凭借着优异的成绩,在16周岁就进入了中国科学技术大学化学物理系,并拿到学校和政府合计13000元的助学奖金。要知道,2001年时科大和清北差距并不大,在关胜亮所在的吉林省被并称为“三校”。更有意义的是,他的求学故事给家乡燃起了一把希望之火,让教育观念薄弱的村里...

基于第三方基准性能测试平台TSBS(TimeSeriesBenchmarkSuite)标准数据集,TDengine团队分别就TSBS指定的DevOps中cpu-only五个场景,对时序数据库(TimeSeriesDatabase,TSDB)TimescaleDB和TDengine进行了对比测试。本文将会从写入、存储、查询及资源开销等几大维度为大家汇总分析测试结果。为确保结果具有可比性,本次测试选用TimescaleDB2.6.0版本。为获得较好的性能,TimescaleDB需要针对不同的场景设置不同的Chunk参数,不同场景下参数的设置如下表所示: 上述参数的设置,充分参考了下方Timesca...

  Fwpsa1GdkMP8   2023年11月02日   51   0   0 客户端服务器响应时间

近日,TDengine正式签约路特斯科技,打造出属于高性能跑车领域的高效、可靠和灵活的数据处理解决方案,帮助路特斯科技更好的处理在业务加速扩张中的爆发式增长的车辆数据、实现数据架构的升级。路特斯科技作为专注于技术创新和勇于打破常规的行业领先者,随着车联网的快速发展和自身业务的加速扩张,时序数据呈现爆发式增长,如何进行有效的数据处理和分析成为路特斯科技在升级数据架构时的重要考量标准。在车联网时序数据库改造中,其对国内外主流时序库进行了充分调研测试,对比了InfluxDB、TDengine、Clickhouse、OpenTSDB、Cassandra,最终选择了极简的时序数据处理平台TDengine...

  Fwpsa1GdkMP8   2023年11月02日   26   0   0 数据时序数据库数据处理
关注 更多

空空如也 ~ ~

粉丝 更多

空空如也 ~ ~