iYPqoJQ3L1v5
Starrocks扩展FileSystem代码分析 Starrocks支持使用FILES()算子对接文件系统 例如可以使用insertintofiles("path"="hdfs://xxx.xx.xxx.xx:9000/unload/data1","format"="parquet","compression"="lz4")selectfromsales_records实现将表sales_records中的数据导出到HDFS中，使用parquet格式保存。 也可以使用insertintofooselectfromfiles("path"="hdfs://xxx.xx.xxx.xx:9000/...
问题描述 通常我们在rust项目中引入第三方依赖包时，会直接指定包的版本，这种方式指定后，Cargo在编译时会从crates.io这个源中下载这些依赖包。 [package] name="foo" version="0.1.0" edition="2021" [dependencies] j4rs=0.15.3 比如这里我们就在项目中引用了j4rs这个包，这个包的主要作用是可以实现从Rust代码中调用Java代码。 博主在使用这个包时发现，crates.io上发布的最新版本0.15.3有bug，这个版本依赖了logback的新版本，而logback的新版本使用了Java11进行编译。这就导...
C和Rust通过wasmtime实现相互调用实例 1wasmtime介绍 wasmtime是一个可以运行WebAssembly代码的运行时环境。 WebAssembly是一种可移植的二进制指令集格式，其本身与平台无关，类似于Java的class文件字节码。 WebAssembly本来的设计初衷是想让浏览器可以运行C语言这种编译型语言的代码。通常我们的C语言代码会使用gcc或clang等编译器直接编译链接成与平台相关的二进制可执行文件，这种与平台相关的二进制文件浏览器是无法直接运行的。如果想让浏览器运行C语言代码，就需要使用可将C语言编译成WebAssembly指令的编译器，编译好的代码是wa...
1.常规函数 函数都拥有显示的类型签名，其本身也是一种类型。 1.1函数类型 自由函数 //自由函数 fnsum(a:i32,b:i32)->i32{ a+b } fnmain(){ assert_eq!(3,sum(1,2)) } 关联函数与方法 structA(i32,i32); implA{ //关联函数 fnsum(a:i32,b:i32)->i32{ a+b } //方法:第一个参数是self,&self或&mutself的函数 fnmath(&self)->i32{ Self::sum(self.0,self.1) } } fnmain...
本篇主要介绍JavaNIO的基本原理和主要组件 Netty是由JBOSS提供的Java开源网络应用程序框架，其底层是基于Java提供的NIO能力实现的。因此为了掌握Netty的底层原理，需要首先了解JavaNIO的原理。 NIO简介 计算机主要由CPU、内存、外存、IO设备等硬件组成，计算机执行计算的过程就是CPU从内存中获取数据，进行计算，然后再将计算结果写入内存中。但由于内存非常昂贵且下电后数据会丢失，计算机需要使用外存来持久化存储大规模的数据，外存提供了大量的存储空间，代价是其存取速度远小于内存。除了读取外存数据，计算机还可以从网络设备获取网络中的数据，受网络传输速度的限制，计算机获...
本文主要记录Maven依赖管理中关于依赖传递和依赖范围的知识 Maven项目示例 创建3个maven项目，分配依赖log4j1.2.12,1.2.13,1.2.14版本。 <!--项目1--> <groupId>com.leo</groupId> <artifactId>project1</artifactId> <version>1.0-SNAPSHOT</version> <dependencies> <dependency> <groupId>log4j<...
本篇主要记录SpringBoot使用的基础配置 SpringBootMaven配置 SpringBootmaven依赖关系 我们创建springboot项目后，会发现项目的pom文件都会继承自spring-boot-starter-parent这个配置，打开这个父配置文件，会发现它又继承自spring-boot-dependencies这个配置文件。 spring-boot-dependencies中使用<dependencyManagement>已经引入了大量由springboot官方测试稳定的依赖包，因此我们在自己的springboot项目中使用这里面定义的依赖包时，可以不...
容器接口 BeanFactory 是ApplicationContext的父接口，所有ApplicationContext的实现都组合了BeanFactory。 BeanFactory才是Spring的核心容器。 从BeanFactory提供的方法来看，主要是从容器中获取Bean。实际上控制反转，依赖注入以及Bean的生命周期管理，都由它的实现类提供。如下展示了BeanFactory其中一个实现类DefaultListableBeanFactory的继承关系。 可以看到，它的继承路线上有一个DefaultSingletonBeanRegistry类，这个类我们打开可以看到如下代码段，...
本篇主要介绍了一种使用Rust语言编写的查询引擎——DataFusion，其使用了基于Arrow格式的内存模型，结合Rust语言本身的优势，达成了非常优秀的性能指标 DataFusion是一个查询引擎而非数据库，因此其本身不具备存储数据的能力。但正因为不依赖底层存储的格式，使其成为了一个灵活可扩展的查询引擎。它原生支持了查询CSV，Parquet，Avro，Json等存储格式，也支持了本地，AWSS3，AzureBlobStorage，GoogleCloudStorage等多种数据源。同时还提供了丰富的扩展接口，可以方便的让我们接入自定义的数据格式和数据源。 DataFusion具有以下特...