文章目录人工智能发展历程一、人工智能的起源1、图灵测试2、达特茅斯会议二、发展历程人工智能发展历程一、人工智能的起源1、图灵测试测试者与被测试者(一个人和一台机器)隔开的情况下,通过一些装置(如键盘)向被测试者随意提问。多次测试(一般为5min之内),如果有超过30%的测试者不能...
文章目录人工智能概述一、人工智能应用场景二、人工智能小案例三、人工智能发展必备三要素四、人工智能、机器学习和深度学习人工智能概述一、人工智能应用场景二、人工智能小案例案例一学习链接:https://quickdraw.withgoogle.com案例二学习链接:https://p...
文章目录Grover算法一、什么是搜索算法二、怎么实现Grover搜索算法Grover算法一、什么是搜索算法举一个简单的例子,在下班的高峰期,要从公司回到家里,开车走怎样的路线才能够耗时最短呢?最简单的想法,当然是把所有可能的路线一次一次的计算,根据路况计算每条路线所消耗的时间,...
函数加强一、递归1、递归的应用场景递归是⼀种编程思想,应用场景:在我们日常开发中,如果要遍历⼀个⽂件夹下面所有的⽂件,通常会使用递归来实现;在后续的算法课程中,很多算法都离不开递归,例如:快速排序。递归的特点函数内部自己调用自己必须有出口2、应用:3以内数字累加和代码# 3 + ...
业务和指数开发一、业务开发实现步骤:在logistics-etl模块cn.it.logistics.etl.realtime程序包下创建CKStreamApp单例对象,继承自StreamApp编写main入口函数,初始化spark的运行环境实现StreamApp基类的两个方法Ex...
文章目录ClickHouse的SQL语法一、常用的SQL命令二、select查询语法三、insert into语法四、alter语法ClickHouse的SQL语法一、常用的SQL命令作用SQL列出所有数据库show databases;进入某一个数据库use dbName;列出...
Presto介绍一、Presto出现背景Presto是Facebook在2012年开发的,是专为Hadoop打造的一款数据仓库工具。在早期Facebook依赖Hive做数据分析,Hive底层依赖MapReduce,随着数据量越来越大,使用Hive进行数据分析,时间可能需要分钟级到...
目录物流项目详细介绍一、行业背景介绍二、物流行业特点三、项目背景介绍四、物流大数据的作用五、物流大数据应用案例1、车货匹配2、运输路线优化3、库存预测4、设备修理预测5、供应链协同管理六、智慧物流大数据平台介绍物流项目详细介绍一、行业背景介绍近年来,我国电子商务和网络购物的迅猛发...
双十一实时大屏 背后的大数据技术一、大数据相关概念剖析1、什么是大数据?2、数据分析基础概念3、人工智能基础概念4、人工智能+大数据分析场景案例5、相亲场景用户画像分析场景案例二、双十一面临的技术挑战双11---世界级互联网技术超级工程!阿里双11实时业务量和数据量每年都在大幅增...
目录Airflow分布式集群搭建原因及其他扩展一、Airflow分布式集群搭建原因二、Airflow分布式集群其他扩展1、扩展Worker节点2、扩展Master节点3、Scheduler HAAirflow分布式集群搭建原因及其他扩展一、Airflow分布式集群搭建原因在稳定性...
目录Airflow架构及原理一、Airflow架构二、Airflow术语三、Airflow工作原理Airflow架构及原理一、Airflow架构Airflow我们可以构建Workflow工作流,工作流使用DAG有向无环图来表示,DAG指定了任务之间的关系,如下图:Airflow架...
目录Airflow Operators及案例一、BashOperator及调度Shell命令及脚本二、SSHOperator及调度远程Shell脚本三、HiveOperator及调度HQL四、PythonOperatorAirflow Operators及案例Airflow中最重...
目录Airflow使用一、Airflow调度Shell命令1.首先我们需要创建一个python文件,导入需要的类库2.实例化DAG3、定义Task4、设置task依赖关系5、上传python配置脚本6、重启Airflow7、执行airflow二、DAG调度触发时间三、DAG ca...
目录Airflow单机搭建一、安装Anconda及python3.71、官网下载Anconda ,选择linux版本,并安装2、将下载好的anconda安装包上传至mynode4节点,进行安装3、配置Anconda的环境变量4、安装python3.7 python环境5、激活使用...
什么是AirflowApache Airflow是一个提供基于DAG有向无环图来编排工作流的、可视化的分布式任务调度平台,与Oozie、Azkaban等任务流调度平台类似。Airflow在2014年由Airbnb发起,2016年3月进入Apache基金会,在2019年1月成为顶级...