大数据
数据建模 标签描述

数合建模(官方网址)是可视化数据分析平台,既支各类政企人员自主可视化需求,也支持个人用户数据处理加工需求,如数据建模、创建和使用报表、大屏,进行可视化数据分析,构建可视化数据应用等,扩展功能还支持各种来源数据的接入汇聚、标准化、数据服务、服务管理等数据中台的功能 一、导入或接入房价历史数据 二、建立房价分析训练模型 分布方式有三种泊松分布、二项式分布、高斯分布 二项式分布:就是只有两个可能结果的分布 泊松分布:离散分布,例如医院在一天内接到的紧急电话的数量、某个地区在一天内报告的失窃的数量 高斯分布:连续的概率分布 配置自变量和因变量,生成模型 三、建立房价训练评估模型 四、...

数据建模和数据模型的含义,我们可以分四个部分来了解: 1、业务模型2、构建表关系/表链接3、数学模型4、算法模型      1、业务模型 重点是懂业务,即了解业务的整个过程,A-B-C大部分是业务模型,指标体系大多数的本质也是在反映业务本身,也可以归为业务模型我们曾经有一支优秀的税务数据分析团队,也得益于懂业务 2、构建表关系/表链接 核心含义是使几个相关的表之间建立好联系,以供我们可以更好的数据分析,解决数据表结构层面上连接的一些问题,bi工具/可视化建模工具的主要设计思路  3、数学模型 按照一定的规律进行计算的模型,比如e...

一、数据接入或导入:根据企业的规模和信息化的程度,将某个企业的数据接入或导入数合建模。 二、建立模型 1、建立企业毛利和毛利率模型; 2、建立企业毛利率和行业毛利率的关系模型。 三、可视化分析,通过看板功能,进行可视化探索,发现企业毛利率的运行情况 从图中可以看出,企业在2020年的运行情况与行业整体的运行情况相近,甚至在2020年10月超过行业整体情况,但从2021年开始,离行业整体情况较远,表示企业的经营水平低于行业整体发展水平。 我们通过五力模型进行以下排查,进一步定位具体原因 是否是竞争对手的原因,竞争对手会竞相提高品质、降低价格与取得客户; 是否供应商的的原因,供应...

数合建模是可视化数据分析平台,既支各类政企人员自主可视化需求,也支持个人用户数据处理加工需求,如数据建模、创建和使用报表、大屏,进行可视化数据分析,构建可视化数据应用等,扩展功能还支持各种来源数据的接入汇聚、标准化、数据服务、服务管理等数据中台的功能 (一)数据管理 根据数据源端的数据情况,选择接入或导入,是数据建模的第一步接入:适用于有一定数据量,且定期有更新的数据环境。一般通过ETL工具配置数据库进行数据的接入及更新,也可以通过接口调用完成数据接入。导入:适用于数据量不大,且更新频率低的数据环境。比如临时导入一批数据进行分析,或者全量数据不大,分析周期比较固定的场景。  上图中...

大多数行业都会用到数据建模 先说企业,很多规模化企业在进行第二轮数字化,如果说第一轮主要任务是电子化工作业务流程,第二轮主要就是数据归集和分析,数据分析概括来讲两个维度的分析,一个是数据质量层面的处理,主要由数据仓库工程师来负责,一个业务层面的分析,主要由数据分析工程师来负责,现在由于一些可视化的工具的出现,比如我们的数合建模,还有企业职能的调整,很多业务人员也会参与业务层面的分析,其实这两块内容都可以叫数据建模。 再说政府部门,我在2011年的时候开始接触数据处理(传统数仓阶段),通过编写oracle存储过程来完成业务指标的创建和更新,这个就是数据建模,当时我们将业务数据组织存储到多维数据库...

数据建模是指将现实世界的复杂问题抽象为数学模型,并通过收集、整理和处理数据,以获取对问题的深入理解和洞察。 数据建模在多个领域都有广泛应用,包括商业分析、金融风险评估、市场预测、人工智能等。 数据建模的过程包括以下几个关键步骤: 1.问题定义:明确需要解决的问题,并确定所需数据的类型和特征。 2.数据收集:收集与问题相关的数据,可以通过调查问卷、数据库查询、网络爬虫等方式获取。 3.数据清洗:对收集到的数据进行清洗和预处理,包括去除重复数据、处理缺失值、处理异常值等。 4.数据整合:将不同数据源的数据进行整合,以便于后续的分析和建模。 5.特征选择:从大量的特征中选择出对问题有用的特征,可以使...

数合建模(官方网址)是可视化数据分析平台,既支各类政企人员自主可视化需求,也支持个人用户数据处理加工需求,如数据建模、创建和使用报表、大屏,进行可视化数据分析,构建可视化数据应用等,扩展功能还支持各种来源数据的接入汇聚、标准化、数据服务、服务管理等数据中台的功能 一、导入或接入银行客户历史数据 建立分地区客户流失模型 通过模型计算得出分地区的客户总数量及流失数量 三、建立分地区客户流失看板 从上图可以清晰的看出流失客户与总体客户的情况,并且可以参考行业流失率,来判断我行的流失率是否正常。 也可以从客户的年龄、余额、信用等维度进行分析,找出避免流失的数据支撑。 四、建立银行...

数合建模( 官方网址)是可视化数据分析平台,既支各类政企人员自主可视化需求,也支持个人用户数据处理加工需求,如数据建模、创建和使用报表、大屏,进行可视化数据分析,构建可视化数据应用等,扩展功能还支持各种来源数据的接入汇聚、标准化、数据服务、服务管理等数据中台的功能 1、导入或接入窃漏电历史数据 2、对数据进行切片分析 通过指标两两组合,对窃漏电历史数据进行切片,从上图呈现可以看出点犬牙交错,简单的直线或曲线很难区分某个点位属于窃漏电还是不属于窃漏电。 3、采用机森林算子建立窃漏电分析训练模型 4、导入或接入待预测的窃漏电数据 5、采用机森林算子建立窃漏电分析预测模型 将待预测数...

数合建模(官方网址)是可视化数据分析平台,既支各类政企人员自主可视化需求,也支持个人用户数据处理加工需求,如数据建模、创建和使用报表、大屏,进行可视化数据分析,构建可视化数据应用等,扩展功能还支持各种来源数据的接入汇聚、标准化、数据服务、服务管理等数据中台的功能 一、导入或接入糖尿病历史数据 建立糖尿病训练数据整理模型 将字符类型转换为数字类型,将是否糖尿病的是转为1,否转为0 三、建立糖尿病训练模型 计算方法选择线性,因变量选择是否糖尿病,自变量选择血糖、血压、胰岛素等7个指标,计算结果损失为2.77 如果计算方法改变为高斯,损失为0.93。 四、导入或接入待预测...

1、前期回顾: 公司介绍,包括公司简介、主创人员经历、产品介绍、以及公司的业务范围,关键词:数据为中心、数据可视化、数据建模、数据治理、数据服务、数据总线、大数据、公安、交警、税务,详情请关注企业微信公众号进行了解  2、产品定位 数据分析类项目的结构示意 包括数据源、数据治理、数据应用/数据服务、数据总线、外部应用五部分内容。 3、数据治理 产品定位是基础支撑平台,相关的功能包括标准管理、接入方式探查、数据接入、数据标准化、任务中心等,完成接入层、标准层、主题库、要素库等的构建  4、数据建模及可视化  拳头产品,包括数据建模、报表构建、大屏构建...