简化ETL流程的几种基础数据生产方法
2020-12-31 17:32:45 阅读(173) 评论(0)
在从事数据相关项目的过程中,数据梳理、数据集成和数据补充需要大量的时间和精力,进入数据分析和数据挖掘阶段对数据的完整性也有严格的要求。对统计算法的验证和研究也面临着根据自身业务情况特点配置数据属性的需要。今天,我们将简要介绍几种基本的数据生产方法,以简化我们的ETL流程,方便您根据业务定义生产数据。本文以面向对象的J*A语义为例。小伙伴们可以根据自己熟悉的各种语言来实现,笔者秉承逻辑方法高于开发语言选择的理念去发现和解决问题。业务场景:在医院治疗过程中,系统需要记录病案号、姓名、性别、发病时间、体重等基本信息。这些数据必须符合客观规律和结构化。接下来,我们将逐一介绍每个属性的数据生产方法。1、根据面向对象的原则,建立一个父类。首先,我们建立一个抽象的AttributeValueGenerator,在这个类别中声明一个实体entity,并建立一个getty。、set方法,之后的每一种方法都继承了这个父类。2、病案号病案号的定义是一组规则的、自定义的递增数列,我们可以通过递增的方式生成。定义两个参数:病案号的起始数和增长规模。病案号的起始数为10001,每次增加1。3、区分性别,我们用一组枚举数列填充性别属性。根据业务需要定制男女就诊比例,按百分比产生随机数。第一个参数是性别,第二个参数是出现的概率。4、发病日期分布在不同的年份和月份,需要计划起始日期、截止日期和期间概率,并在随机生成范围内转换为int输出。2005年发病时间占27%、在2006年的占73%5、体重正态分布一组成年人的体重数据应根据男女区别对待,并符合正态分布的规律。生成正态分布数据可以控制期望、方差、开始和截止日期。若为男性,平均值为67公斤,方差为10公斤、漂浮在40-150公斤之间。如果是女性,平均值为57公斤,方差为10、漂浮在40-150公斤之间。综上所述,我们可以不断思考,根据项目的需要,随时随地开发一些属性的生成函数。不要低估这些细节,一旦需要就可以快速生产。所谓:积土成山,风雨如雨;积水成渊,蛟龙生焉;积善成德,神明自得,圣心备焉。所以不积小步,无以千里;不积小流,不能成江海。你认为这是事实吗?
推荐阅读
- 可以电音制作的软件有哪些 可以电音制作的软件排行榜
最近几年电音特别流行,而且现在很多的软件都是可以制作电音的,下面小编就给大家来介绍一下可以电音制作的软件有哪些 可以电音制作的软件排行榜这一块的相关内容,希望能帮助到大家。 可以电音制作的软件排行榜 1、《DJ打碟:电音DJ》 …查看详情
- 重镑出击!拍账王于万亿市场之中,打造全国领先的去中心化超级AI企服平台
近年来,“互联网+”推动着互联网与各行各业的融合,对传统行业也带来了很大的影响。时代的变化与改革,也迎来了“互联网+财税”的发展新趋势。 根据国家市场监督管理总局数据统计,截止2020年9月末,全国实有各类市场主体1.3亿户,国内企业主体总…查看详情
- 商标注册查询的必要性及查询方法
商标注册查询是企业或个人进行商标注册的前提步骤,需要对查询的商标备案登记信息数据进行分析,来判断自己需要注册的商标与已经注册的商标的近似程度,同一个类别是不允许相同或极近相同的商标同时进行注册的。图片来源于网络商标注册查询的结果并不具备法律…查看详情
- 2022年六大广告牌制作软件
如果想要自己的东西卖出去就需要打广告,打广告就需要好看的背景来制作,所以这就显得广告牌有多么重要,今天我就来给大家介绍一下2052年六大广告牌制作软件,只要你下载了其中一款软件,你以后的广告牌都被它承包了。 1.广告牌生成…查看详情
- 实木门十大品牌 2023实木门品牌排行榜
随着家居行业的发展,实木门已经成为了现代家居中不可缺少的一部分,不仅美观大方,而且功能齐全,具有很高的使用价值。而如今市面上的实木门品牌琳琅满目,消费者该如何选择呢?下面就为大家介绍实木门十大品牌排行榜,希望能够对大家选购实木门有所帮助…查看详情
- 2022年亚马逊开店流程及费用
亚马逊商城是目前全球最大的电商平台,卖家和买家数量都是非常多的。现在仍有不少卖家想到亚马逊商城开店,那么大家首先要了解清楚亚马逊商城开店条件及费用有哪些,这样才能更加顺利的完成亚马逊商城注册。亚马逊开店流程 1、进入亚马逊全球开店官网…查看详情
- row函数的使用方法及实例
Excel返回行号函数ROW()和ROWS()使用详解?1、返回行号主要是使用函数row。在单元格里面输入=ROW(),此时函数没有添加任何参数,返回单元格的行号,比如这里的6。sqlrow函数的使用方法?SQLROW函数用于创建一个行值,…查看详情
- U盘排行榜前十都有哪些?
对于一些学习平面设计和装修的人来说,U盘是必须要有的东西,因为U盘里面可以放很多东西,我们出门出差的时候不需要带计算机,直接带一个U盘出去就可以了,那么,关于U盘排行榜前十都有哪些呢? 1、闪迪 此款U盘的接头选用USB2.…查看详情
- 小程序怎么引流到公众号
如何利用微信公众号为网站引流? 现在不论是做线上还是线下的推广,都应该相互结合。 1、通过多个门店小程序为商城小程序进行本地引流。哪里有门店就在哪里开通附近门店定位引流。或者一个城市或多个城市定位多个门店。 2、小程序支付后关联公…查看详情
- 版权登记的难度 取决于两个关键影响因素
版权登记的审查环节是采用形式审查,对材料实质内容的审核度并不是特别高,版权登记的难度根据登记作品的类型、原创度和登记方式综合决定的。常规作品的通过率是比较高的,但是特殊作品和软件著作权的难度相对较大。 图片来源于网络◆ 版权登记的难度影响因…查看详情
- 英文网站运营本质还是与用户沟通,依旧内容至上!
网站运营的本质是流量和转化,英文网站运营不同的一点大多是搜索引擎算法的差别,国内使用较多的是百度、搜狗,英文网站更多的是使用Google。但是,搜索引擎的差别对网站优化影响比较大,对基本的网站运营相对较小。下面就英文网站运营的基础知识进行了…查看详情
- 分销电商系统适合行业发展空间比较大的中小企业
分销电商系统是当下比较热门的体统类型,受到大量中小企业及个体商家的青睐,起主要的功能就是基于微信社交平台的巨量用户基础,拓展自身产品营销渠道和方式。系统在到达率、精准度和活跃度方面具有较高优势,适合行业发展空间比较大的中小企业选择。图片来源…查看详情
- 专业网站建设,警惕“专业”两大坑
寻求第三方合作进行专业网站建设是现代企业建站的主流趋势。市面上,号称专业网站建设的服务企业涵盖了设计行业、互联网行业,甚至一些资深平台,不同领域对网站建设擅长之处各异,那么到底何谓专业网站建设? 在我看来,企业选择专业网站建设服务时,要警惕…查看详情
- xor是什么运算指令?
xor是什么运算指令?XOR是异或运算指令。 异或(xor)是一个数学运算符。它应用于逻辑运算。异或的数学符号为“⊕”,计算机符号为“xor”。 譬如,异或可逆运算。1xor1=0,0xor0=0,1xor0=1,0xor1=1。axo…查看详情
- 抽奖系统哪个好 好用的抽奖软件推荐
随着科技的发展和社会的进步,人们的生活质量大大提高,人们对于精神生活的要求也越来越高,为了满足人们的生活需求和生活乐趣,各种各样的抽奖系统应运而生,下面我给大家介绍六款简单实用的抽奖系统。 1、全能抽奖软件 全能抽奖系统…查看详情
猜你喜欢
最新文章

扫码二维码
立即领取《千元实战营销秘籍》
还可免费试用营销管理系统
*如有疑问,请随时拨打免费咨询热线:400-0033-166
服务时间:8:30-18:00
软件企业
认定号:川RQ-2018-0216
高新技术企业
认定号:GR201951001121

关注微信公众号
和10万中小企业共同成长

扫码下载APP
享全方位服务一触即达
Copyright © 2004-2022 万商云集(成都)科技股份有限公司 版权所有
蜀ICP备12001963号-2
川公网安备 51010402000322号

快速找产品

找一找哪款产品适合您?
咨询热线:400-0033-166
-


-
电话沟通
获取方案
下载APP
官方微信
扫码下载APP
全方位服务一触即达

关注万商云集
和10万中小企共成长

TOP

企业首选的数字选用平台

400-0033-166
8:30-18:00















































注册有好礼



