• 接待访谒上海yahui雅辉有限公司官方网站
保藏本站|常见问题|网站地图|官方微博
货物查询

全国咨询热线400-663-9099
上海yahui雅辉有限公司

数据挖掘算法在物流企业风险治理与评估中的操作

字号:T|T
文章出处:作者:人气:-揭晓时刻:2024-05-16 10:02:00

 

1. 引言

跟着除夜数据时代的到来与经济的不竭成长,物流企业治理人员面临的数据闪现丰硕化、多样化的趋向,这为长于操作从数据中挖掘出有用信息的物流企业带来了全新的机缘,也给粗放式治理的物流企业带来了新的挑战。若何从复杂的数据集中挖掘出有价值的信息,对每个但愿在除夜数据时代实现风险治理与评估的物流企业都具有首要的研究意义。

2. 物流企业治理数据挖掘的特点

2.1 多学科交叉通顺贯通。

数据挖掘在物流企业风险治理与评估中既有计较机科学手艺与机械进修的内容,还通顺贯通了金融学、统计学、经济学等多方面的学科理论与编制[[1] 李丽阳.数据挖掘手艺在物流企业财政治理中的操作[J].湖北开放职业学院学报,2022,35(20):112-114." style="padding: 0px; margin: 0px 2px; color: rgb(47, 139, 214); background-color: transparent; outline: none;">1]

2.2 数据来历错乱。

物流企业获获得用于进行风险治理评估的数据,经常闪现海量性、多样性的特点。物流企业可能从多个数据库中获得除夜量闪现多个维度,具有多种形式的信息,例如文字、图表等,组成重除夜的数据集。这一方面闪现了操作数据挖掘手艺的意义,此外一方面也对数据的清洗和预措置提出了更高的要求。

3. 数据挖掘手艺在物流企业风险治理与评估中操作的问题

3.1 原始数据难以结构化。

物流企业在进行风险治理时所参考数据经常是超越多个层面,触及多个维度的,这些未经由措置的脏数据中经常或多或少地存在噪点、分手、缺失踪踪值、离群值等问题[[3] 关除夜伟.数据挖掘中的数据预措置[D].吉林除夜学,2006." style="padding: 0px; margin: 0px 2px; color: rgb(47, 139, 214); background-color: transparent; outline: none;">3],没法直接对这些非结构化数据进行数据挖掘。在物流企业风险治理与评估的数据挖掘中,首要有以下几个问题:(1)数据冗余。原始数据集中不成避免地会有良多没有挖掘价值的冗余数据,如在汇集员工去职记实数据时的员工编号,名目杂乱的采购记实等信息。这些噪点信息不单不会有助于物流企业从过往的数据记实中挖掘出新常识,还会阻碍数据挖掘模子的斥地与调试,下降模子的机能,导致数据挖掘功能的低质量甚至短处。(2)数据缺失踪踪。物流企业治理者汇集到的数据经常会因为各类启事闪现缺损,如某次统计未能记实所罕有据项,或较着不成采信的矛盾数据。数据缺失踪踪经常会造成较除夜的影响,因为包含缺失踪踪值的数据样本难以被计较与划分类别,良多对输入数据集较为严酷的算法也没法措置这样存在缺失踪踪的数据。而假定轻忽失踪踪存在缺失踪踪值的样本,又会丢弃失踪踪这些样本中其他有价值的数据项中包含的信息,使数据集的数据量削减,得出偏颇的挖掘功能。(3)离群值。数据集中有时会闪现与其他数据项距离较除夜的异常数据项或一个异常的小数据簇,这除夜除夜都时辰是因为记实短处或统计失踪踪误酿成的,但有时也包含着首要的风险信息。若不经措置直接输入,必定水平上会干扰某些对离群值敏感的算法的功能,还会导致物流企业治理者错过这些离群值中可能包含的风险信息。这些问题会下降数据的质量,导致数据挖掘模子闪现运行速度慢、切确性差、难以提取足够的有用信息等一系列问题。而物流企业治理者在汇集数据,组成原始数据集时,受统计尺度不规范、统计误差等影响,经常老是会汇集到具有这些问题的非结构化数据。这些数据难以结构化,给物流企业的数据挖掘工作带来坚苦。

3.2 物流企业数据挖掘模子的机能问题。

物流企业在将获获得的非结构化数据措置为结构化的数据后,便可以对这些结构化数据进行数据挖掘建模,挖掘其中隐含的风险信息。此时物流企业需要面临两除夜问题。第一除夜问题是难以找到与物流企业需求完全贴合的数据挖掘算法。在猜想性数据挖掘中,因为数据具有较强的动态性与实时性,一个运行时刻较长的算法经常是不被容忍的。第二除夜问题是数据挖掘算法的斥地。在信息化时代,具有必定规模的物流企业发生的风险信息成本经常较为重除夜,对从这些成本中抽掏出的数据集进行挖掘经常需要破钞除夜量的时刻。假定将静态的算法套用到复杂多变的需求中,而不合错误其进行定制与进一步斥地,是难以完成物流企业风险治理与评估的数据挖掘使命的。

3.3 存在信息安然性风险。

物流企业在操作数据挖掘手艺时,经常会统合各部门的数据,成立信息化除夜数据治理平台。这一方面提高了物流企业的信息化水平,此外一方面同样成为物流企业新的风险点[[4] 季长青.浅谈除夜数据手艺操作给物流企业风险治理带来的机缘和挑战[J].齐鲁珠坛,2021(02):54-57." style="padding: 0px; margin: 0px 2px; color: rgb(47, 139, 214); background-color: transparent; outline: none;">4]。对集成了物流企业所有营业数据、治理信息的除夜数据平台而言,一旦闪现信息泄露,物流企业将会损失踪踪多个维度的除夜量数据,商业成本的损失踪踪更甚畴前。此外,若闪现不成抗力成分导致保留数据的硬件破损,物流企业也会一次性损失踪踪除夜量的数据成本。这些问题对想要搭建除夜数据治理平台的物流企业提出了新的挑战。

4. 数据挖掘手艺在物流企业风险治理与评估中操作问题的解决

4.1 正视数据的清洗及预措置。

要想对非结构化的原始数据进行数据挖掘,发现其中包含的物流企业风险信息,我们需要对获获得的数据进行清洗及预措置,晋升数据集的质量,并使其更等闲于建模。针对原始数据集面临的问题,首要有以下几种解决思绪。(1)数据降噪。原始数据集中经常存在因为各类测量短处、记实短处导致的噪点,为此我们要经由过程噪声降除算法进行措置。例如将有序的原始数据进行分箱,遵循必定的轨则划分出某属性的多个区间,再经由过程平均值滑腻、鸿沟值滑腻等编制聚合各分箱中的数据,这样可以将一个区间内的一组数据用一个有代表性的数据暗示,在不改变数据原有寄义的根底上便于输入模子进行分化。或基于数据集的其他特点应用聚类编制进行分簇,经由过程离群的孤立点或小数据簇找出噪点。在现实操作中,应操作机械挖掘与人工考验相连络的编制,由熟谙营业的治理人员或焦点员工剖断是不是应作为通俗噪点措置。(2)数据填充。为了应对原始数据集中的数据缺失踪踪,将含出缺失踪踪项的数据样本全数丢弃是最简单易行的编制。但这类编制只合用于含罕有据缺失踪踪的样本较少,或含罕有据缺失踪踪的样本不首要时操作,否则会造成数据集较为严重的萎缩。是以,我们还可以采纳此外一种思绪,即用必定的编制将其填充起来。如将一些未能汇集到或已丢失踪踪的数据项用不凡值填充,使其可被作为成心义的数据项措置,又可以标识表记标帜该数据项具有不凡意义。或操作统计学编制,连络该数据样本的其他数据项,采纳中值填充、均值填充等编制,也可找到除夜致合理的值实现缺失踪踪数据项的填充。(3)离群值措置。数据集中的离群值有些是因为数据获得时的误差发生的,应进行异常值检测与措置。传统物流企业一般采纳人工检测的编制,拔取对营业需求较为体味的员工,酬报选出离群的数据项,但这类编制难以顺应除夜数据时代信息措置的需要,且可能发生新的短处。现代物流企业应经由过程设计合适的算法或成立模子的编制解决问题,基于统计学的异常值检测措置编制是最经常操作的离群值提取编制,这类编制将数据的根基分布假定为正态分布,连络3σ律例剖断离群值,但不合用于根基分布难以描述的模子。或基于样本两两之间的欧式距离、编纂距离在所有样本中的该距离分布,识别出离群点或离群簇,进而将其删除或进一步分化,挖掘其中可能潜匿的物流企业风险信息。

4.2 连络各物流企业数据的特点进行模子定制与扩年夜。

各物流企业的风险信息数据具有自己怪异的特点,对模子的切确度、实时性的要求也不尽不异。若有些物流企业对人工作换较为敏感,员工去职成为损失踪踪期望值较除夜的风险点,这些物流企业经常但愿基于以往的去人员工简历、去职启事、股市变换等多维度信息进行描述性数据挖掘,尽可能具体地从多方面描述导致员工去职的成分,辅佐物流企业呵护自己的人才成本。甚至如Entelo公司的“前猎头”处事,经由过程70多个指标分化焦点人才的去职倾向,推送给采办了他们处事的物流企业家。还有的公司以期货市场波动为首要风险点,但愿基于近几日的市场信息尽快完成猜想性数据挖掘使命,正视模子的运行效力。由此可知,一个合适物流企业风险治理的数据挖掘模子理当是针对某一物流企业的需求定制的,且具有较强的交互性与可视化功能。

4.3 健全物流企业信息治理系统。

面临搭建信息化除夜数据平台时面临的新风险,物流企业需要在多方面做出应对。一方面可以成立除夜数据平台治理小组,由深切理解营业且具有除夜数据与IT常识的治理人员率领。同时因为除夜数据平台统合了物流企业的所有营业数据与治理信息,假定采纳物流企业外部招聘的编制获得除夜数据平台治理小组的成员,因为这些人员对物流企业营业与风险点不熟谙导致闪现工作效力较低、短处率较高的问题,还会增添物流企业数据泄露的风险。是以,从物流企业内部汲引一批熟谙公司营业与风险,并具有必定IT常识的综合性人才进行培育,是物流企业获得除夜数据风险治理人才较好的编制。此外一方面,物流企业应健全除夜数据信息治理系统,成立起一套周全、高效、安然的除夜数据信息治理系统与规章轨制。规范除夜数据治理人员的权限分级治理、身份识别工作,强化数据加密存储的意识与能力,确保权限不足的人员访谒响应加密数据时遭到制约。

5. 结语

总而言之,数据挖掘手艺可以从多个维度实现高价值数据的提取,在除夜数据时代有着丰硕的操作与宽广宽除夜奔放的前景,对想要实现风险治理与评估的除夜数据时代物流企业具有首要意义。本文研究了数据挖掘手艺操作的过往经验与现状,和物流企业操作落地的问题与对策,跟着数据挖掘手艺的成长与物流企业操作经验的堆集,数据挖掘手艺在物流企业风险治理与评估中必将有更除夜的用武之地,为市场经济的成长供给更强的动力。

举荐产物

同类文章排行

最新资讯文章

您的浏览历史

    正在加载...