如何打造性能极佳,运行流畅的MES系统?
mhr18 2025-03-12 18:08 17 浏览 0 评论
当企业上线MES系统之后,仅仅是万里长征的开始,为什么要进行MES的优化?这是一个非常之现实以迫切的问题。
众所周知,MES系统所运行的必要基础数据之外,MES系统每天还采集了大量的生产过程数据存放到数据库之中,其数据量大小,取决于如下几个方面:
A.企业的生产规模;
B.MES管理的产品流程的数量;
C.MES每流程上数据采集节点的站点数;
D.每站点数内部的数据采集内容;
E.第站点上的数据采集的时间频率;
F.第三方系统存放到MES数据库中的数据内容。
随着系统的上线,数据量日渐增大,由最初的几个G,增加到100G甚至几个TB, 系统的性能,也随之而下降,同时还表现出如下的几个方面的弊病:
G.系统扫描相应变慢
H.系统报表查询变慢
I.看板等实时刷新程序无法正常执行
J.系统登陆时间过长
K.系统作业过程中停顿(卡,延时) 或死锁, 需重启服务器次数增多。
L.数据备份日渐困难。
以上问题不光是MES系统所特有的,所有的事务处理性(OLTP)性的数据库应用系统,都将面临以上的困扰。由于很多MES系统默认采用的是关系性数据库(SQL Server /Oracle/PG),除少量计算在前端完成以外,系统中95%的逻辑运算都在DB层中实现,非常依赖于数据库服务器的性能。
所以,当MES系统表现不尽如人意之时,首先需要在数据库后台进行必要的数据优化,完成后基本上就能取得相应的性能提升 MES后台优化包含的内容如下:
1. 合理的表以及逻辑关系的设计;
2. 数据库的日常维护工作;
3. 数据库大数据量表的数据压缩;
4. 数据库大数据量表的分区表方法;
5. 历史数据的定期迁移;
6. 合理的负载部署,服务器的分工;
7. 服务器硬件性能的提升。
以下以最常见的表结构与逻辑关系的设计的优化为例子加以重点说明:MES系统表以及标准模型表,以及相关逻辑(存储过程)是在系统平台的设计阶段已经决定,并且经过了相当多的实践,其性能相对稳定可靠,靠此部份的优化以提升系统整体性能的收益不大,效果也不太明显。
系统在实施周期时根据客户所定制的表,以及存储过程,特别是新上线的功能插件所对应的存储过程,将有比较大的优化余地, 在这类业务表的设计时,应注意如下方面:
A. 遵守业界通行的数据库设计的标准范式(至少前3个范式尽可能遵守)。
B. 遵守MES建议的主键定义方法,以及字段命名规则。
C. 合理的设计表的冗余以及关联,区分事务处理表(大表),以及基础数据表(小表);
D. 合理设计索引,特别是经常用于查询的表的索引(产品表,工单表, Lot表等),对于大表只创建必要的索引。
E. 对于第三方测试数据表,采用分库或分服务器的设计方案,不要放到MES主数据库中。
F. 一切新表的设计,应以性能为首要考虑因素。
业务逻辑(查询或存储过程)设计时时,应注意如下方面:
A. 所有的内部查询应基于主键PK。
B. 避免在一个大的SQL中采用一次性连接多个表的查询 (特别是大表对大表的关联,是非常不明智的),应拆分为基于PK的多步来执行查询。
C. 避免使用大的事务包裹业务逻辑,事务应尽可能短小,否则容易占用服务器资源导致排队甚至死锁。
D. 少用游标,绝不要针对大表使用游标。
E. Select查询时尽可能使用 With (no lock) 语句,避免占用锁的开销,在每一个存储过程中加入:SET TRANSACTION ISOLATION LEVEL READ UNCOMMITTED ,以降低死锁的可能性。
F. Insert最好以批量方式执行,一次性处理多条新记录。
G. Update应基于PK为条件,避免使用复杂的Where表达式, 导致表锁。
H. 一切有利于减少死锁,提升性能的逻辑设计为首要考虑因素。
事实证明,频繁的死锁往往出自于不合理的业务逻辑设计,故在进行MES的客户化功能的数据设计时,应仔细权衡,以性能为先导,才能取得相对较好的结果。 当数据库服务层的优化进达到一个相当高的水准之后,企业的还需要考虑后续的一些优化过程,比如大数据的定期归档,提升网络以及服务器本身的的IOPS性能等等,进行深度的负载均衡的设计,还需要提供专业的瓶颈定位工具以及优化工具,它必须是一个“可高度优化的MES”, 否则企业将会为此付出极为沉痛的代价。
只有从源头加以及分析与优化,才能让你的MES系统在长时间运行,还能保持流畅。
相关推荐
- 如何检查 Linux 服务器是物理服务器还是虚拟服务器?
-
在企业级运维、故障排查和性能调优过程中,准确了解服务器的运行环境至关重要。无论是物理机还是虚拟机,都存在各自的优势与限制。在很多场景下,尤其是当你继承一台服务器而不清楚底层硬件细节时,如何快速辨识它是...
- 第四节 Windows 系统 Docker 安装全指南
-
一、Docker在Windows上的运行原理(一)架构限制说明Docker本质上依赖Linux内核特性(如Namespaces、Cgroups等),因此在Windows系统上无法直...
- C++ std:shared_ptr自定义allocator引入内存池
-
当C++项目里做了大量的动态内存分配与释放,可能会导致内存碎片,使系统性能降低。当动态内存分配的开销变得不容忽视时,一种解决办法是一次从操作系统分配一块大的静态内存作为内存池进行手动管理,堆对象内存分...
- Activiti 8.0.0 发布,业务流程管理与工作流系统
-
Activiti8.0.0现已发布。Activiti是一个业务流程管理(BPM)和工作流系统,适用于开发人员和系统管理员。其核心是超快速、稳定的BPMN2流程引擎。Activiti可以...
- MyBatis动态SQL的5种高级玩法,90%的人只用过3种
-
MyBatis动态SQL在日常开发中频繁使用,但大多数开发者仅掌握基础标签。本文将介绍五种高阶技巧,助你解锁更灵活的SQL控制能力。一、智能修剪(Trim标签)应用场景:动态处理字段更新,替代<...
- Springboot数据访问(整合Mybatis Plus)
-
Springboot整合MybatisPlus1、创建数据表2、引入maven依赖mybatis-plus-boot-starter主要引入这个依赖,其他相关的依赖在这里就不写了。3、项目结构目录h...
- 盘点金州勇士在奥克兰13年的13大球星 满满的全是...
-
见证了两个月前勇士与猛龙那个史诗般的系列赛后,甲骨文球馆正式成为了历史。那个大大的红色标志被一个字母一个字母地移除,在周四,一切都成为了过去式。然而这座,别名为“Roaracle”(译注:Roar怒吼...
- Mybatis入门看这一篇就够了(mybatis快速入门)
-
什么是MyBatisMyBatis本是apache的一个开源项目iBatis,2010年这个项目由apachesoftwarefoundation迁移到了googlecode,并且改名为M...
- Springboot数据访问(整合druid数据源)
-
Springboot整合druid数据源基本概念SpringBoot默认的数据源是:2.0之前:org.apache.tomcat.jdbc.pool.DataSource2.0及之后:com.z...
- Linux 中的 "/etc/profile.d" 目录有什么作用 ?
-
什么是/etc/profile.d/目录?/etc/profile.d/目录是Linux系统不可或缺的一部分保留配置脚本。它与/etc/profile文件相关联,这是一个启动脚本,该脚...
- 企业数据库安全管理规范(企业数据库安全管理规范最新版)
-
1.目的为规范数据库系统安全使用活动,降低因使用不当而带来的安全风险,保障数据库系统及相关应用系统的安全,特制定本数据库安全管理规范。2.适用范围本规范中所定义的数据管理内容,特指存放在信息系统数据库...
- Oracle 伪列!这些隐藏用法你都知道吗?
-
在Oracle数据库中,有几位特殊的“成员”——伪列,它们虽然不是表中真实存在的物理列,但却能在数据查询、处理过程中发挥出意想不到的强大作用。今天给大家分享Oracle伪列的使用技巧,无论...
- Oracle 高效处理数据的隐藏神器:临时表妙用
-
各位数据库搬砖人,在Oracle的代码世界里闯荡,处理复杂业务时,是不是总被数据“搅得头大”?今天给大家安利一个超实用的隐藏神器——临时表!当你需要临时存储中间计算结果,又不想污染正式数据表...
- Oracle 数据库查询:多表查询(oracle多表关联查询)
-
一、多表查询基础1.JOIN操作-INNERJOIN:返回两个表中满足连接条件的匹配行,不保留未匹配数据。SELECTa.emp_id,b.dept_nameFROMempl...
- 一文掌握怎么利用Shell+Python实现多数据源的异地备份程序
-
简介:在信息化时代,数据安全和业务连续性已成为企业和个人用户关注的焦点。无论是网站数据、数据库、日志文件,还是用户上传的文档、图片等,数据一旦丢失,损失难以估量。尤其是当数据分布在多个不同的目录、服务...
你 发表评论:
欢迎- 一周热门
- 最近发表
-
- 如何检查 Linux 服务器是物理服务器还是虚拟服务器?
- 第四节 Windows 系统 Docker 安装全指南
- C++ std:shared_ptr自定义allocator引入内存池
- Activiti 8.0.0 发布,业务流程管理与工作流系统
- MyBatis动态SQL的5种高级玩法,90%的人只用过3种
- Springboot数据访问(整合Mybatis Plus)
- 盘点金州勇士在奥克兰13年的13大球星 满满的全是...
- Mybatis入门看这一篇就够了(mybatis快速入门)
- Springboot数据访问(整合druid数据源)
- Linux 中的 "/etc/profile.d" 目录有什么作用 ?
- 标签列表
-
- oracle位图索引 (74)
- oracle基目录 (50)
- oracle批量插入数据 (65)
- oracle事务隔离级别 (53)
- oracle主从同步 (55)
- oracle 乐观锁 (51)
- redis 命令 (78)
- php redis (88)
- redis 存储 (66)
- redis 锁 (69)
- 启动 redis (66)
- redis 时间 (56)
- redis 删除 (67)
- redis内存 (57)
- redis并发 (52)
- redis 主从 (69)
- redis 订阅 (51)
- redis 登录 (54)
- redis 面试 (58)
- 阿里 redis (59)
- redis 搭建 (53)
- redis的缓存 (55)
- lua redis (58)
- redis 连接池 (61)
- redis 限流 (51)