Skip to content

SQL 审核 审计 执行 备份 索引优化,代码检查等

License

Notifications You must be signed in to change notification settings

opendevops-cn/codo-check

Repository files navigation

SQL 审核 审计 执行 备份 索引优化 ,代码质量管理等。

更新日志

在线访问

代码质量管理

为什么要使用:

糟糕的复杂度分布
  文件、类、方法等,如果复杂度过高将难以改变,这会使得开发人员难以理解它们,
  且如果没有自动化的单元测试,对于程序中的任何组件的改变都将可能导致需要全面的回归测试
重复
 显然程序中包含大量复制粘贴的代码是质量低下的,sonar可以展示源码中重复严重的地方
缺乏单元测试
  sonar可以很方便地统计并展示单元测试覆盖率
没有代码标准
  sonar可以通过PMD,CheckStyle,Findbugs等等代码规则检测工具规范代码编写
没有足够的或者过多的注释
  没有注释将使代码可读性变差,特别是当不可避免地出现人员变动时,程序的可读性将大幅下降
  而过多的注释又会使得开发人员将精力过多地花费在阅读注释上,亦违背初衷
潜在的bug
  sonar可以通过PMD,CheckStyle,Findbugs等等代码规则检测工具检测出潜在的bug
糟糕的设计
  通过sonar可以找出循环,展示包与包、类与类之间的相互依赖关系
  可以检测自定义的架构规则,可以检测单个任务规则的应用情况
  检测耦合

简介

SonarQube 是一个开源的代码分析平台, 用来持续分析和评测项目源代码的质量。 通过SonarQube我们可以检测出项目中重复代码, 潜在bug, 代码风格问题,缺乏单元测试等问题, 并通过一个web ui展示出来

环境部署

SonarQube 介绍 部署 配置

脚本部署

  • 脚本下载
    mkdir -p  /opt/ops_scripts/ && cd  /opt/ops_scripts/ && git clone https://github.com/opendevops-cn/codo-check.git
    
  • 配置 settings
  • 安装依赖 pip3 install -r requirements.txt

约束

  • 当前主机可以执行 /usr/local/sonar-scanner/bin/sonar-scanner 命令。如何部署请看部署文档
  • 当前注意可以 拉取 相关git仓库的代码。可以使用git的 deploy_keys

使用说明

待完善

SQL 审核 审计 执行 备份

Inception简介:

Inception是集审核、执行、回滚于一体的一个自动化运维系统,它是根据MySQL代码修改过来的,用它可以很明确的,详细的,准确的审核MySQL的SQL语句,它的工作模式和MySQL完全相同,可以直接使用MySQL客户端来连接,但不需要验证权限,它相对应用程序(上层审核流程系统等)而言,是一个服务器,在连接时需要指定服务器地址及Inception服务器的端口即可,而它相对要审核或执行的语句所对应的线上MySQL服务器来说,是一个客户端,它在内部需要实时的连接数据库服务器来获取所需要的信息,或者直接在在线上执行相应的语句及获取binlog等,Inception就是一个中间性质的服务 本项目使用inception 结合CMDB,把SQL审核接入运维自动化平台,方便直接在运维平台使用,拥有审计,审核,执行,备份功能,并且可以结合代码发布使用

Inception 介绍 部署 配置

部署 配置

  • 部署参考部署文档
  • 因为作者已经删除此项目,所以需要此项功能请自行去github找相关代码
  • inception 配置参考 上述文档, 默认IP为127.0.0.1 端口6669, 密码为空

脚本部署

# 本脚本根据应用名称从CMDB查找当前应用的数据库信息,根据执行模板里面配置的强制主机上执行(强制主机须能连上要审核执行的数据库),数据库语句放在git仓库,通过http地址获取
# 本次审核执行会在当前应用的所有主库执行,如果使用应用本身的分库分表,可能会出现错误,请自行根据报错信息处理问题 

SQL索引优化

为什么要使用:

例行 SQL 优化,不仅可以提升程序性能,还能够降低线上故障的概率。
目前常用的 SQL 优化方式包括但不限于:业务层优化、SQL逻辑优化、索引优化等。其中索引优化通常通过调整索引或新增索引从而达到 SQL 优化的目的。索引优化往往可以在短时间内产生非常巨大的效果。如果能够将索引优化转化成工具化、标准化的流程,减少人工介入的工作量,无疑会大大提高的工作效率。

SQLAdvisor简介

SQLAdvisor 是由美团点评公司北京DBA团队开发维护的 SQL 优化工具:输入SQL,输出索引优化建议。 它基于 MySQL 原生词法解析,再结合 SQL 中的 where 条件以及字段选择度、聚合条件、多表 Join 关系等最终输出最优的索引优化建议。目前 SQLAdvisor 在公司内部大量使用,较为成熟、稳定。

环境部署

SQLAdvisor 部署 配置

脚本部署

  • 脚本下载 如果已经下载,则可以省略当前步骤
    mkdir -p  /opt/ops_scripts/ && cd  /opt/ops_scripts/ && git clone https://github.com/opendevops-cn/codo-check.git
    
  • 配置 settings
  • 安装依赖 pip3 install -r requirements.txt

约束

  • 当前主机可以执行 /usr/local/sonar-scanner/bin/sonar-scanner 命令。如何部署请看部署文档
  • 当前注意可以 拉取 相关git仓库的代码。可以使用git的 deploy_keys

License

Everything is GPL v3.0.

About

SQL 审核 审计 执行 备份 索引优化,代码检查等

Resources

License

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Languages