自动化数据库创建、更新、修改和删除的资源、工具和思路

问题描述

在一个DevOps环境中，需要找到一种自动化数据库创建、更改和其他与应用程序变更相关的修改的方法。他的数据库包括MS SQL、Oracle、MySQL，可能还包括NoSQL数据库。他已经通过网络搜索尽力找到了一些PowerShell维护脚本（备份、重建索引等），但没有找到关于从版本控制系统（如Subversion）中提取DDL，并使用Jenkins或其他工具将这些更改应用于现有数据库或创建新数据库的方法。他发现了一个TOAD工具，但这个工具将在今年晚些时候才能使用，他想知道是否有更便宜的方法。他希望能够了解到是否有最佳实践，或者是否有其他人使用的工具。

解决方案

请注意以下操作注意版本差异及修改前做好备份。

方案1

数据库迁移是一个很长时间以来的标准做法，虽然与DevOps关系不大，但显然是必需的。有一些现成的工具，与开发人员使用的ORM无关。
实际决定要将哪些DDL和DML提供给数据库的策略可能会有所不同。在最简单的情况下，您只需跟踪一个全局的“数据库版本”；或者您可以有一个列出已应用的单个迁移的表；或者您定义了一个“期望”的数据库状态，然后工具自己创建所需的DDL来将数据库当前状态更改为新状态。
一个这样的独立工具的例子是Liquibase（开源），它有很多配置方式。我提到这个工具是因为你说你没有太多时间，而且它很快就可以开始使用 – 它有一种模式，其中“配置”只是一个简单的SQL文件，其中包含与SQL注释一起的扁平（而且很小）的元信息。
根据我的经验，最大的挑战是如何处理数据结构的变化；一种方法是使所有迁移都不会丢失任何数据，也不会破坏现有的代码（或数据）。也就是说，您几乎不会在任何迁移中包含DROP TABLE或ALTER TABLE DROP COLUMN，而是让一些东西不再使用，并且当一个表、列（或其他任何数据库对象）最终不再使用，并且不可能再次使用时，然后再删除它。要更改列的类型，您将创建一个具有正确类型的新列，并将数据逐步迁移到新列；等等。这将工作直接放在开发人员的肩上，而不是迁移工具上。这是可以接受的，因为这些东西必须与应用程序的面向数据库的代码紧密对应，无论是在ORM层后面还是在ORM层之上。
这与软件开发本身的方法基本相同；即创建具有开关的新功能（使用开关部署软件，并能够快速切换），并并行实施相同功能的多个实现；只有在新实现绝对可靠时才删除旧代码。
这是一个非常简单的方法，可以快速开始使用，并且可以根据需要进行扩展和定制。

方案2

使用脚本或工具来管理数据库的创建、更新、修改和删除可能会增加复杂性，并且需要确保与数据库相关的代码正确设置。
另一种方法是编写脚本或使用工具来控制数据库的创建、更新、修改和删除。您可以使用SQL脚本和命令来手动执行这些操作，或者使用一些第三方工具来管理数据库的变更。
以下是一个简单的bash脚本示例，可以用来自动化数据库的创建、更新、修改和删除：

#!/bin/bash
# 创建数据库
mysql -u username -p password -e "CREATE DATABASE your_database"
# 更新数据库
mysql -u username -p password -D your_database -e "ALTER TABLE your_table ADD COLUMN new_column INT"
# 修改数据库
mysql -u username -p password -D your_database -e "UPDATE your_table SET column_name = 'new_value' WHERE condition"
# 删除数据库
mysql -u username -p password -e "DROP DATABASE your_database"

在这个示例中，我们使用mysql命令来执行数据库的创建、更新、修改和删除操作。您需要将username、password和your_database替换为实际的值，并根据需要修改其他命令。
请注意，这只是一个简单的示例，您可能需要根据实际情况进行修改和扩展。

方案3

使用数据库管理工具可以更方便地自动化数据库的创建、更新、修改和删除。
还有一些数据库管理工具可以帮助您更方便地自动化数据库的创建、更新、修改和删除。这些工具通常提供图形界面和命令行界面，可以帮助您执行各种数据库操作。
以下是一些常用的数据库管理工具：
– phpMyAdmin：适用于MySQL数据库的免费开源工具，提供了一个易于使用的图形界面。
– Navicat：适用于多种数据库（如MySQL、Oracle、SQL Server等）的商业工具，提供了一个强大的图形界面和丰富的功能。
– DBeaver：适用于多种数据库的免费开源工具，提供了一个通用的图形界面和强大的功能。
您可以根据自己的需求选择合适的数据库管理工具，并使用它们来自动化数据库的创建、更新、修改和删除操作。

结论

在DevOps环境中自动化数据库的创建、更新、修改和删除是一个常见的需求。您可以使用现成的工具（如Liquibase）或编写脚本来实现自动化。另外，还有一些数据库管理工具可以帮助您更方便地执行这些操作。根据您的具体需求和偏好，选择合适的方法和工具来实现自动化。