您可以通过以下步骤来修改Docker中MySQL的配置：

首先，停止正在运行的MySQL容器，可以使用以下命令：

docker stop <container_name_or_id>

使用以下命令创建一个新的MySQL容器，并将其连接到一个数据卷：

docker run -d -p 3306:3306 --name=mysql -v /my/custom:/etc/mysql/conf.d -e MYSQL_ROOT_PASSWORD=<password> mysql:tag

其中，/my/custom是您本地主机上的自定义配置文件目录。您可以将其替换为您想要使用的目录。<password>是MySQL的root密码，mysql:tag是您所需的MySQL映像和标签。

在自定义配置文件目录中创建一个新的配置文件，例如custom.cnf。您可以使用任何文本编辑器来创建并编辑该文件。

在custom.cnf文件中添加您想要修改的配置选项。例如，如果您想要修改MySQL的字符集配置，您可以添加以下内容：

[mysqld]character_set_server=utf8mb4collation_server=utf8mb4_unicode_ci

保存并关闭文件。

启动MySQL容器：

docker start <container_name_or_id>

现在，您已经成功修改了MySQL容器的配置。您可以通过连接到MySQL容器并运行SHOW VARIABLES命令来验证更改是否已生效。