从所有表中的MySQL数据库中删除所有零日期

时间:2014-04-30 10:21:32

标签: mysql mysql-workbench

我在MySQL中有很多表,其中包含dateTime列0000-00-00 00:00:00

中的零日期

使用某种管理设置,是否可以禁用零日期并将所有零替换为静态值1-1-1900

修改

我正在进行数据库迁移,这涉及将100多个MySQL表迁移到SQL Server。

  

我可以通过设置手动避免在每个表上执行脚本吗?   数据库模式?

9 个答案:

答案 0 :(得分:6)

要更改现有值,您可以使用如下查询:

UPDATE tablename SET date_column = '1900-01-01' WHERE date_column = '0000-00-00';

如果要自动执行UPDATE查询,可以使用预准备语句:

SET @sql_update=CONCAT_WS(' ', 'UPDATE', CONCAT(_schema, '.', _table),
                               'SET', _column, '=', '\'1900-01-01\'',
                               'WHERE', _column, '=', '\'0000-00-00\'');

PREPARE stmt FROM @sql_update;
EXECUTE stmt;
DEALLOCATE PREPARE stmt;

您可以遍历当前架构中声明为date的所有表中的所有列:

SELECT
  table_schema,
  table_name,
  column_name
FROM
  information_schema.columns
WHERE
  table_schema=DATABASE() AND data_type LIKE 'date%'

要遍历所有列,您可以使用存储过程:

DELIMITER //
CREATE PROCEDURE update_all_tables() BEGIN
  DECLARE done BOOLEAN DEFAULT FALSE;
  DECLARE _schema VARCHAR(255);
  DECLARE _table VARCHAR(255);
  DECLARE _column VARCHAR(255);
  DECLARE cur CURSOR FOR SELECT
                           CONCAT('`', REPLACE(table_schema, '`', '``'), '`'),
                           CONCAT('`', REPLACE(table_name, '`', '``'), '`'),
                           CONCAT('`', REPLACE(column_name, '`', '``'), '`')
                         FROM
                           information_schema.columns
                         WHERE
                           table_schema=DATABASE() AND data_type LIKE 'date%';

  DECLARE CONTINUE HANDLER FOR NOT FOUND SET done := TRUE;

  OPEN cur;

  columnsLoop: LOOP
    FETCH cur INTO _schema, _table, _column;
    IF done THEN
      LEAVE columnsLoop;
    END IF;   

    SET @sql_update=CONCAT_WS(' ', 'UPDATE', CONCAT(_schema, '.', _table),
                                   'SET', _column, '=', '\'1900-01-01\'',
                                   'WHERE', _column, '=', '\'0000-00-00\'');

    PREPARE stmt FROM @sql_update;
    EXECUTE stmt;
    DEALLOCATE PREPARE stmt;

  END LOOP columnsLoop;

  CLOSE cur;
END//
DELIMITER ;

请参阅示例here

答案 1 :(得分:3)

这是一个老问题,但遇到了类似的问题,除了我试图将0000-00-00设置为NULL。

试图查询此

UPDATE tablename SET date_column = NULL WHERE date_column = '0000-00-00';

并收到以下错误:

  

日期值不正确:第1行第'date_column'列的'0000-00-00'

如果没有''围绕的工作原理,我们会发出以下问题!

 UPDATE tablename SET date_column = NULL WHERE date_column = 0000-00-00;

答案 2 :(得分:2)

您可以更改运行该查询的现有值

update your_table
set date_column = '1900-01-01'
where date_column = '0000-00-00'

您可以将表格的定义更改为特定的默认值或null这样

ALTER TABLE your_table 
CHANGE date_column date_column date NOT NULL DEFAULT '1900-01-01'

答案 3 :(得分:2)

您有两种选择。

选项一 - 使用您选择的编程语言(您甚至可以使用存储过程执行此操作):

  1. 遍历您的INFORMATION_SCHEMA,可能是COLUMNS并构建一个查询以获取您需要影响的表格,即
  2. -

    SELECT TABLE_NAME FROM INFORMATION_SCHEMA.COLUMNS 
    WHERE COLUMN_NAME='date' AND TABLE_SCHEMA='<YOUR DB NAME>'
    

    或者甚至更好

    SELECT TABLE_NAME,COLUMN_NAME FROM INFORMATION_SCHEMA.COLUMNS 
    WHERE COLUMN_NAME in ('timestamp','date','datetime')
    AND TABLE_SCHEMA='<YOUR DB NAME>'
    
    1. 存储结果,然后循环遍历它们。每个循环,创建一个新的查询。在MySQL中,这是一个带有准备语句的存储过程,AKA:
    2. -

      @string = CONCAT("UPDATE ", @table_name, " SET ", @column_name, "='1-1-1900' WHERE ", @column_name, "=0000-00-00 00:00:00");
      

      PREPARE stmt FROM @string; 执行stmt;

      这不会太难写。

      选项二 - 另一个例子,虽然技术含量更高,但可能效果不差。执行mysqldump之后,在执行导出之前,您可以在文件中执行简单的搜索替换。 Vim或任何其他文本编辑器会非常熟练地执行此操作,并允许您用1-1-1900替换0000-00-00 00:00:00。因为你几乎肯定不会找到你不希望被替换的情况,这对你来说可能是最简单的选择。把它扔出去!

答案 4 :(得分:1)

在我看来,您可以用最简单的方式生成所有更新:

select
concat('UPDATE ',TABLE_NAME,' SET ',COLUMN_NAME,'=NULL WHERE ',COLUMN_NAME,'=0;')
from information_schema.COLUMNS 
where TABLE_SCHEMA = 'DATABASE_NAME' and DATA_TYPE in ('datetime', 'date', 'time');

只需将DATABASE_NAME替换为您的数据库名称,然后执行所有更新。

答案 5 :(得分:0)

您可以通过过滤日期等于0的位置来update您的表格,并且您可以为该列定义默认值。

答案 6 :(得分:0)

将您的表格改为

ALTER TABLE `test_table`
  CHANGE COLUMN `created_dt` `created_dt` date NOT NULL DEFAULT '1900-01-01';

但在更改表格之前,您需要更新现有值,因为 juergen d 表示

update test_table
set created_dt= '1900-01-01'
where created_dt= '0000-00-00'

答案 7 :(得分:0)

前缀:您可能想要在DataWareHousing中检查ETL的概念,有些工具可以为您进行简单的转换,甚至是像Kettle / Pentaho这样的开源转换。

但是当你使用任何能够编写SQL查询的编程语言时,这个很容易。我在perl中做了一个例子,但php或java也可以做这个工作:

#!/usr/bin/perl

use strict;
use warnings;
use DBI;

my $user='geheim';
my $pass='secret';

my $dbh = DBI->connect( "dbi:mysql:host=localhost:database=to_convert:port=3306", $user, $pass ) or die $DBI::errstr;

# Prints out all the statements needed, might be checked before executed
my @tables = @{ $dbh->selectall_arrayref("show tables") };
  foreach my $tableh ( @tables){
    my $tabname = $tableh->[0];
    my $sth=$dbh->prepare("explain $tabname");
    $sth->execute();
    while (my $colinfo = $sth->fetchrow_hashref){
      if ($colinfo->{'Type'} =~ /date/i && $colinfo->{'Null'} =~ /yes/i){
        print ("update \`$tabname\` set \`" . $colinfo->{'Field'} . "\` = '1990-01-01' where \`" . $colinfo->{'Field'} . "\` IS NULL; \n");
        print ("alter table \`$tabname\` change column \`" . $colinfo->{'Field'} . "\`  \`" . $colinfo->{'Field'} . "\` " . $colinfo->{'Type'} . " not null default '1990-01-01'; \n");
      }
    }
  }

这不会改变任何东西,但是当数据库有像:

这样的表时
localmysql [localhost]> explain dt;
+-------+------+------+-----+---------+-------+
| Field | Type | Null | Key | Default | Extra |
+-------+------+------+-----+---------+-------+
| a     | date | YES  |     | NULL    |       |
+-------+------+------+-----+---------+-------+
1 row in set (0.00 sec)

localmysql [localhost]> explain tst
    -> ;
+-------+----------+------+-----+---------+-------+
| Field | Type     | Null | Key | Default | Extra |
+-------+----------+------+-----+---------+-------+
| id    | int(11)  | YES  |     | NULL    |       |
| atime | datetime | YES  |     | NULL    |       |
+-------+----------+------+-----+---------+-------+
2 rows in set (0.00 sec)

它产生声明:

update `dt` set `a` = '1990-01-01' where `a` IS NULL; 
alter table `dt` change column `a`  `a` date not null default '1990-01-01'; 
update `tst` set `atime` = '1990-01-01' where `atime` IS NULL; 
alter table `tst` change column `atime`  `atime` datetime not null default '1990-01-01'; 

然后可以审查此列表并将其作为语句执行。

希望有帮助!

答案 8 :(得分:0)

由于这是用于迁移,我建议您只需将表包装在视图中,在导出数据时进行转换。我使用了以下概念将数据从MySQL移动到postgress有相同的问题。

每个表都应该用这样的代理代理;

CREATE VIEW migration_mytable AS 
SELECT field1, field2, 
    CASE field3
         WHEN '0000-00-00 00:00:00' 
         THEN '1900-01-01 00:00:00' 
         ELSE field3
    END CASE AS field3
FROM mytable;

您应该能够编写一个脚本,从目录中为您生成此脚本,以防您需要处理大量表格。

然后,您应该能够将数据导入到SqlServer表中(使用类似this的桥接器),并且只需运行类似的查询;

INSERT INTO sqlserver.mytable SELECT * FROM mysql.migration_mytable;