восстановить таблицу из .frm и .ibd файла?

36

Ранее я сохранил копию каталога / var / lib / mysql / ddms («ddms» - это имя схемы). Теперь я установил новый MySQL на только что установленную Ubuntu 10.04.3 LTS, запустив apt-get install mysql-serverверсию 5.1. После того, как я скопировал каталог ddms в / var / lib / mysql, некоторые из его таблиц работают нормально, это таблицы с соответствующим набором из трех файлов: файл .frm, файл .MYD и файл .MYI.

Однако есть две таблицы с различным набором файлов: файл .frm и файл .ibd. Эти две таблицы не отображаются в списке таблиц в phpMyAdmin. Когда я смотрю на журнал ошибок, он говорит:

[ERROR] Cannot find or open table ddms/dictionary_item from
the internal data dictionary of InnoDB though the .frm file for the
table exists. Maybe you have deleted and recreated InnoDB data
files but have forgotten to delete the corresponding .frm files
of InnoDB tables, or you have moved .frm files to another database?
or, the table contains indexes that this version of the engine
doesn't support.

Пожалуйста, помогите с восстановлением этих двух таблиц. Спасибо.

Тонг Ван
источник
Эта цитата Роландо от 23, 12 апреля остается в силе и сегодня. «Простое копирование файлов .frm и .ibd из одного места в другое вызывает проблемы». Используйте альтернативу, такую ​​как mysqldump, чтобы получить ваши старые данные в форму, которую можно загрузить, как и планировалось несколько лет назад. Также известен как резервное копирование.
Уилсон Хаук

Ответы:

37

Таблицы InnoDB не могут быть скопированы так же, как таблицы MyISAM.

Простое копирование файлов .frm и .ibd из одного места в другое вызывает проблемы. Копирование файлов .frm и .ibd таблицы InnoDB хорошо только тогда и только тогда, когда вы можете гарантировать, что идентификатор табличного пространства файла .ibd точно соответствует записи идентификатора табличного пространства в метаданных файла ibdata1 .

Я написал два сообщения в DBA StackExchange об этой концепции идентификатора табличного пространства

Вот отличная ссылка о том, как заново присоединить любой файл .ibd к ibdata1 в случае несовпадения идентификаторов табличного пространства: http://www.chriscalender.com/?tag=innodb-error-tablespace-id-in-file . Прочитав это, вы должны сразу же понять, что копировать файлы .ibd просто безумие.

Вы можете применить предложения из ссылки на Календарь Chris, или вы можете вернуться к старой установке mysql, запустить mysql, а затем mysqldump ddmsбазу данных. Затем импортируйте этот mysqldump в ваш новый экземпляр mysql. Поверь мне, это будет намного проще.

RolandoMySQLDBA
источник
Таким образом, отдельная таблица не может быть хорошей идеей, но как насчет всей базы данных в то время? Моя таблица пользователей плохо работала, и мне пришлось выполнить --initialize для mysqld. Могу ли я скопировать всю папку базы данных InoDB из папки data_backup?
FMaz008
Роландо, на всякий случай, если вы можете мне помочь: serverfault.com/q/908988/224334
Ionică Bizau,
Ваш пост How to Recover an InnoDB table whose files were moved around буквально спас мне жизнь. Большое спасибо.
Пауло Грайттнер
20

Я недавно испытал эту же проблему. Вот шаги, которые я использовал, чтобы решить эту проблему без необходимости возиться с идентификатором табличного пространства, как упомянуто выше RolandoMySQLDBA. Я на Mac, и поэтому я использовал MAMP для восстановления базы данных до точки, где я мог бы экспортировать ее в дамп MySQL.

Вы можете прочитать полный пост в блоге об этом здесь: http://www.quora.com/Jordan-Ryan/Web-Dev/How-to-Recover-innoDB-MySQL-files-using-MAMP-on-a-Mac

Вы должны иметь:

-ibdata1

-ib_logfile0

-ib_logfile1

-FRM файлы из вашей папки mysql_database

-Установка MAMP / MAMP Pro, которую вы готовы уничтожить (при необходимости)

  1. SSH на ваш веб-сервер (dev, production, без разницы) и перейдите в вашу папку mysql (моя была в / var / lib / mysql для установки Plesk в Linux)
  2. Сожмите папку mysql
  3. Загрузите архив папки mysql, которая должна содержать все базы данных mySQL, будь то MyISAM или innoDB (вы можете скопировать этот файл или переместить его в загружаемый каталог, если это необходимо)
  4. Установите MAMP (Mac, Apache, MySQL, PHP)
  5. Перейдите в / Приложения / MAMP / DB / MySQL /
  6. Резервное копирование / Applications / MAMP / db / mysql в zip-архив (на всякий случай)
  7. Скопируйте все папки и файлы, входящие в архив папки mysql, с рабочего сервера (в моем случае это среда mt Plesk), КРОМЕ ТОГО, ЧТОБЫ НЕ ПЕРЕЗАПИСАТЬ:

    - / Applications / MAMP / дб / MySQL / MySQL /

    - / Applications / MAMP / дб / MySQL / mysql_upgrade_info

    - / Applications / MAMP / дб / MySQL / performance_schema

  8. И вуаля, теперь вы должны иметь доступ к базам данных из phpMyAdmin, какое облегчение!

Но мы еще не закончили, теперь вам нужно выполнить mysqldump для восстановления этих файлов в вашей производственной среде, а время ожидания интерфейса phpmyadmin для больших баз данных истекло. Следуйте инструкциям здесь:

http://nickhardeman.com/308/export-import-large-database-using-mamp-with-terminal/

Скопировано ниже для справки. Обратите внимание, что при установке MAMP по умолчанию пароль является «root».

Как запустить mysqldump для MAMP с помощью терминала

База данных экспорта от MAMP [1]

Шаг первый: откройте новое окно терминала

Шаг второй: перейдите к установке MAMP, введя следующую строку в терминале cd / Applications / MAMP / library / bin. Нажмите клавишу ввода.

Шаг третий: Напишите команду дампа ./mysqldump -u [ИМЯ ПОЛЬЗОВАТЕЛЯ] -p [DATA_BASENAME]> [PATH_TO_FILE] Нажмите клавишу ввода

Пример:

./mysqldump -u root -p wp_database > /Applications/MAMP/htdocs/symposium10_wp/wp_db_onezero.sql

Совет: чтобы быстро перейти к папке, вы можете перетащить папку в окно терминала, и она запишет местоположение папки. Это был замечательный день, когда кто-то показал мне это.

Шаг четвертый: эта строка текста должна появиться после того, как вы нажмете «Ввод пароля». Так что, угадайте, что, введите ваш пароль, помните, что буквы не появятся, но они есть.

Шаг пятый: Проверьте место, где вы сохранили свой файл, если он там есть, УСПЕХА Теперь вы можете импортировать базу данных, которая будет изложена далее.

Теперь, когда у вас есть экспорт базы данных mysql, вы можете импортировать его в производственную среду.

jordan8037310
источник
1
По-прежнему работает с 2018 года. Этот ответ - золото. Для меня важная часть # 7, это те файлы, которые вы абсолютно обязаны хранить (о подобных решениях нигде больше не упоминается, спасибо за @jordan).
Bigood
@ Хорош, рад, что это все еще помогает!
Иордания8037310
получение ошибки 1146 таблица не существует при выполнении дампа
Роберт Синклер
15

Я восстановил свои файлы MySQL 5.5 * .ibd и * .frm с использованием MySQL Utilites и MariaDB 10.

1) Генерация Создать SQL.
Вы можете получить ваши создания sql из файла frm. Вы должны использовать: https://dev.mysql.com/doc/mysql-utilities/1.5/en/mysqlfrm.html

shell> mysqlfrm --server = root: pass @ localhost: 3306 c: \ MY \ t1.frm - -port = 3310

В противном случае вы можете создать свои sql.

2) Создайте свои таблицы
Создайте свои таблицы в базе данных.

3) alter table xxx сбросить табличное пространство
Откажитесь от ваших таблиц, которые вы хотите заменить ваши * .ibd файлы.

4) Скопируйте ваши * .ibd файлы (MySQL или MariaDB) в путь данных MariaDB.
Сначала я пытаюсь использовать MySQL 5.5 и 5.6 для восстановления, но база данных падает и немедленно останавливается из-за ошибки, связанной с идентификатором табличного пространства. ( ОШИБКА 1030 (HY000): Получена ошибка -1 от механизма хранения )
После того, как я использовал MariaDB 10.1.8 и успешно восстановил свои данные.

5) alter table xxx import tablespace
Когда вы запускаете этот оператор, MariaDB предупреждает о файле, но это не важно, чем восстанавливать ваши данные :) База данных все еще продолжается, и вы можете видеть ваши данные.

Я надеюсь, что эта информация будет полезна для вас.

ECD
источник
1
Это сработало для меня. Хотя mysqlfrm(пробовал версии 1.3.5 и 1.6.5 с MySQL 5.6 и 5.7) не дали правильного CREATEопределения, даже при использовании MySQL 5.7 ( ROW_FORMAT по умолчанию изменился в MySQL 5.7.9 ), что привело к Schema mismatch (Expected FSP_SPACE_FLAGS=0x21, .ibd file contains 0x0.)импорту табличного пространства. Вручную добавив ROW_FORMAT=compactв конце CREATEзаявления, добился цели .
Янис Элмерис
@ JānisElmeris> Manually adding ROW_FORMAT=compact at the end of the CREATE statement did the trick. Это тоже сработало для меня. Благодарность! Sy
Synetech
3

У меня была та же проблема, только с файлами в качестве резервной копии.

Я решил скопировать файлы базы данных в / var / lib / mysql / yourdb и ibdata1, который находится в / var / lib / mysql.

Затем я смог убедиться, что могу получить доступ к таблицам mysql -u root -p dbname и запросить некоторые таблицы, которые были ранее повреждены.

Затем я сделал дамп базы данных с помощью mysqldump -u root -p [root_password] [database_name]> dumpfilename.sql

вторник
источник
2

Если вы используете MAMP и не можете запустить MySQL после того, как скопируете свои файлы, я вставил innodb_force_recovery = 2внутрь, my.iniа затем смог запустить mysql и экспортировать мою базу данных.

Питер Уэйкман
источник
1

Если вы можете восстановить файл * .ibd на исходном сервере MySQL, не забудьте также восстановить права доступа к файлу. В моем случае (MySQL8 на CentOS7) я восстановил файл в /var/lib/mysql/db/tablename.ibd и запустил:

chown mysql tablename.ibd
chgrp mysql tablename.ibd
chmod 0640 tablename.ibd

Перед исправлением прав доступа доступ к таблице приводил к ошибке «Сервер MySQL 2006 пропал». После исправления прав доступа таблица работала (даже без перезапуска службы mysqld).

Samuraj
источник
0

Я собрал посты из похожих тем (чьи ответы здесь не публиковались):

Решение 1: https://dba.stackexchange.com/a/59978

Решение 2: https://dba.stackexchange.com/a/71785 (+ другой пост там)

Решение 3: комплект для восстановления таблиц: https://twindb.com/how-to-recover-innodb-dictionary/

Решение 4. Восстановите базу данных MySQL из папки данных без ibdata1 из файлов ibd.

Решение 5: с помощью mysqlfrmкоманды

Решение 6: https://dba.stackexchange.com/a/159001

Решение 7: https://dba.stackexchange.com/a/144573

T.Todua
источник
Это выглядит подозрительно как ответ только для ссылки.
mustaccio
Поскольку все ссылки с нашего собственного сайта, они вряд ли исчезнут, поэтому я согласен с этим @mustaccio
jcolebrand
3
Это, кажется, не добавляет особой ценности, поскольку большинство из них также появляется в списке «Связанные» на несколько пикселей справа.
mustaccio
@jcolebrand спасибо за легкомысленность. многие люди не видят полезности даже таких «непрямых» ответов. Они могут только обнаружить нарушение правил.
Т.Тодуа
1
Нет, но ты должен понять, что он прав. Вы не добавили никакой ценности. Я отвечал правилом, а не потворствовал вашему ответу. Это на самом деле довольно плохой ответ.
Jcolebrand
0

Я просто хочу добавить еще одну вещь для пользователей Macos El Capitan. Утилиты MySQL не поддерживаются для этой версии, поэтому команда mysqlfrm не помогает. Я восстановил структуры таблиц с помощью dbsake, как показано на этой ссылке: https://www.percona.com/blog/2015/12/16/recovering-table-structure-from-frm-files-using-dbsake/

Все, что вам нужно сделать, это установить dbsake:

# curl -s http://get.dbsake.net > dbsake
# chmod u+x dbsake

затем используйте команду frmdump и укажите путь к файлу .frm:

# ./dbsake frmdump /var/lib/mysql/sakila/staff.frm

Вы получите заявление о создании. Сделав это, я просто выполнил шаги 2–5, уже упомянутые @Ecd. Надеюсь, это кому-нибудь поможет.

user2804064
источник
0

Я действительно ценю Ecd. Что сработало для меня:

1.- У меня была резервная копия базы несколько месяцев назад, это помогло мне поднять эту резервную копию в xampp в Windows 10 и создать таблицы, имеющие структуру (конфигурация: Windows 10, xampp-windows-x64-7.1.30- 5-VC14) MySQL файл конфигурации my.ini в конце

NOTE: Some tables did not have ROW_FORMAT = COMPACT, so I went to operations on each 
    table and changed it manually.
    (If I did not do that, an error appeared and I did not let the import).

NOTE2: I had the backup of months ago but it should also work by first recovering 
    the structure of the .frm files in case of not having a backup at hand.
    (You can try this link:
    https://www.percona.com/blog/2014/01/02/recover-table-structure-frm-files-mysql- 
    utilities/)

2. После установки старой базы данных я приступил к выполнению команды alter table xxx discard tablespace для каждой таблицы в базе данных, которую я хотел восстановить, а затем к файлам .ibd папки данных в C: / xampp / mysql / data / system был удален (в данном случае именно этот путь)

3. Я приступил к копированию файлов .ibd из базы данных, которую я хотел восстановить, в папку xampp старой базы данных.

4. Скопировав файлы, запустите: alter table xxx import tablespace Для каждой таблицы в базе данных появится предупреждение, но мы его проигнорируем, данные будут загружены в таблицу и могут быть экспортированы позже.

5.- Экспортируйте всю базу данных в файл sql и приступайте к созданию ее в производстве и успешной работе!

# Example MySQL config file for small systems.
#
# This is for a system with little memory (<= 64M) where MySQL is only used
# from time to time and it's important that the mysqld daemon
# doesn't use much resources.
#
# You can copy this file to
# C:/xampp/mysql/bin/my.cnf to set global options,
# mysql-data-dir/my.cnf to set server-specific options (in this
# installation this directory is C:/xampp/mysql/data) or
# ~/.my.cnf to set user-specific options.
#
# In this file, you can use all long options that a program supports.
# If you want to know which options a program supports, run the program
# with the "--help" option.

# The following options will be passed to all MySQL clients
[client] 
# password       = your_password 
port            = 3306 
socket          = "C:/xampp/mysql/mysql.sock"


# Here follows entries for some specific programs 

# The MySQL server
[mysqld]
port= 3306
socket = "C:/xampp/mysql/mysql.sock"
basedir = "C:/xampp/mysql" 
tmpdir = "C:/xampp/tmp" 
datadir = "C:/xampp/mysql/data"
pid_file = "mysql.pid"
# enable-named-pipe
key_buffer = 160M
max_allowed_packet = 300M
sort_buffer_size = 1204K
net_buffer_length = 80K
read_buffer_size = 512K
read_rnd_buffer_size = 1024K
myisam_sort_buffer_size = 8M
log_error = "mysql_error.log"

# Change here for bind listening
# bind-address="127.0.0.1" 
# bind-address = ::1          # for ipv6

# Where do all the plugins live
plugin_dir = "C:/xampp/mysql/lib/plugin/" 

# Don't listen on a TCP/IP port at all. This can be a security enhancement,
# if all processes that need to connect to mysqld run on the same host.
# All interaction with mysqld must be made via Unix sockets or named pipes.
# Note that using this option without enabling named pipes on Windows
# (via the "enable-named-pipe" option) will render mysqld useless!
# 
# commented in by lampp security
#skip-networking
#skip-federated

# Replication Master Server (default)
# binary logging is required for replication
# log-bin deactivated by default since XAMPP 1.4.11
#log-bin=mysql-bin

# required unique id between 1 and 2^32 - 1
# defaults to 1 if master-host is not set
# but will not function as a master if omitted
server-id   = 1

# Replication Slave (comment out master section to use this)
#
# To configure this host as a replication slave, you can choose between
# two methods :
#
# 1) Use the CHANGE MASTER TO command (fully described in our manual) -
#    the syntax is:
#
#    CHANGE MASTER TO MASTER_HOST=<host>, MASTER_PORT=<port>,
#    MASTER_USER=<user>, MASTER_PASSWORD=<password> ;
#
#    where you replace <host>, <user>, <password> by quoted strings and
#    <port> by the master's port number (3306 by default).
#
#    Example:
#
#    CHANGE MASTER TO MASTER_HOST='125.564.12.1', MASTER_PORT=3306,
#    MASTER_USER='joe', MASTER_PASSWORD='secret';
#
# OR
#
# 2) Set the variables below. However, in case you choose this method, then
#    start replication for the first time (even unsuccessfully, for example
#    if you mistyped the password in master-password and the slave fails to
#    connect), the slave will create a master.info file, and any later
#    change in this file to the variables' values below will be ignored and
#    overridden by the content of the master.info file, unless you shutdown
#    the slave server, delete master.info and restart the slaver server.
#    For that reason, you may want to leave the lines below untouched
#    (commented) and instead use CHANGE MASTER TO (see above)
#
# required unique id between 2 and 2^32 - 1
# (and different from the master)
# defaults to 2 if master-host is set
# but will not function as a slave if omitted
#server-id       = 2
#
# The replication master for this slave - required
#master-host     =   <hostname>
#
# The username the slave will use for authentication when connecting
# to the master - required
#master-user     =   <username>
#
# The password the slave will authenticate with when connecting to
# the master - required
#master-password =   <password>
#
# The port the master is listening on.
# optional - defaults to 3306
#master-port     =  <port>
#
# binary logging - not required for slaves, but recommended
#log-bin=mysql-bin


# Point the following paths to different dedicated disks
#tmpdir = "C:/xampp/tmp"
#log-update = /path-to-dedicated-directory/hostname

# Uncomment the following if you are using BDB tables
#bdb_cache_size = 40M
#bdb_max_lock = 10000

# Comment the following if you are using InnoDB tables
#skip-innodb
innodb_data_home_dir = "C:/xampp/mysql/data"
innodb_data_file_path = ibdata1:10M:autoextend
innodb_log_group_home_dir = "C:/xampp/mysql/data"
#innodb_log_arch_dir = "C:/xampp/mysql/data"
## You can set .._buffer_pool_size up to 50 - 80 %
## of RAM but beware of setting memory usage too high
innodb_buffer_pool_size = 16M
## Set .._log_file_size to 25 % of buffer pool size
innodb_log_file_size = 50M
innodb_log_buffer_size = 8M
innodb_flush_log_at_trx_commit = 1
innodb_lock_wait_timeout = 600

## UTF 8 Settings
#init-connect=\'SET NAMES utf8\'
#collation_server=utf8_unicode_ci
#character_set_server=utf8
#skip-character-set-client-handshake
#character_sets-dir="C:/xampp/mysql/share/charsets"
sql_mode=NO_ZERO_IN_DATE,NO_ZERO_DATE,NO_ENGINE_SUBSTITUTION
log_bin_trust_function_creators = 1

[mysqldump]
quick
max_allowed_packet = 160M

[mysql]
no-auto-rehash
# Remove the next comment character if you are not familiar with SQL
#safe-updates

[isamchk]
key_buffer = 20M
sort_buffer_size = 20M
read_buffer = 2M
write_buffer = 2M

[myisamchk]
key_buffer = 20M
sort_buffer_size = 20M
read_buffer = 2M
write_buffer = 2M

[mysqlhotcopy]
interactive-timeout

Я надеюсь, что это помогает кому-то, кто имеет эту ситуацию, с уважением.

Английский предоставлен Google

Yersskit
источник