Migracja z vBulletin na invision 4.7

[grek29]

Cześć.

Jestem w trakcie przenoszenie  vBulletin 4 na Invision 4.7. 

Baza danych jest ogromna bo około 8 milionów postów, 300 tys użytkowników.  Czas przenoszenia 2-3 tygodnie przez aplikację Converter. 

1. Czy jest szybszy sposób?
2. Jak najsprawniej zrobić do importowanie nowych danych ze starego forum?
3. Czy konwersję mogę rozłożyć na kilka etapów

          najpierw) System, Blogs, Events, Pages,
          pozniej) System and Forums

[DawPi]

Ad 1 - przy tej ilości po prostu musi się wszystko „przetrawić” a 8mln postów i pewno mnóstwo załączników też. 
 

Ad 2 - do importowanie? Masz na myśli że dwa fora będą działać i potem chcesz dorzucić to co się pojawiło od momentu konwersji? To tak się nie da. 
 

Ad 3 - można ale konwerter i tak to robi po kolei. 

[grek29]

ad2  Wiadomo podczas konwersji stare forum będzie działać. Robię backup całego forum. Pożniej robię konwersję z backup'a bo z produkcji bardzo obciąża produkcyjną bazę danych. Konwersja trwa 2 tygodnie. Na starym forum pojawiają się nowe posty. Jak te posty doimportować? Chyba że jest inny sposób.

[DawPi]

Godzinę temu, DawPi napisał(a):

To tak się nie da. 

 

Źródłowe forum na czas migracji należy zamknąć albo liczyć się ze stratą zawartości która się pojawi w międzyczasie.

 

Tzn. tak (wiem już o jakie forum chodzi, chyba coś kiedyś przy nim robiłem, ale mogę się mylić) - konwersja to jest kwestia paru dni. Wtedy można forum włączyć na czas przebudowy zawartości. Można też wtedy poinformować użytkowników o przejściowych problemach.

Oczywiście należy, a nawet to konieczne przy tego typu wielkości forum, przetestować konwersję gdzieś na boku wcześniej by wyłapać ewentualnie fakapy i być na niej przygotowanym.

[grek29]

Ok. dziękują za odpowiedź.
Czy  migrację mogę podzielić na kilka etapów konwersji.

Na początek konwertuję system, members, blogs   a drugim razem forum, posts, topics. 

Czyli lepiej po prostu od razu wszystko zaznaczyć w konwersji i czekać na konwersję całą?

[DawPi]

Zaznacz wszystko i będzie działać po kolei. Oczywiście wszystko testowo by jak mówiłem wyłapać wszelakie błędy.

[grek29]

Robiąc migrację danych z vbulletin na Invision (conversion), czy można puścić przez CLI.

 

Przy okrojonej bazie, np 200 tematów przerzuca się nam w 1.8 min, 3 min. Bardzo długo to trwa.  

[DawPi]

Nie widzę opcji.

Jak to pisał ktoś z IPSu zwykle - "tak to jest skonstruowane i przy dużej ilości danych musi to trwać". Oczywiście to luźna interpretacja moich obserwacji.

[grek29]

Po zakończonej migracji. W admin, nie można wejść z ADMIN->zawartość->forum, strona nie może się załadować

błedy to:

 

 

[13-Jun-2024 08:16:11] WARNING: [pool forum] child 60690 said into stderr: "Fatal error: Maximum execution time of 0+2 seconds exceeded (terminated) in /www/system/Lang/Lang.php on line 1836"

 

Edited June 13, 2024 by grek29

[DawPi]

Ile masz forów? W ustawieniach PHP co masz pod kluczem max_execution_time? Jaka wartość?

[grek29]

W starej bazie mamy 232 fora, ale w nowej tabelce `forums_forums` pojawiło się 6018. Dubli nie ma. Czyżby migracja przeniosła też inne dane do `forums_forums`, może jakieś grupy?

 

max_execution_time = 0

[grek29]

z tego co widzę to pojawiły się rekordy `orphaned`

[DawPi]

Cytat

max_execution_time = 0

To byłoby OK, bez limitu.

5 godzin temu, grek29 napisał(a):

z tego co widzę to pojawiły się rekordy `orphaned`

A co to znaczy? Tzn. wiem, ale pokaż.

6 godzin temu, grek29 napisał(a):

W starej bazie mamy 232 fora, ale w nowej tabelce `forums_forums` pojawiło się 6018. Dubli nie ma. Czyżby migracja przeniosła też inne dane do `forums_forums`, może jakieś grupy?

Nie, na pewno nie. Kurcze, ciężko tak wnioskować, na pewno za dużo tam tego jest. Nie robiłeś czasem kilka razy konwersji na tym samym forum?