Skocz do zawartości
Hosting webh.pl - 20%

Obciążenia CPU ??

Rekomendowane odpowiedzi

Opublikowano

Na początek Wszystkiego Dobrego w Nowym Roku ! ;)

Wczoraj dostałem maila od właściciela serwera dedykowanego, na którym mam serwis na IPB 2.1.3

sluchaj jest maly problem,

otoz twoje forum zjadu 20% uzycia calej mocy obliczeniowej serwera co jest sprzeczne z swiadczeniem uslug,

[...]

nie wiem na jakim silniku jedzie to forum ale jesli phpbb lub IPB to da się to zoptymalizowac i trzeba to zrobic, bo bedzie krucho, admini sa nieugiecii

jeseli jest to IPB to w panelu admina sa ustawienia do cpu i trzeba je zoptymalizowac

i właśnie mam pytanie - gdzie w ACP moge cokolwiek ustawić, co spowoduje mniejsze obciążenia CPU serwerka ? Bo szczerze mówiąc nie mam pojęcia a nie znalazłem nic konkretnego w dokumentacji z IPS'u ?

Może ktoś wie co, gdzie i jak ustawic aby moje forum generowało mniejsze obciążenia ?

Mam nadzieję, że mistrzowie wócili juz do sił po sylwku :( i ktos mi pomoże ?

Dzięki ;)

Opublikowano

TOOLS & SETTINGS -> CPU Saving:

Tutaj powyłączaj i poustawiaj to co uznasz za słuszne, ale prawda jest taka, że wiele to nie zmieni - całe obciążenie generuje duża liczba połączeń do bazy i nic raczej z tym nie zrobisz - możesz jedynie je delikatnie zmniejszyć stosując niektóre z tych opcji, ale wiele to nie da...

Przy dużych forach wysokie obciążenie servera jest normalne...

Dla przykładu moje forum (nof) aby chodził sprawnie (bez żadnych zmuł itd) potrzebował maszyny PIV 1,7GHz, 1GB RAMu ...innaczej nie dało się pracować przy prawie 200 userach online...

Opublikowano
  • Autor

hmmm racja !

Mamy bardzo zblizone fora co do wielkosci i userów online i skoro tak mówisz, to tak musi być ;)

O tym CPU Saving wiedzialem ale masz racje ze nie daje to zbyt wiele.

A co do serwera, to jestem na dual AMD Opteron Processor 244 i 4 gb

Ale to obciązenie to występuje przy koło 500 online.

A i zauwazyłem, że ShoutBox tez z D-2 jest do [beeep tralalal ] :( czasem robi wiecej zapytan do db niz całe forum ;)

Chyba czas przerzucić sie na vB ?

Mam też pytanko. Do CPU Saving prawie nigdy nie zagladałem, powiedzcie mi co to sa za funkcje (bo z opisu niewiele wynika):

Server Load Limit

Will display 'busy' message when limit hit

Can be left blank for no limit

i na ile to ustawić jak coś ?

Reducing HTML output

Print HTTP no-cache headers?

(This will stop browsers caching pages)

Cut search post to [x] characters

Refers to when returning search results as posts

Leave blank to return full post with proper formatting

Show short forum jump list?

This will remove sub-forums from the drop down list - useful if you have many

Edytowane przez AWS

Opublikowano
A i zauwazyłem, że ShoutBox tez z D-2 jest do [beeep tralalal ] wink.gif czasem robi wiecej zapytan do db niz całe forum blink.gif

Wyłącz w jego opcjach automatyczne odświeżanie co ileś tam sec (daj na 0)...bo jeśli masz powiedzmy co 30sec to co 30 sec wywoływane jest mnóstwo zapytań do bazy przy wielu userach online.

Cut search post to [x] characters

Refers to when returning search results as posts

Leave blank to return full post with proper formatting

Tutaj ustaw sobie ok 4 - 6

A pozostałe opcje...pozostaw tak jak są...wiele one nie wniosą...

Opublikowano

Witam,

Ej ludzie ... -> A mój temat o tym ? Akurat pod 2.1.X

http://www.invisionboard.pl/Optymalizacja-IPB-t472.html

Pozdrawiam,

Largo

Jeżeli Ci pomogłem, nie zapomnij proszę o kliknięciu - add.png

Możesz liczyć na moją pomoc z zakresu: PHP5, MySQL, JavaScript i Ajax | W trakcie nauki CSS i xHTML!

W sprawie pomocy z zakresu IP.Board służę pomocą w dziale Zaawansowane programowanie IP.Board

Proszę o nie wysyłanie próśb PW o prywatną pomoc - pomagam JEDYNIE na forum lub na zlecenie!

Opublikowano
  • Autor

Largo z cały szacuneczkiem, ale towje porady powodują racze np. niezmaykanie połaczeń z DB, co moze dobre jest i do zniesienia przez serwer przy 5 userach online, ale nie przy 500 !!!!!! ;)

Opublikowano
6. Zadanie optymalizacji bazy.

Wgranie pliku do sources/tasks

Dodany plik optimize.php (http://www.invisionboard.pl/index.php?act=Attach&type=post&id=76) ( 2.65k ) Liczba pobrań: 19

ACP -> Tools & Settings ->Task Manager -> Add a new task

Ustawienie zadania:

QUOTE

Task Title - Database Optimizing

Task Short Description - Checks, repaires and optimizes the MySQL-database

Task PHP File To Run - optimize.php

Task Time: Minutes - 3

Task Time: Hours - 3

Task Time: Week Day - Every Week Day

Task Time: Month Day - 15

Enable Task Logging - Yes

Enable Task? - Yes

To polecam...na każdym forum korzystam z tego skryptu dzięki czemu baza jest w 'dobrej kondycji' ;]

Opublikowano
  • Autor

To mam juz od dawna !

Msb_last a co powiesz na vB ? Ma to w ogole sens ? Czy to ze vB jest pod każdym względem lepsze od ibp to tylko mit ?

Może znasz kogoś kto by przerobił banze z ipb 2.1 na vB ? Bo mi coś z tym impexem nie wychodzi ?

Opublikowano
Msb_last a co powiesz na vB ? Ma to w ogole sens ? Czy to ze vB jest pod każdym względem lepsze od ibp to tylko mit ?

To już historia ;] Aktualnie vB leci na opinii z poprzednich lat...Jest bezpieczne, ale IPB również spełnia ten warunek...a ACP vB pozostawia wiele do życzenia (szczególnie pod względem czytelności) w stosunku do IPB.

Kolejna sprawa - nie wydaje mi się, żeby vB generowało mniejsze obciążenie - wręcz przeciwnie. IPB porównując do innych skryptów ma najbardziej zoptymalizowany kod i jest wydajniejsze - w Twoim przypadku wpływ na wydajność ma duża liczba połączeń, co generuje spore obciążenie...jak temu zapobiedz ? - postaraj się maksymalnie zmniejszyć rozmiar indexu, powyłączaj część (a nawet większość) modów i spróbuj skorzystać ze sposobów podanych w temacie Largo...i w ten sposób musisz działać, aż sytuacja servera się nie polepszy...

Może znasz kogoś kto by przerobił banze z ipb 2.1 na vB ? Bo mi coś z tym impexem nie wychodzi ?

...Ja potrafię, ale aktualnie nie bardzo mam na to czas //w ferie zimowe mógłbym się tym zająć, ale wydaje mi się, że powyższa wypowiedź przekona Cię, że nie warto przechodzić na vB ;]

Opublikowano
  • Autor

Msb_last ...... a moze przemo :( ??

widmo, admin u przema namaiwa mnie na nowe..... w nowej wersji ma miec 4 zapytania do db na głownej ?

Ale mam duuuuże uprzedzenia do wszystkiego co phpBB ........ ;)

  • 10 miesięcy temu...
Opublikowano

Chciałem dodać zadanie optymalizacji bazy, ale nie mogę tego zrobić, bo nie mam Task Manager.

(ACP -> Tools & Settings ->Task Manager -> Add a new task)

Czy ktoś mógłby dać informację dlaczego?

Opublikowano

huh.. coś musiałeś namieszać w plikach sources/admin_loaders

  • 2 tygodnie później...
Opublikowano

Witam,

niedawno stalem sie "szczesliwym posiadaczem" legalnej oczywiscie kopii IPB ;) Przenioslem sie z PHPBB by Przemo po tym jak zostalem postraszony przez home.pl logami z zapytan do bazy. Mam srednio duze forum (ponad 85k postow) i ruch sredni na poziomie 50-60 osob online w porywach do 100. Posiadalem czyste PHPBB by Przemo z aktywnym shoutboxem i galeria bez downloadu i uploadu plikow. Forum pod wzgledem konfiguracji bylo bardzo zoptymalizowane i odchudzone.

Logi jakie otrzymalem od home.pl po prostu mnie przerazily. Niektore zapytania jakie generuje skrypt phpbb by Przemo sa po prostu zabojcze dla bazy i jesli chodzi o duze fora to odradzalbym "przenosiny". Glownie chodzilo o wywolywanie zapytan o "nieprzeczytane posty" i ogolnie o pobieranie tresci postow. Zreszta... co tu duzo mowic, troche sobie przez to nagrabilem.

Ostatnio (juz po przenosinach) dostalem kolejna porcje logow z home.pl tym razem wygladaja o niebo lepiej. Idealnie nie jest ale pewnie nie bedzie z uwagi na spory ruch na moim forum.

Z tego powodu mam do was 2 pytania:

1. Czy ktos majacy forum IPB i hosting na home.pl otrzymal podobna informacje z prosba o "optymalizacje zapytan"?

2. Jak duze macie fora i czy wystarcza wam hosting wirtualny czy raczej dzialacie na dedykach? Mnie na dedyk nie stac i mam troche obaw co do najblizszej przyszlosci forum. Czy do 100 osob online to sporo?

Opublikowano

Tak, dostałem od home.pl informację tego typu:

Szanowni Państwo!

W załączniku do tego maila znajdą Państwo wynik analizy logów MySQL Państwa serwisu z okresu ostatnich 2 tygodni. Analiza dotyczy jedynie

zapytań, które:

- nie używają indeksów (serwer każdorazowo analizuje wszystkie dane w tabeli,

wczytując nadmiarowo wiele rekordów, co znacząco obciąża serwery) lub

- wykonują się ponad 3 sekundy (znacznie spowalniając i blokując

Państwa serwis).

Informacje te prosimy wykorzystać do zoptymalizowania zapytań w używanych aplikacjach oraz założenia brakujących indeksów w tabelach

MySQL.

Korzystając z panelu phpMyAdmin (http://domena.pl/sql/, login/hasło jak do bazy MySQL) i polecenia EXPLAIN mogą Państwo zbadać poziom

optymalizacji (sposób wykonania, użyte indeksy) każdego zapytania z osobna. Dokładną dokumentację dotyczącą w/w zagadnień mogą Państwo

uzyskać pod adresem:

http://dev.mysql.com/doc/refman/4.1/en/query-speed.html

Jeżeli korzystają Państwo z gotowych aplikacji, proponujemy kontakt z autorem/producentem, z prośbą o bardziej zoptymalizowaną wersję

oraz informacje na temat dodatkowych indeksów

w bazie MySQL, które zwiększą wydajność danej aplikacji. Optymalizacje takie zawarte są często już w najnowszych wersjach aplikacji -

wystarczy je zaktualizować (aktualizując także strukturę baz SQL).

Przypominamy że wymienione w załączniku zapytania są powodem powolnego działania serwisu oraz komunikatów

"503 Virtual Server overloaded - high load (or servicing) in progress".

W przypadku pojawienia się jakichkolwiek pytań związanych z tą sprawą prosimy o kontakt pod adres admin.pl

--

Administracja sieci home.pl

wraz z nią plik:

Ilość wykonanych zapytań: 4238 razy

Ilość zapytań o czasie powyżej 1 sekundy: 1057 razy

Średni czas wykonania zapytania: 1.172 sekundy

Maksymalny czas wykonania zapytania: 35 sekund

Sumaryczny czas wykonania zapytań: 4966 sekund

Średnia ilość nadmiarowo wczytanych rekordów: 5

Maksymalna ilość nadmiarowo wczytanych rekordów: 7

Sumaryczna ilość nadmiarowo wczytanych rekordów: 21190

Baza/użytkownik: skarbowcy2

Treść zapytania:

SELECT * FROM inv2_cache_store WHERE cs_key IN ( 'attachtypes','bbcode','multimod','ranks','profilefields','rss_calendar','rss_export',

'components','banfilters','settings','group_cache',

'systemvars','skin_id_cache','forum_cache','moderators','stats','languages' );

--

Ilość wykonanych zapytań: 473 razy

Ilość zapytań o czasie powyżej 1 sekundy: 461 razy

Średni czas wykonania zapytania: 5.987 sekundy

Maksymalny czas wykonania zapytania: 29 sekund

Sumaryczny czas wykonania zapytań: 2832 sekund

Średnia ilość nadmiarowo wczytanych rekordów: 0

Maksymalna ilość nadmiarowo wczytanych rekordów: 0

Sumaryczna ilość nadmiarowo wczytanych rekordów: 0

Baza/użytkownik: skarbowcy2

Treść zapytania:

select * from nuke_quotes;

--

Ilość wykonanych zapytań: 349 razy

Ilość zapytań o czasie powyżej 1 sekundy: 188 razy

Średni czas wykonania zapytania: 2.877 sekundy

Maksymalny czas wykonania zapytania: 19 sekund

Sumaryczny czas wykonania zapytań: 1004 sekund

Średnia ilość nadmiarowo wczytanych rekordów: 285

Maksymalna ilość nadmiarowo wczytanych rekordów: 628

Sumaryczna ilość nadmiarowo wczytanych rekordów: 99465

Baza/użytkownik: skarbowcy2

Treść zapytania:

SELECT c.id AS cid, c.autore, c.testo, c.data,

d.id AS did, d.titolo FROM mkp_news_comments as c INNER JOIN mkp_news as d ON c.identry = d.id WHERE d.validate = '1'

ORDER BY c.data DESC;

--

Ilość wykonanych zapytań: 131 razy

Ilość zapytań o czasie powyżej 1 sekundy: 131 razy

Średni czas wykonania zapytania: 6.687 sekundy

Maksymalny czas wykonania zapytania: 21 sekund

Sumaryczny czas wykonania zapytań: 876 sekund

Średnia ilość nadmiarowo wczytanych rekordów: 0

Maksymalna ilość nadmiarowo wczytanych rekordów: 0

Sumaryczna ilość nadmiarowo wczytanych rekordów: 0

Baza/użytkownik: skarbowcy2

Treść zapytania:

SELECT * FROM inv2_skin_templates_cache WHERE template_set_id=2 AND template_group_name IN ('skin_global', 'skin_topic');

--

Ilość wykonanych zapytań: 145 razy

Ilość zapytań o czasie powyżej 1 sekundy: 145 razy

Średni czas wykonania zapytania: 5.979 sekundy

Maksymalny czas wykonania zapytania: 16 sekund

Sumaryczny czas wykonania zapytań: 867 sekund

Średnia ilość nadmiarowo wczytanych rekordów: 0

Maksymalna ilość nadmiarowo wczytanych rekordów: 0

Sumaryczna ilość nadmiarowo wczytanych rekordów: 0

Baza/użytkownik: skarbowcy2

Treść zapytania:

SELECT * FROM inv2_skin_sets WHERE set_skin_set_id=2;

--

Ilość wykonanych zapytań: 161 razy

Ilość zapytań o czasie powyżej 1 sekundy: 35 razy

Średni czas wykonania zapytania: 1.193 sekundy

Maksymalny czas wykonania zapytania: 13 sekund

Sumaryczny czas wykonania zapytań: 192 sekund

Średnia ilość nadmiarowo wczytanych rekordów: 5

Maksymalna ilość nadmiarowo wczytanych rekordów: 10

Sumaryczna ilość nadmiarowo wczytanych rekordów: 805

Baza/użytkownik: skarbowcy2

Treść zapytania:

SELECT n.id, n.idcategoria, n.idautore, n.titolo, n.autore, n.testo, n.data, n.totalcomm, s.id AS idcat, s.titolo AS titcat,

s.icona FROM mkp_news AS n LEFT JOIN mkp_news_sections AS s ON(s.id = n.idcategoria) WHERE validate = '1' ORDER BY `id` DESC LIMIT 6;

--

oraz ostzeżenie:

Szanowni Państwo!

W wyniku prowadzonej obserwacji obciążenia serwerów w sieci home.pl, w trosce o najwyższą jakość świadczonych usług, nasi administratorzy

poddali szczegółowemu monitoringowi Państwa konto skarbowcy@home.

Po czternastodniowej obserwacji stwierdziliśmy, że obciążenie wygenerowane przez Państwa serwis w chwili obecnej znacząco przekracza

przydzielone limity, co może objawiać się wolniejszym jego działaniem oraz pojawianiem się komunikatów:

"503 Virtual Server overloaded - high load (or servicing) in progress."

Komunikat ten w standardowych warunkach nie powinien występować i świadczy zwykle o dużych nieprawidłowościach w użytych aplikacjach

PHP/Perl, a w szczególności o:

- generowaniu złożonych i niezoptymalizowanych zapytań SQL,

- braku optymalizacji oraz stosownych indeksów w używanych przez

te aplikacje tabelach SQL,

- niewłaściwie użytych algorytmach, na których opiera się dana

aplikacja.

Nieprawidłowości te powodują, że czas oraz moc obliczeniowa potrzebna na pojedyncze wyświetlenie Państwa stron opartych o w/w rozwiązania

gwałtownie rośnie, blokując przy tym możliwość równoległego korzystania przez innych korzystających z Państwa serwisu, jak i serwisów innych

Klientów umieszczonych na tym samym fizycznym serwerze.

Przypominamy, że wykupiona przez Państwa usługa hostingu współdzielonego w założeniu opiera się na współdzieleniu fizycznego serwera

przez wielu użytkowników i wysokie obciążenie generowane przez jednego z nich niekorzystnie wpływa nie tylko na Państwa serwis, ale

także na szybkość działania serwisów pozostałych użytkowników.

W związku z powyższym, w trosce o komfort użytkowania usługi, jak również ochronę zasobów innych użytkowników, zmuszeni jesteśmy

do zaproponowania następujących rozwiązań dla Państwa serwisu WWW:

1. Optymalizacja serwisu - w szczególności zapytań do baz SQL.

Równolegle do tej wiadomości, wysyłamy Państwu przetworzony wynik analizy zapytań SQL z okresu ostatnich dwóch tygodni. Zawiera on:

- zapytania, które w ogóle nie korzystają z indeksów (w efekcie przy

każdym wykonaniu zapytania muszą przeskanować wszystkie dane w tabeli

zwiększając znacząco obciążenie serwera),

- zapytania, których czas wykonania jest dłuższy niż 3 sekundy

(znacząco spowalniając i blokując Państwa serwis WWW).

W mailu zawierającym zapytania SQL znajdą Państwo także szersze informacje na temat możliwości optymalizacji.

2. Hosting dedykowany - czyli wydzierżawienie pod potrzeby utrzymania Państwa serwisu osobnego fizycznego serwera z dotychczasowym

oprogramowaniem (panele administracyjne, webmail itp.). W ramach takiego serwera jest utrzymywany wyłącznie Państwa serwis i cała moc

obliczeniowa jest do wykorzystania przez Państwa serwisy.

Koszt świadczenia usługi to 1000 zł + VAT miesięcznie (w tym 100 GB ruchu miesięcznie). W przypadku zainteresowania usługą prosimy o

kontakt z naszym Biurem Obsługi Klienta (http://home.pl/help).

3. Serwer dedykowany - wydzierżawienie pod potrzeby Państwa serwisu osobnego fizycznego serwera, którym samodzielnie Państwo

administrują (uzyskują Państwo uprawnienia użytkownika root).

b

Nasza oferta w tym zakresie dostępna jest na stronie

http://home.pl/dedykowane. W przypadku zainteresowania

usługą prosimy o kontakt z naszym Biurem Obsługi Klienta (http://home.pl/help).

Sprawę prosimy potraktować jako PILNĄ. W wypadku braku reakcji z Państwa strony do dnia 28 listopada 2006 r.

(widocznego zoptymalizowania serwisu lub deklaracji przejścia na hosting/serwer dedykowany) będziemy zmuszeni

dokonać rozwiązania umowy o świadczenie usług na podstawie par. 7 pkt c Regulaminu sieci home.pl (http://home.pl/terms).

W przypadku pojawienia się jakichkolwiek pytań związanych z tą sprawą pozostajemy do Państwa dyspozycji.

--

Administracja sieci home.pl

Potem jeszcze kilka razy administracja home.pl przesyłała mi dane odnośnie obciążenia serwera. Robię cały czas optymalizację i jestem dobrej

myśli (to znaczy, że nie będę musiał dzierżawić dedykowanego. Niestety, w praktyce oznacza to rezygnację ze wszelkiego rodzaju dodatków,

statystyk i innych rzeczy, bez których forum i MKPortal też funkcjonują.

Na forum jednorazowo przebywa maksymalnie 150 osób. Gorzej z MKPortal - tam jest jednorazowo 500 osób. Trzeba przyznać, że przesyłają

dane dotyczące obciążenia i to pozwala na ukierunkowanie działań. Aktualnie serwis "śmiga" i nie ma mowy o błędzie 503. Jeżeli nawet mnie

wywalą, przy tak zoptymalizowanym serwisie będę mógł posadzić stronę na tańszym serwerze dzielonym.

Edytowane przez inspektor

Opublikowano

@inspektor: Też miałem z tym problemy... Co chwilę otrzymywałem maile od netartu o zbyt dużym obciążeniu, co chwilę 403 (blokowali cały serwis) itp.

Zrobiłem co tylko mogłem schodząc do ilości zapytań mysql na indexie forum równej 12-13 - wyłączyłem, co tylko się dało, znacznie zmniejszyłem ilość danych przesyłanych w zapytaniach mysql, zamieniłem wiele zapytań z SELECT * FROM na SELECT wybrane_pola FROM, ale to i tak wiele nie zmieniło ;/

IPB ciągle za bardzo obciążało serwer, aż w końcu się poddałem i przeszedłem na vB ... znaczna różnica w działaniu - zastąpienie wielu funkcji POST metodą AJAX wyszło vB na bardzo wielki plus. Obciążenie znacznie spadło... ale to jest vB, a nie IPB ;/

Nad IPB trzeba będzie troszku samemu popracować i wprowadzić jak najwięcej AJAXu zamiast POST, bo IPS coś się do tego nie zbiera ;/

Opublikowano

Witajcie,

Ja rowniez posiadam konto na home.pl wczesniej dzialalem na phpBB, mialem bardzo duze problemy z 503, przesiadlem sie na IPB problem znikl..

Statystyki forum

Nasi użytkownicy napisali 190,469 postów

Mamy 15,856 zarejestrowanych użytkowników

Najnowszym użytkownikiem jest RAFAŁ91

Najwięcej użytkowników online (310) było 29/11/2006, 15:51

Posiadam Business Server PRO.

Podobno w swiecie hostingu panuje powiedzenie: "czego nie chce netart, nikt tego nie bedzie chcial."

Moj serwis juz z netartu wykopali :)

Opublikowano

to powiedzenie nie bardzo się sprawdza.... netart sprawia wrażenie jakby nie chciał tam żadnej www ;) ... bo każda to dodatkowe obciążenie ;)

Mają bardzo dobre łącze, ale bardzo kiepskie serwery, bądź też kiepsko nimi zarządzają ładując po 100, albo i więcej serwisów na jeden host... nie bacząc na obciążenie przez poszczególne generowane i od tego uzależniać ilość serwisów na dany serwer...

Opublikowano

Ja juz rozkladam rece, mimo zapewnien, ze home.pl nie zamierza nikogo wykopac z hostingu to znow dostalem wczoraj porcje logow. Moze rzucilibyscie okiem i pomogli? Home.pl upiera sie ze niektore zapytania nie wykorzystuja indexow lub wykonuja sie ponad 3 sec.

I tutaj porcja zapytan:

1.

Ilość wykonanych zapytań: 50 razy

Średnia ilość wczytanych rekordów z tabeli SQL: 54.9

Średnia ilość zwróconych jako odpowiedź rekordów: 13.8

Średnia ilość nadmiarowo wczytanych rekordów: 41.1

Efektywność zapytania (wykorzystania indeksów): 25.2%

Ilość zapytań z pustym wynikiem: 0

Ilość zapytań o czasie powyżej 1 sekundy: 50 razy

Średni czas wykonania zapytania: 4.789 sekundy

Maksymalny czas wykonania zapytania: 8.900 sekundy

Sumaryczny czas wykonania zapytań: 239 sekund

Treść zapytania:

SELECT p.*, m.id,m.name,m.mgroup,m.email,m.joined,m.posts, m.last_visit, m.last_activity,m.login_anonymous,m.title,m.hide_email, m.warn_level, m.warn_lastwarn, me.msnname,me.aim_name,me.icq_number,me.signature, me.website,me.yahoo,me.location, me.avatar_location, me.avatar_type, me.avatar_size, m.members_display_name, pc.* FROM inv2_posts p LEFT JOIN inv2_members m ON (p.author_id=m.id) LEFT JOIN inv2_member_extra me ON (me.id=m.id) LEFT JOIN inv2_pfields_content pc ON (pc.member_id=p.author_id) WHERE p.pid IN(85787,85791,85795,85797,85814,85849,85855,85856,85860,85896,85965,86028,86035

,86110,86122) ORDER BY pid asc;

---

2.

Ilość wykonanych zapytań: 3606 razy

Średnia ilość wczytanych rekordów z tabeli SQL: 187.2

Średnia ilość zwróconych jako odpowiedź rekordów: 42.5

Średnia ilość nadmiarowo wczytanych rekordów: 144.8

Efektywność zapytania (wykorzystania indeksów): 22.7%

Ilość zapytań z pustym wynikiem: 0

Ilość zapytań o czasie powyżej 1 sekundy: 2 razy

Średni czas wykonania zapytania: 0.018 sekundy

Maksymalny czas wykonania zapytania: 1.180 sekundy

Sumaryczny czas wykonania zapytań: 64 sekund

Treść zapytania:

SELECT id, member_id, member_name, login_type, running_time, member_group FROM inv2_sessions WHERE running_time > 1164574152 ORDER BY running_time DESC;

---

3.

Ilość wykonanych zapytań: 6 razy

Średnia ilość wczytanych rekordów z tabeli SQL: 3839.7

Średnia ilość zwróconych jako odpowiedź rekordów: 1.0

Średnia ilość nadmiarowo wczytanych rekordów: 3838.7

Efektywność zapytania (wykorzystania indeksów): 0.0%

Ilość zapytań z pustym wynikiem: 0

Ilość zapytań o czasie powyżej 1 sekundy: 6 razy

Średni czas wykonania zapytania: 6.555 sekundy

Maksymalny czas wykonania zapytania: 8.260 sekundy

Sumaryczny czas wykonania zapytań: 39 sekund

Treść zapytania:

SELECT count(*) as count FROM inv2_posts p LEFT JOIN inv2_topics t ON (p.topic_id=t.tid AND t.approved=1) WHERE p.queued=0 AND t.forum_id IN(148,152,153,154,155,156,149,151,160,161,162,163,164,165,157,158,159,26,36,28,

138,150,33,139,136,147,7,141,137,92,66,67,68,69,70,71,72,73,74,75,76,77,78,79,80,

81,82,83,84,85,86,87,88,89,90,91,25,117,93,140,129,130,143,131,132,17,18,144,13,1

4,133,58,142,146,19,134,118,57,98,145,21,128,135,96,30,124) AND p.author_id=2983;

---

4.

Ilość wykonanych zapytań: 2291 razy

Średnia ilość wczytanych rekordów z tabeli SQL: 151.1

Średnia ilość zwróconych jako odpowiedź rekordów: 43.7

Średnia ilość nadmiarowo wczytanych rekordów: 107.4

Efektywność zapytania (wykorzystania indeksów): 28.9%

Ilość zapytań z pustym wynikiem: 0

Ilość zapytań o czasie powyżej 1 sekundy: 6 razy

Średni czas wykonania zapytania: 0.055 sekundy

Maksymalny czas wykonania zapytania: 3.110 sekundy

Sumaryczny czas wykonania zapytań: 125 sekund

Treść zapytania:

SELECT id, member_id, member_name, login_type, running_time, member_group FROM inv2_sessions WHERE running_time > 1164574149;

---

5.

Ilość wykonanych zapytań: 681 razy

Średnia ilość wczytanych rekordów z tabeli SQL: 4357.2

Średnia ilość zwróconych jako odpowiedź rekordów: 1.0

Średnia ilość nadmiarowo wczytanych rekordów: 4356.2

Efektywność zapytania (wykorzystania indeksów): 0.0%

Ilość zapytań z pustym wynikiem: 0

Ilość zapytań o czasie powyżej 1 sekundy: 1 razy

Średni czas wykonania zapytania: 0.095 sekundy

Maksymalny czas wykonania zapytania: 1.300 sekundy

Sumaryczny czas wykonania zapytań: 64 sekund

Treść zapytania:

SELECT count(*) as count FROM inv2_topics WHERE approved=1 AND state != 'link' AND forum_id IN(148,152,153,154,155,156,149,151,160,161,162,163,164,165,157,158,159,26,36,28,

138,150,33,139,136,147,7,141,137,92,66,67,68,69,70,71,72,73,74,75,76,77,78,79,80,

81,82,83,84,85,86,87,88,89,90,91,140,129,130,143,131,132,17,18,144,13,14,133,58,1

42,146,19,134,118,57,98,145,21,128,135,96,30,124) AND last_post > '1164574603';

---

6.

Ilość wykonanych zapytań: 36 razy

Średnia ilość wczytanych rekordów z tabeli SQL: 337.0

Średnia ilość zwróconych jako odpowiedź rekordów: 68.0

Średnia ilość nadmiarowo wczytanych rekordów: 269.0

Efektywność zapytania (wykorzystania indeksów): 20.2%

Ilość zapytań z pustym wynikiem: 0

Ilość zapytań o czasie powyżej 1 sekundy: 7 razy

Średni czas wykonania zapytania: 0.742 sekundy

Maksymalny czas wykonania zapytania: 4.270 sekundy

Sumaryczny czas wykonania zapytań: 26 sekund

Treść zapytania:

SELECT f.*, p.post_time, p.post_username, p.post_approve, u.username, u.user_id, u.user_level, u.user_jr, t.topic_last_post_id, t.topic_title FROM phpbb_forums f LEFT JOIN phpbb_posts p ON (p.post_id = f.forum_last_post_id) LEFT JOIN phpbb_users u ON (u.user_id = p.poster_id) LEFT JOIN phpbb_topics t ON (t.topic_last_post_id = p.post_id AND t.forum_id = f.forum_id) ORDER BY f.forum_order, f.forum_id;

---

7.

Ilość wykonanych zapytań: 290 razy

Średnia ilość wczytanych rekordów z tabeli SQL: 4441.3

Średnia ilość zwróconych jako odpowiedź rekordów: 19.2

Średnia ilość nadmiarowo wczytanych rekordów: 4422.1

Efektywność zapytania (wykorzystania indeksów): 0.4%

Ilość zapytań z pustym wynikiem: 2

Ilość zapytań o czasie powyżej 1 sekundy: 0 razy

Średni czas wykonania zapytania: 0.122 sekundy

Maksymalny czas wykonania zapytania: 0.220 sekundy

Sumaryczny czas wykonania zapytań: 35 sekund

Treść zapytania:

SELECT t.*, t.title as topic_title,mg.mgroup as starter_group,pg.mgroup as poster_group FROM inv2_topics t LEFT JOIN inv2_members mg ON ( mg.id=t.starter_id ) LEFT JOIN inv2_members pg ON ( pg.id=t.last_poster_id ) WHERE t.approved=1 AND t.state != 'link' AND t.forum_id IN(148,152,153,154,155,156,149,151,160,161,162,163,164,165,157,158,159,26,36,28,

138,150,33,139,136,147,7,141,137,92,66,67,68,69,70,71,72,73,74,75,76,77,78,79,80,

81,82,83,84,85,86,87,88,89,90,91,25,117,140,129,130,143,131,132,17,18,144,13,14,1

33,58,142,146,19,134,118,57,98,145,21,128,135,96,30,124) AND t.last_post > 1164557214 ORDER BY t.last_post DESC LIMIT 0,25;

---

8.

Ilość wykonanych zapytań: 495 razy

Średnia ilość wczytanych rekordów z tabeli SQL: 8.0

Średnia ilość zwróconych jako odpowiedź rekordów: 0.0

Średnia ilość nadmiarowo wczytanych rekordów: 8.0

Efektywność zapytania (wykorzystania indeksów): 0.0%

Ilość zapytań z pustym wynikiem: 495

Ilość zapytań o czasie powyżej 1 sekundy: 0 razy

Średni czas wykonania zapytania: 0.054 sekundy

Maksymalny czas wykonania zapytania: 0.730 sekundy

Sumaryczny czas wykonania zapytań: 26 sekund

Treść zapytania:

SELECT * FROM phpbb_banlist WHERE ban_ip IN ('42f94864', '42f948ff', '42f9ffff', '42ffffff') OR ban_userid = -1;

---

9.

Ilość wykonanych zapytań: 133 razy

Średnia ilość wczytanych rekordów z tabeli SQL: 4367.9

Średnia ilość zwróconych jako odpowiedź rekordów: 5.0

Średnia ilość nadmiarowo wczytanych rekordów: 4362.9

Efektywność zapytania (wykorzystania indeksów): 0.1%

Ilość zapytań z pustym wynikiem: 0

Ilość zapytań o czasie powyżej 1 sekundy: 0 razy

Średni czas wykonania zapytania: 0.128 sekundy

Maksymalny czas wykonania zapytania: 0.200 sekundy

Sumaryczny czas wykonania zapytań: 16 sekund

Treść zapytania:

SELECT tid, title, posts, starter_id as member_id, starter_name as member_name, start_date as post_date, views FROM inv2_topics WHERE forum_id IN(148,152,153,154,155,156,149,151,160,161,162,163,164,165,157,158,159,26,36,28,

138,150,33,139,136,147,7,141,137,92,66,67,68,69,70,71,72,73,74,75,76,77,78,79,80,

81,82,83,84,85,86,87,88,89,90,91,25,117,93,140,129,130,143,131,132,17,18,144,13,1

4,133,58,142,146,19,134,118,57,98,145,21,128,135,96,30,124) AND approved=1 and state != 'closed' and (moved_to is null or moved_to = '') ORDER BY start_date DESC LIMIT 0,5;

---

10.

Ilość wykonanych zapytań: 371 razy

Średnia ilość wczytanych rekordów z tabeli SQL: 176.6

Średnia ilość zwróconych jako odpowiedź rekordów: 88.3

Średnia ilość nadmiarowo wczytanych rekordów: 88.3

Efektywność zapytania (wykorzystania indeksów): 50.0%

Ilość zapytań z pustym wynikiem: 0

Ilość zapytań o czasie powyżej 1 sekundy: 0 razy

Średni czas wykonania zapytania: 0.091 sekundy

Maksymalny czas wykonania zapytania: 0.460 sekundy

Sumaryczny czas wykonania zapytań: 33 sekund

Treść zapytania:

SELECT * FROM inv2_forums ORDER BY parent_id, position;

---

11.

Ilość wykonanych zapytań: 593 razy

Średnia ilość wczytanych rekordów z tabeli SQL: 190.3

Średnia ilość zwróconych jako odpowiedź rekordów: 42.5

Średnia ilość nadmiarowo wczytanych rekordów: 147.8

Efektywność zapytania (wykorzystania indeksów): 22.3%

Ilość zapytań z pustym wynikiem: 0

Ilość zapytań o czasie powyżej 1 sekundy: 0 razy

Średni czas wykonania zapytania: 0.022 sekundy

Maksymalny czas wykonania zapytania: 0.520 sekundy

Sumaryczny czas wykonania zapytań: 13 sekund

Treść zapytania:

SELECT id, member_id, member_name, login_type, running_time, member_group FROM inv2_sessions WHERE member_id !=2602 AND running_time > 1164574195 ORDER BY running_time DESC;

---

12.

Ilość wykonanych zapytań: 138 razy

Średnia ilość wczytanych rekordów z tabeli SQL: 2596.5

Średnia ilość zwróconych jako odpowiedź rekordów: 10.0

Średnia ilość nadmiarowo wczytanych rekordów: 2586.5

Efektywność zapytania (wykorzystania indeksów): 0.4%

Ilość zapytań z pustym wynikiem: 0

Ilość zapytań o czasie powyżej 1 sekundy: 0 razy

Średni czas wykonania zapytania: 0.098 sekundy

Maksymalny czas wykonania zapytania: 0.120 sekundy

Sumaryczny czas wykonania zapytań: 13 sekund

Treść zapytania:

SELECT m.*,me.*,p.* FROM inv2_members m LEFT JOIN inv2_member_extra me ON me.id=m.id LEFT JOIN inv2_pfields_content p ON (p.member_id=m.id) WHERE m.mgroup NOT IN(5) ORDER BY m.members_display_name asc LIMIT 0, 10;

---

13.

Ilość wykonanych zapytań: 402 razy

Średnia ilość wczytanych rekordów z tabeli SQL: 146.1

Średnia ilość zwróconych jako odpowiedź rekordów: 1.0

Średnia ilość nadmiarowo wczytanych rekordów: 145.1

Efektywność zapytania (wykorzystania indeksów): 0.7%

Ilość zapytań z pustym wynikiem: 0

Ilość zapytań o czasie powyżej 1 sekundy: 0 razy

Średni czas wykonania zapytania: 0.023 sekundy

Maksymalny czas wykonania zapytania: 0.180 sekundy

Sumaryczny czas wykonania zapytań: 9 sekund

Treść zapytania:

SELECT m.*, me.*, s.location_1_id, s.location_2_id, s.location_1_type, s.location_2_type, s.running_time, s.location as sesslocation FROM inv2_members m LEFT JOIN inv2_sessions s ON (s.member_id=m.id) LEFT JOIN inv2_member_extra me ON ( me.id=m.id ) WHERE m.id=316;

---

14.

Ilość wykonanych zapytań: 166 razy

Średnia ilość wczytanych rekordów z tabeli SQL: 1643.9

Średnia ilość zwróconych jako odpowiedź rekordów: 0.7

Średnia ilość nadmiarowo wczytanych rekordów: 1643.2

Efektywność zapytania (wykorzystania indeksów): 0.0%

Ilość zapytań z pustym wynikiem: 48

Ilość zapytań o czasie powyżej 1 sekundy: 0 razy

Średni czas wykonania zapytania: 0.144 sekundy

Maksymalny czas wykonania zapytania: 0.410 sekundy

Sumaryczny czas wykonania zapytań: 23 sekund

Treść zapytania:

select id, name, members_display_name, members_created_remote, email, mgroup, member_login_key, ip_address, login_anonymous from inv2_members where LOWER(name)='dragoon_pl';

---

Gdybyscie pomogli mi rozwiazac problem choc paru tych zapytan...

Opublikowano

Msb... a może mógłbyś napisać dokładniej (np. w formie jakiegoś większego artykułu) co trzeba albo wartałoby zmienić w ustawieniach (czy w plikach) forum aby obciążenie bazy było jak najmniejsze...

póki co rozumiem, że zero refresha shoutboxa (najlepiej brak shoutboxa), okrojone statystyki forum (dlatego się zastanawiam czemu masz tak rozbudowane staty tutaj na INV.) i pewne ograniczenie dotyczące przetrzymywania informacji o nieprzeczytanych postach

coś jeszcze?

sądzę, że taki większy artykuł byłby chyba pierwszym w Polsce dotyczącym INV. i przydałby się wielu administratorom swoich serwisów internetowych.

pozdrawiam

Opublikowano

A co z zapytaniami, ktore nie wykorzystuja indexow (przez to wykonuja sie dluzej)? Faktycznie takie istnieja? Home.pl najbardziej na to zwraca uwage w swoich logach...

Opublikowano

U mnie juz ok, dostalem ostatnia juz porcje logow z home.pl

11 zapytan, wszystkie wykonuja sie szybko (praktycznie czas wykonania nigdy nie przekracza sekundy) i nie obciazaja bazy danych jak zapewnilo mnie home.pl, choc moznaby je jeszcze zoptymalizowac.

Chodzi o te nieszczesne indeksy w bazie, gdyz powyzsze zapytania prawie z nich nie korzystaja. (w zalaczniku logi, gdyby ktos mial rade :)

MySQL_log.txt

Opublikowano

Z tym brakiem wykorzstania indexów wszędzie jest problem... każdy hosting zwraca na to uwagę....

Postaram się napisać jakiś większy tutorial na ten temat, w którym każdy dołoży coś od siebie i może coś nam z tego wyjdzie :)

Bo problem niewątpliwie jest poważny, a IPS nie wcale nie zabiera się za jego poprawę zapominając o zasobności polskich portfeli :)

Coś zrobimy :)

Opublikowano

Moje forum też trzymam na home.pl (serwer biznes pro) ponad 50k postów, średnio 150 userów on-line, "zużycie" trafficu ok 60-65Gb/miesiąc i śmiga.

Z doświadczenia wiem, że niektóre mody "masakrują" serwery np. mod (nie pamiętam nazwy, bo wywaliłem szybciej niż zainstalowałem - bodaj users online today - przy 3000 userów dziennie )

MKPortal też nie jest cudem optymalizacji niestety.

a btw - to samo forum na nazwa.pl - prawie "stoi" w miejscu - nazwa ostatnio w ogóle ledwo zipie.

pozdr,

MAXX

Opublikowano

taki tutel dotyczacy max. optymalizacji byłby w sam raz... bo mimo ze IPB generuje duzo mniej połączeń z bazą... to swoje ssie nie ma co ukrywać.

Ostatnio przeglądający 0

  • Brak zarejestrowanych użytkowników przeglądających tę stronę.

Konto

Nawigacja

Szukaj

Szukaj

Skonfiguruj powiadomienia push w przeglądarce

Chrome (Android)
  1. Stuknij ikonę kłódki obok paska adresu.
  2. Stuknij Uprawnienia → Powiadomienia.
  3. Dostosuj swoje ustawienie.
Chrome (Komputer)
  1. Kliknij ikonę kłódki na pasku adresu.
  2. Wybierz Ustawienia witryny.
  3. Znajdź Powiadomienia i dostosuj swoje ustawienie.