Da quel che vedo è una pura e semplice questione di traffico.

Il punto è che tu puoi limitare l'uso di risorse, oppure tener fuori questo o quel bot o addirittura porre vincoli agli utenti, però se il sito dev'essere accessibile non è una buona idea.

Insomma un sito che due volte su tre dà errore scoraggerà l'utente e lo porterà ad andare altrove.

Il secondo grafico è molto interessante. Ho visto che il 13 giugno è scoppiato il caos. Quel picco è al limite dell'assurdo. Dal 13 ad oggi cos'è successo invece?

Lo chiedo perchè somiglia moltissimo a picchi tipici di DDOS.

Allo stato attuale la cosa migliore da fare è prendere il file dei log che mi hai postato ieri e farlo analizzare da un software apposito tipo questo http://www.weblogexpert.com ( la versione lite è gratuita ).

Così otterrai una lista degli IP che rompono di più. A quel punto potremo capire al 100% cosa sta effettivamente succedendo.

Google probabilmente sta colpendo forte il tuo sito, però realisticamente questo vuol dire che ne ha un'ottima reputazione, il che si traduce in più visite e se hai pubblicità come Adsense sul sito, si traduce in più soldi guadagnati.

Voglio dire, c'è gente che farebbe carte false per avere Google sempre presente sul proprio sito.

@redsector: visto che non ho esperienza in questo tipo di modifiche preferisco evitare almeno per un pò.

@paolino: ecco l'altro grafico: tekw.org/usage2.gif

mentre io ho solo il private server per lo spazio web, non MySQL (che è condiviso credo). Attivando un PS per il database credete che la situazione possa migliorare? Cioè, le prestazioni saranno migliori e non ci sarà Internal Server Error oppure non cambia nulla?

Non ho capito però quando costa un database SQL su server privato..

Ho utilizzato il programma da te citato ma non vedo gl ip che si collegano di più, ci sono alcune voci tipo keyword più cercate, provenienza visite e via dicendo ma nessuna lista di "top visitors"

Adesso il mio blog è tornato PR3, era stato penalizzato da biG ma ho inviato un email per chiarire un mio errore ed è tornato come prima quindi le visite adesso dovrebbero aumentare di un bel pò, come il posizionamento su google. Pensavo di o spostare un altro blog che ho sul mio server, che usa anche lui molta banda (ho un server su cirtexhosting da 15$ al mese che non utilizzo più. lo usavo solo per test), potrebbe essere una soluzione?

Molto strano che il vps abbia un database mysql condiviso con altri vps.

Prova ad accedere al vps via ssh e a dare il comando "ps -A | grep mysql", dovrebbe apparire mysqld. In questo caso è sicuro che il database si trova sul vps.

Riguardo lo spostamento di altri siti, beh ovviamente aiuta.

La cosa pazzesca sono quei picchi in determinate ore e giorni. Ma non sarà che dreamhost fa auditing? In pratica ogni giorno lancia bot che cerca di hackerare i siti per verificare se sono vulnerabili. Alcuni hoster lo fanno.

Una cosa che potresti fare è iscriverti a Google analytics ( che è un servizio di statistiche free ) e usarlo per un paio di giorni sui tuoi siti per verificare con esattezza chi sono gli IP che sovraccaricano di più il vps.

Se uso il comando da shell tekw.org/ps_x.gif mi ridà sotto la scritta ps11 ecc senza altro.

Analytics l'ho messo un pò di tempo fa, però non mi dice gli IP, dice numero visite ed altre cose così nulla sugli IP, non dovrebbe bastare il LOG per vedere gli IP con più accessi?

da quando ho ridotto l'accesso al bot di google il sito va giù di meno, ma la situazione resta comunque critica..

Guardate il l'uso risorse SQL:
tekw.org/sql.gif

e della banda:
tekw.org/band.gif

Ora provo a spostare il secondo blog che usa più risorse su un'altro hosting sperando la cosa si risolva..

La prima immagine non c'è, comunque dalla seconda si capisce che mysql gira sul vps, com'è giusto che sia.

Comunque guardando i dati del traffico si tratta di numeri elevati, non gestibili da un vps di quel tipo.

La memoria è poca, ma facendo due conti manco la cpu ce la fa un granchè. I picchi che si vedono nei grafici la dicono lunga. A proposito, quanti cicli cpu ha il tuo vps? Dovrebbe essere un'informazione che ti hanno datto in fase di signup, qualcosa del tipo 200Mhz, 300Mhz, ecc...

Ciao, scusate per il ritardo ma sono stato super occupato.
Allora ho spostato 7tv e adesso non ho più problemi di downtime. Forse era proprio quello a creare problemi.
Ad ogni modo, vorrei cambiare hosting e prenderne uno che possa supportare diversi siti web, 2-3 che a breve diventeranno abbastanza grossi. Cosa mi consigliate? Un buon hosting?

Puoi dare un'occhiata qui http://www.webhostingtalk.com/forumdisplay.php?f=36

Da esperienze personali ti consiglio di scegliere un hoster inglese. I motivi sono maggiore vicinanza all'Italia anche in termini di rete ( e quindi tempi di risposta più veloci per gli utenti italiani ) e migliore infrastruttura di rete.

Inoltre i loro carrier sono connessi direttamente a quelli statunitensi, quindi permettono un transito veloce anche da e verso gli USA.

Un altro punto da valutare sono le prospettive di crescita per quei siti. Per quanto un server possa essere potente raggiungerà prima o poi il suo limite.

Così come hai avuto questo problema con un vps potrebbe riproporsi più in là con un dedicato. Ad esempio un forum come questo gira su un dedicato e lo spreme fino all'osso. In un caso del genere nient'altro può essere messo su tale server.

Il tuo caso potrebbe essere simile in futuro. Quindi potresti decidere già da adesso di avere un certo numero di server o di vps ( con xen preferibilmente ) su cui distribuire i vari siti.

Però come ho detto questo va valutato in base alle prospettive di crescita dei siti e al budget che si ha a disposizione.

Come budget al momento non oltre i 30€ al mese. Quindi non so cosa posso prenderci. PEr la crescita dei siti eh, questo è un problema. Ne ho 2-3 in via di sviluppo seriamente, e crede che entro pochi mesi arriveranno ad utilizzare molte risorse.

Quindi per ora tekw va bene su questo e regge anche gli altri. Appena avrò bisogno di più risorse (Credo fra qualche mese) provvederò a cambiare server. Tempo fa avevo uno condiviso da 18€ su netsons ed era molto veloce nel caricare le pagine (però non reggeva niente..).

Ho visto questa offerta, che te ne pare:
netsons.com/index.php/hosting-professionale-dedicato.html

Quando ci sono server dedicati tipo p4 3Ghz con 1Gb di ram sono buoni o meglio evitare?

I pentium 4 sono abbastanza vecchiotti e ho visto picchi di cpu nel tuo caso preoccupanti.

La miglior soluzione sarebbe un dual core con 1 GB o più di RAM.

Ora a CPU non supera 1 di carico e la ram sta intorno a 100Mb.

Era 7tv probabilmente che usava troppo.

Grazie paolino dell'aiuto!

Alla prossima.