2009/9/29 David MENTRE <dmen...@linux-france.org> > > > - changer de serveur, et impérativement booster les accès disques qui > sont > > ~90% résponsables du temps d'import (Penser au RAID 0, disques SSD, ou > > autres) > > Oui, apparemment, dixit mes condisciples, le CPU n'est pas très haut > et ce sont les I/O qui galèrent. > > Donc, pour aller plus vite, il nous faudrait un serveur plus cher avec > des disques qui poussent. :-( > > Oui, c'est en effet le problème. Actuellement, je suis en train de voir a mon bureau pour reconfigurer nos serveurs pour augmenter l'IO de nos serveurs ainsi que la RAM. Pour l'utilisation que nous en faisons, le facteur limitant est l'accès disque. Pour l'extension de nos serveurs, les CPU ne seront pas aussi pousses mais la mémoire sera très fortement montée afin de permettre un cache plus efficace en mémoire (je fais du reverse geocoding, donc une bonne utilisation du cache mémoire augmente les performances sérieusement). La base de donnée sera sûrement montée sur un SAN avec de l'accès fibre optique. Question bête: lisez vous les fichiers directement en bz2 ou ont ils été décompressés?
> > > PS2: pas besoin de diff pour l'europe, vous utilisez ceux de la terre, et > vous > > appliquez une bbox > > Ok. Pour la Bbox, il y en a de "bien connues" ? On prend le shapefile > de l'Europe sur geofabrik ? > > Oui, enfin il vaut mieux prendre leur fichier .poly et faire la bbox soit même. Prendre le shapefile oblige a faire une conversion supplémentaire mais je pense que tu faisais référence plutôt au fichier osm. > > PS3:au fait, tant que l'import d'un diff est inférieur à 24h, où est le > > problème ? > > Ben pour l'instant ça prend 9h et pendant ce temps la machine est > inutilisable. > > Hum et bien entendu on doit utiliser la fonction slim pour avoir accès aux diffs. Avez vous essayer de monter la valeur du cache mémoire? Je sais que sur mon portable ça a grandement amélioré les performances en passant de 800Mo a 1600Mo de mémoire vive. Ce n'était que sur la France mais ça peut être intéressant de voir cela. Emilie Laffray
_______________________________________________ Talk-fr mailing list Talk-fr@openstreetmap.org http://lists.openstreetmap.org/listinfo/talk-fr
