Le blog de Jean David TECHER, un Réunionnais à Saint-Priest/Lyon

Aller au contenu | Aller au menu | Aller à la recherche


< 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152 153 154 155 156 157 158 159 160 161 162 163 164 165 166 167 168 169 170 171 172 173 174 175 176 177 178 179 180 181 182 183 184 185 186 187 188 189 190 191 192 193 194 195 196 197 198 199 200 201 202 203 204 205 206 207 208 209 210 211 212 213 214 215 216 217 218 219 220 221 222 223 224 225 226 227 228 229 230 231 232 233 234 235 236 237 238 239 240 241 242 243 244 245 246 247 248 249 250 251 252 253 254 255 256 257 258 259 260 261 262 263 264 265 266 267 268 269 270 271 272 273 274 275 276 277 278 279 280 281 282 283 284 285 286 287 288 >

samedi 20 décembre 2008

Code de retour de wget

Supposons que j'ai le fichier urls.txt dont le contenu est le suivant

root@olivia:~# cat urls.txt
http://www.davidgis.fr
http://www.free.fr
http://www.zebigboss.fr
http://www.google.fr
http://www.google.frz
http://lame.sourceforge.net

Le code de retour avec wget pour une url est 0 en cas d'échec et 1 en cas de succès. Sous cette condition comme pour les booléens en C, on peut recourir à l'exemple suivant:

cat urls.txt
while read url;
do
 if wget -q "${url}";
 then
     echo "${url}";
  fi;
 done

Ou plus simplement

cat urls.txt|while read url; do wget -q "${url}" && echo "${url}";done

Ce qui donnera donc

http://www.davidgis.fr
http://www.free.fr
http://www.google.fr
http://lame.sourceforge.net

mercredi 17 décembre 2008

[PostGIS] PostGIS 1.3.5 is out! Tests avec MapServer 5.2.1 et PgRouting 1.03 pour le support de type LINE

Lundi 15 décembre 2008, PostGIS 1.3.5 est enfin sorti. Il s'agit une release mineur ayant pour but de rectifier des bugs notamment pour le TYPE LINESTRING avec MapServer, i.e. pour les layers de type LINE.

Conformément à l'un des mails relayés par Paul RAMSEY sur la mailing-list, Marc CAVE-AYLAND a fourni un sacré travail pour la correction de 3 bugs. N'ayons pas peur de lâcher les mots: il a déchiré sa race sur ce coup qui était un gros frein ces derniers mois pour MapServer...Et je pèse mes mots car depuis que la 5.2.0 de MapServer est sorti, parfois il fallait ruser en ayant recours à la fonction buffer() de PostGIS lorsque les données étaient de type LINE pour les convertir en POLYGON...Peut-être une petite ruse mais un mauvais plan dans le sens où le calcul debuffer impose des calculs géométriques assez important. Le calcul de buffer à la volée peut-être tolérable si la volumétrie en base est négligeable mais peut se révèler très pénalisant pour un serveur de production. Pour des données statiques, seul le stockage de buffer peut être envisagé mais peut aussi devenir contraignant si le stockage est aussi un frein (encombrement sur disque...)

En tentant de rendre hommage à MCA, je vais au travers de ce billet profiter du moment poru passer en revue de bonnes vieilles lignes de commandes à l'ancienne toujours à l'ancienne, comme toujours, histoire de lui rendre hommage

Let's go for ze tests!

Compilation de PostGIS 1.3.5

Comme à l'accoutumée.

wget http://www.postgis.org/download/postgis-1.3.5.tar.gz
tar xvzf postgis-1.3.5.tar.gz 
cd postgis-1.3.5
./configure 
make
make install
ldconfig

Compilation de MapServer 5.2.1

 wget http://download.osgeo.org/mapserver/mapserver-5.2.1.tar.gz
 tar xzf mapserver-5.2.1.tar.gz 
 cd mapserver-5.2.1
./configure --with-wms-client --with-wfsclient --with-wfs --with-postgis=/usr/local/pgsql/bin/pg_config --with-proj=/usr/local/ --with-geos=/usr/local/bin/geos-config --with-curl-config=/usr/bin/curl-config --with-fastcgi=/usr/lib/cgi-bin/ --with-proj=/usr/local --with-wfs --with-gd=/usr/local/ --with-ming=/usr/local/ --with-ogr=/usr/local/bin/gdal-config --with-gdal=/usr/local/bin/gdal-config --with-php=/root/php-5.2.1 --with-png --with-xml2-config=/usr/bin
make
cp mapscript/php3/php_mapscript.so  $(php-config --extension-dir)/

On vérifie juste que l'extension MapScript est bien prise en compte dans le php.ini

root@olivia:/mnt/sources/mapserver-5.2.1# grep php_mapscript.so /usr/lib/cgi-bin/php.ini 
extension=php_mapscript.so

Compilation de PgRouting 1.0.3

La pareil, j'ai tellement a flemme que rien ne vaut de belles captures d'écran. Donc on télécharge, on décompresse, et on fait un beau cmake

Et maintenant, on installe

Création d'une base de données PostGIS + PgRouting et d'un mini jeu de données

Comme toujours à l'ancienne, on crée la base avec les fonctionnalités de PostGIS et on vérifie grâce à postgis_full_version() que c'est bon.

createdb testrouting
createlang plpgsql testrouting
psql -d testrouting -f /usr/local/pgsql/share/lwpostgis.sql 
psql -d testrouting -f /usr/local/pgsql/share/spatial_ref_sys.sql 
psql -d testrouting -c "SELECT postgis_full_version()"
root@olivia:~# psql -d testrouting -c "SELECT postgis_full_version()"
                               postgis_full_version                               
----------------------------------------------------------------------------------
 POSTGIS="1.3.5" GEOS="3.0.0-CAPI-1.4.1" PROJ="Rel. 4.6.0, 21 Dec 2007" USE_STATS
(1 ligne)

Ok super!!!Maintenant on charge les fonctionnalités de PgRouting

for file in $(ls /usr/share/postlbs/*);do psql -d testrouting -f $file;done

On charge maintenant un petit jeu de données (voir l'article ici

 wget http://www.davidgis.fr/download/pgrouting_wr.sql
 psql -d testrouting -f pgrouting_wr.sql

MapServer: création de la MapFile et affichage en SVG

Conformément à l'article, on prendra la Mapfile suivante

Remarque: Conformément à la doc de PostgreSQL 8.2 pour le tuning, on prendra en considération ici que mes données sont très peu nombreuses donc je m'autorise pour le layer de nommé path de laisser mon ORDER BY sans reconfigurer mon serveur mais pour une mise en production , il est bon d'agir sur des paramètres comme work_mem de PostgreSQL - pour limiter l'écriture de fichiers temporaires sur disque - afin de fournir le meilleur tuning de base au niveau perf'...

MAP
  EXTENT 65.8612518310547 -88.3858108520508 300.999877929688 126.77375793457
  IMAGECOLOR 255 255 255
  FONTSET "/var/www/demo_routing/map/fonts.txt"
  SYMBOLSET "/var/www/demo_routing/map/symbols.sym"
  SIZE 500 457.336021282363



  IMAGETYPE svg

  OUTPUTFORMAT
    NAME svg
    MIMETYPE "image/svg+xml"
    DRIVER svg
    FORMATOPTION  "COMPRESSED_OUTPUT=FALSE"
    FORMATOPTION  "FULL_RESOLUTION=TRUE"        
  END

  STATUS ON
  NAME "wr"

  WEB
    IMAGEPATH "/var/www/tmp/"
    IMAGEURL "/tmp/"

    LOG /var/www/tmp/mapserver.log 
  END



LAYER
NAME "network"
    CONNECTION "user=postgres dbname=testrouting host=localhost"
    CONNECTIONTYPE POSTGIS
    DATA "the_geom from (select the_geom,gid from wr) as foo USING UNIQUE gid USING SRID=-1"
    TYPE LINE
    STATUS ON
    CLASS
	STYLE
          COLOR 0 123 0
          OUTLINECOLOR 255 255 0
        END
    END
END

LAYER
NAME "restrictions"
    CONNECTION "user=postgres dbname=testrouting host=localhost"
    CONNECTIONTYPE POSTGIS
    DATA "the_geom from (SELECT  the_geom,gid FROM wr  WHERE NOT (nullvalue(rule) AND nullvalue(to_cost)) ) as foo USING UNIQUE gid USING SRID=-1"
    TYPE LINE
    STATUS ON
    CLASS
        STYLE
          COLOR 255 0 0
          OUTLINECOLOR 255 255 0
        END
    END
END



LAYER
NAME "path"
    CONNECTION "user=postgres dbname=testrouting host=localhost"
    CONNECTIONTYPE POSTGIS
    DATA "the_geom FROM (SELECT the_geom,gid FROM wr RIGHT JOIN (SELECT edge_id FROM shortest_path_shooting_star('SELECT gid as id, source, target, cost, reverse_cost,x1, y1,x2, y2, rule, to_cost FROM wr order by id',20,8,true,true)) AS x(e) ON (x.e=wr.gid)) as foo USING UNIQUE gid USING SRID=-1"
    TYPE LINE
    STATUS ON
    CLASS
        STYLE
          COLOR 0 0 189
          OUTLINECOLOR 255 255 0
        END
    END
END


END

Et on aura donc


En vert le réseau, en rouge les tronçons inaccessibles, en bleu le plus court chemin pour joindre les deux extrémités du réseau tout en prenant en compte les tronçons inaccessibles

Tout ça pour ca!!

mardi 16 décembre 2008

Un grand merci...

Un grand merci à un certain F.P, S.P et E.M, Ludo et sa copine pour leur soutien de ma journée de mardi. Merci à vous tous......Quant à ceux et à celles qui me sortent leur moral à deux balles, vous ne faites nullement parti des gens que je respecte ou de mes proches. Je n'ai que faire de votre morale...

On ne joue pas avec mes nerfs...

samedi 13 décembre 2008

Petite pensée du soir, un samedi soir d'hivers à Montpellier... :)

Levé à 9h00 ce matin, j'ai vite pris un café et une clope, ai préparé mes affaires pour pouvoir décoller afin d'être à l'heure à mon RDV de 14h00 sur Montpellier. La circulation était très fluide avec très peu de voiture sur l'A8.

Je me suis arrêté au moins deux fois, histoie de me dégourdir un peu les jambes et de me détendre...A la seconde fois, j'ai ressassé un peu mon passé en me disant que cette fois, je montais pour clôturer une bonne fois pour toute ce dossier....Allez bon encore un effort et j'ai repris la route!!!

Quand j'ai vu le panneau "Languedoc-Roussillon", je me suis dit "enfin quelques efforts et je serais binetôt à la maison à Montpellier"

Pour mon RDV mes calculs ont été très juste. Je suis arrivé à mon RDV exactement à 13h45. Vers 14h20, c'était terminé. Quand je suis sorti, sans me retourner , j'ai prononcé ces deux mots:"Affaire classée!" - comme à l'accoutumée -...A mon humble avis, ils n'entenderont plus jamais parlé de moi!

Il me reste quand même pas mal de choses à faire avant que l'année ne se clôture! Voilà beaucoup de choses restent à venir et à faire mais je prends tout celà avec sérennité et patience....

Arrivé à Castelnau-Le-Lez, il faisait un froid comme pas possible!!! On se les gelait...Wooooooohhhhhhhhhhhhh

Une fois arrivé à l'appartement, j'en ai profité pour appeler la famille à la Réunion. Vu que sur l'île, c'est actuellement l'été, ma mère m'a annoncé que le thermomètre affichait 32°C ces derniers temps....Houla!!! Je ne vais donc pas me plaindre du délicieux hivers que nous avons en métropole alors ! La petite famille va bien. Ils étaient tous invité chez ma petite soeur - qui s'est marié en août dernier - à manger ce midi. Il fut question de paëlla au menu...Miam...

Demain vers 12h00~13h00, il va falloir reprendre la route afin de revenir sur Antibes. Revenir sur Montpellier aura été une petite coupure pour ce mois de décembre qui je l'espère se passera sous de bons auspices.

Ce soir posé dans l'appartement, j'ai quand même une pensée pour ce film que j'adore et qui m'a fait trippé en 1996:


Mais aussi pour cette citation de Beaudelaire qui résume à elle seule très bien ce film...

Mes chers frères, n'oubliez jamais, quand vous entendrez vanter le progrès des lumières, que la plus belle des ruses du diable est de vous persuader qu'il n'existe pas!

Charles Baudelaire,Le Joueur Généreux

Sous GNU/Linux, les plus grosses failles de sécurité proviennent de l'interface clavier/chaise! En programmation c'est pareil :)