{"id":9053,"date":"2019-10-14T11:35:55","date_gmt":"2019-10-14T09:35:55","guid":{"rendered":"https:\/\/www.sigterritoires.fr\/?p=9053"},"modified":"2019-10-17T16:58:58","modified_gmt":"2019-10-17T14:58:58","slug":"migration-arcgis-vers-qgis-les-donnees","status":"publish","type":"post","link":"https:\/\/www.sigterritoires.fr\/index.php\/migration-arcgis-vers-qgis-les-donnees\/","title":{"rendered":"Migration ArcGis vers QGis: les donn\u00e9es"},"content":{"rendered":"\n

Dans l’article pr\u00e9c\u00e9dent (Cohabitation ArcGis-QGis: les donn\u00e9es vecteur<\/a> ) nous avons vu comment utiliser les donn\u00e9es d’ArcGis (shapefile<\/a>, geodabase personnelle et geodatabase fichier) dans QGis. Dans cet article nous allons voir l’\u00e9tape suivante, c’est \u00e0 dire la migration de ces formats vers des formats plus en accord avec l’architecture autour de QGis.<\/p>\n\n\n\n

Nous allons essayer de r\u00e9pondre \u00e0 deux questions:<\/p>\n\n\n\n

vers quel format migrer vos donn\u00e9es?<\/li>
avec quel(s) outil(s) effectuer cette migration?<\/li><\/ul>\n\n\n\n\n\n\n\n
Nous prendrons en compte les trois formats mentionn\u00e9s:<\/p>\n\n\n\n
- geodatabase fichier <\/li><\/ul>\n\n\n\n
  Nous avons laiss\u00e9 de c\u00f4t\u00e9 deux sujets, qu’il faudra bien aborder lors d’une migration compl\u00e8te: les donn\u00e9es raster et, si c’est le cas, les geodatabase entreprise.<\/p>\n\n\n\n
  Migration des shapefiles <\/h2>\n\n\n\n
  Vous pouvez vous demander si cette question est pertinente,car le format shapefile est presque le format le plus courant pour QGis. Toutes les commandes et outils de QGis travaillent avec ce format.<\/p>\n\n\n\n
  Ce qu’il faut savoir c’est que, si bien il n’est pas indispensable de changer de format si vos donn\u00e9es sont sous la forme de shapefiles, le changement de logiciel est une bonne opportunit\u00e9 pour changer ses vieilles habitudes.<\/p>\n\n\n\n
  Voici le r\u00e9pertoire d’un projet assez simple o\u00f9 on a 18 couches sous formes de shapefiles:<\/p>\n\n\n\n
  $\"\"$ <\/a><\/figure>\n\n\n\n
  Et voici le m\u00eame projet mais en utilisant le format Geopackage<\/a>:<\/p>\n\n\n\n
  $\"\"$ <\/a><\/figure>\n\n\n\n
  Et comment on voit ce format dans le panneau Explorateur de QGis:<\/p>\n\n\n\n
  $\"\"$ <\/a><\/figure>\n\n\n\n
  Geopackage est un format de donn\u00e9es vecteur et raster bas\u00e9 sur SQLite. C’est un format de base de donn\u00e9es mais qui est transparent pour l’utilisateur. SQLite est install\u00e9 par d\u00e9faut par les logiciels qui l’utilisent. <\/p>\n\n\n\n
  Dans QGis, vous pouvez travailler directement \u00e0 partir des outils classiques. Vous pouvez sauvegarder avec ce format simplement en le choisissant dans la fen\u00eatre d’export de donn\u00e9es:<\/p>\n\n\n\n
  $\"\"$ <\/a><\/figure>\n\n\n\n
  Mais vous pouvez aussi le g\u00e9rer \u00e0 partir du Gestionnaire de bases de donn\u00e9es (DB Manager):<\/p>\n\n\n\n
  $\"\"$ <\/a><\/figure>\n\n\n\n
  Avec ce gestionnaire vous pouvez travailler directement en SQL sur vos tables ainsi que sur vos g\u00e9om\u00e9tries. La version utilis\u00e9e par QGis est Spatialite ce qui correspond \u00e0 la base de donn\u00e9es SQLite et l’extension spatiale, tout comme PostgreSQL et Postgis<\/a>.<\/p>\n\n\n\n
  Ceci vous permet, par exemple, de valider de mani\u00e8re compl\u00e8te les g\u00e9om\u00e9tries de vos couches:<\/p>\n\n\n\n
  $\"\"$ <\/a><\/figure>\n\n\n\n
  Pour plus de d\u00e9tails sur la validation des g\u00e9om\u00e9tries avec Spatialite, r\u00e9f\u00e9rez-vous \u00e0 l’article Les outils SIG de validation des g\u00e9om\u00e9tries(2) : Spatialite et PostGis<\/a><\/em><\/strong>.<\/p>\n\n\n\n
  Nous verrons dans la deuxi\u00e8me partie de cette article comment effectuer cette migration, mais sachez d\u00e9j\u00e0 qu’une ligne de commande suffit \u00e0 transformer votre r\u00e9pertoire de shapefiles en fichier geopackage.<\/p>\n\n\n\n
  Migration des geodatabases personnelles (.mdb) ou fichier (.gdb)<\/h2>\n\n\n\n
  Si vous travaillez avec des geodatabases (personnelles ou fichier) vous avez d\u00e9j\u00e0 franchi le pas du chapitre pr\u00e9c\u00e9dent et pass\u00e9 d’une gestion de couches individuelles \u00e0 une gestion de couches de base de donn\u00e9es.<\/p>\n\n\n\n
  Il se peut que vous ayez franchi ce pas pour simplifier la gestion des fichiers et ne pas avoir de multiples fichiers pour chaque projet. Ou il se peut que vous soyez vraiment pass\u00e9 \u00e0 une gestion de base de donn\u00e9es relationnelle en exploitant la puissance de celles-ci.<\/p>\n\n\n\n
  Par exemple, vous pouvez avoir mis en place des proc\u00e9dures qui acc\u00e8dent directement \u00e0 la base de donn\u00e9es Access, sans passer par ArcGis., ou des traitements de validation multi-tables.<\/p>\n\n\n\n
  Dans l’architecture autour de QGis, il y a deux options les plus courantes: les fichiers geopackage et les bases de donn\u00e9es Postgis.<\/p>\n\n\n\n
  La premi\u00e8re option est une option l\u00e9g\u00e8re. Pas d’apprentissage, pas d’installation ni configuration, bref c’est vraiment l’\u00e9quivalent de la geodatabase personnelle d’ArcGis. Except\u00e9 en ce qui concerne les limites de taille: tandis que la geodatabase personnelle est limit\u00e9e \u00e0 2 Go, les base SQLite (format utilis\u00e9 par geopackage) sont limit\u00e9es \u00e0 140 To. Une autre diff\u00e9rence que nous verrons dans l’article consacr\u00e9 \u00e0 la migration des donn\u00e9e raster est que les rasters sont vraiment inclus dans la base SQLite. En ce qui concerne la geodabase personnelle les rasters sont en r\u00e9alit\u00e9 stock\u00e9s dans des fichiers cach\u00e9s, en dehors de la base Access.<\/p>\n\n\n\n
  Mais si la base Access d’ArcGis commen\u00e7ait \u00e0 vous faire sentir \u00e0 l’\u00e9troit, la deuxi\u00e8me option (PostgreSQL\/Postgis) m\u00e9rite peut \u00eatre votre attention. Les bases PostgreSQL sont l’\u00e9quivalent des bases de donn\u00e9es entreprise d’ArcGis. Bien s\u00fbr, la mise en place n\u00e9cessite le d\u00e9veloppement de comp\u00e9tences, mais les possibilit\u00e9s qui s’ouvrent sont \u00e9normes.<\/p>\n\n\n\n
  L’avantage par rapport \u00e0 ArcGis Server ou Enterprise, c’est que vous pouvez installer le logiciel et commencer \u00e0 travailler en quelques minutes. Vous pouvez l’installer sur votre PC et apprendre \u00e0 l’utiliser, avant de passer \u00e0 l’installation de production sur un serveur. Pour plus de d\u00e9tails sur la mise en place de PostgreSQL\/Postgis, r\u00e9f\u00e9rez-vous \u00e0 l’article D\u00e9buter avec Postgres\/Postgis<\/em><\/strong><\/a> .<\/p>\n\n\n\n
  Un autre avantage des bases PostgreSQL avec QGis est que, \u00e0 la diff\u00e9rence d’ArcGis, QGis utilise la base de donn\u00e9es native, sans surcouche (ArcSDE) et donc rendant beaucoup plus simple le travail.<\/p>\n\n\n\n
  L’outil de migration GDAL-ogr <\/h2>\n\n\n\n
  Malgr\u00e9 notre habitude et notre pr\u00e9f\u00e9rence pour les interfaces graphiques, il reste encore des domaines o\u00f9 la vieille ligne de commande nous permet de gagner du temps et des efforts.<\/p>\n\n\n\n
  Le changement de format pour les donn\u00e9es spatiales avec QGis en est un. Bien s\u00fbr, vous pourrez faire (presque) tout \u00e0 partir des outils de QGis, mais vous verrez avec quelques exemple que c’est plus pratique de se lancer dans la ligne de commande.<\/p>\n\n\n\n
  Tout d’abord, rappelons que QGis s’appuie pour la lecture et \u00e9criture des fichiers de donn\u00e9es sur la biblioth\u00e8que GDAL. Nous allons donc utiliser la m\u00eame biblioth\u00e8que, mais en ligne de commande.<\/p>\n\n\n\n
  La commande GDAL qui fait une transformation d’un format en un autre est ogr2ogr<\/strong>. Vous trouverez la documentation compl\u00e8te de cette commande \u00e0 l’adresse https:\/\/gdal.org\/programs\/ogr2ogr.html<\/a><\/p>\n\n\n\n
  Mais sa structure est tr\u00e8s simple, \u00e0 la base:<\/p>\n\n\n\n
  ogr2ogr -f Format_de_sortie Fichier_de_sortie Fichier_en_entr\u00e9e<\/em><\/strong><\/p>\n\n\n\n
  Pour travailler en ligne de commande il vous faut ouvrir une fen\u00eatre de Shell \u00e0 partir de la barre de t\u00e2ches QGis:<\/p>\n\n\n\n
  $\"\"$ <\/a><\/figure>\n\n\n\n
  $\"\"$ <\/figure>\n\n\n\n
  Migration de shapefiles vers Geopackage<\/h2>\n\n\n\n
  Pour passer du format shapefile vers le format gpkg une couche shapefile il suffit de rentrer la ligne de commande<\/p>\n\n\n\n
  ogr2ogr -f <\/em><\/strong> GPKG c:\/ArcGis\/migrer\/test.gpkg c:\/ArcGis\/migrer\/surface_eau.shp<\/em><\/strong><\/p>\n\n\n\n
  Cette commande cr\u00e9e ou \u00e9crase le fichier en sortie test.gpkg et int\u00e8gre les donn\u00e9es du fichier surface_eau.shp en tant que table nomm\u00e9e surface_eau dans le fichier gpkg.<\/p>\n\n\n\n
  Si le fichier gpkg existe d\u00e9j\u00e0 et que nous voulons rajouter des donn\u00e9es sans \u00e9craser le contenu existant, il suffit de rajouter l’option -append<\/p>\n\n\n\n
  ogr2ogr -f <\/em><\/strong> GPKG c:\/ArcGis\/migrer\/test.gpkg c:\/ArcGis\/migrer\/surface_eau.shp<\/em><\/strong> -append<\/em><\/strong><\/p>\n\n\n\n
  Et si nous voulons int\u00e9grer tous les shapefiles pr\u00e9sent dans le r\u00e9pertoire avec une seule instruction, il suffit de mettre seulement le chemin du r\u00e9pertoire<\/p>\n\n\n\n
  ogr2ogr -f <\/em><\/strong>GPKG c:\/ArcGis\/migrer\/test.gpkg c:\/ArcGis\/migrer\/<\/em><\/strong><\/p>\n\n\n\n
  Migration vers Postgresql\/Postgis <\/h2>\n\n\n\n
  Il est tout aussi simple de migrer des donn\u00e9es vers une base de donn\u00e9es Postgresql\/Postgis.<\/p>\n\n\n\n
  La seule contrainte est que la base de donn\u00e9es doit exister (la commande ne peut pas cr\u00e9er la base) et, si vous souhaitez cr\u00e9er les tables dans un autre sch\u00e9ma que le sch\u00e9ma par d\u00e9faut, le sch\u00e9ma doit avoir \u00e9t\u00e9 cr\u00e9\u00e9 auparavant.<\/p>\n\n\n\n
  A partir d’une geodatabase fichier, la commande de base est<\/p>\n\n\n\n
  ogr2ogr -f \u00ab\u00a0PostgreSQL\u00a0\u00bb PG:\u00a0\u00bbhost=<\/strong>servername<\/strong><\/em> port=5432 user=’<\/strong>username<\/strong><\/em>‘ password=’<\/strong>password<\/strong><\/em>‘ dbname=’<\/strong>PostGISDBName<\/strong><\/em>‘\u00a0\u00bb <\/strong>fichier.<\/strong><\/em>gdb<\/strong><\/p>\n\n\n\n
  PG:\u00a0\u00bb…\u00a0\u00bb<\/strong> est la cha\u00eene de connexion \u00e0 votre base de donn\u00e9es Postgresql<\/p>\n\n\n\n
  Toutes les tables vecteur de votre geodatabase fichier seront copi\u00e9es vers le sch\u00e9ma par d\u00e9faut(public) de votre base Postgresql. Les tables raster de la geodatabase seront ignor\u00e9es.<\/p>\n\n\n\n
  Si vous souhaitez que la destination des tables soit un autre sch\u00e9ma de votre base, il faut rajouter le param\u00e8tre -lco SCHEMA=nom_du_sch\u00e9ma:<\/p>\n\n\n\n
  ogr2ogr -f \u00ab\u00a0PostgreSQL\u00a0\u00bb PG:\u00a0\u00bbhost=<\/strong>servername<\/strong><\/em> port=5432 user=’<\/strong>username<\/strong><\/em>‘ password=’<\/strong>password<\/strong><\/em>‘ dbname=’<\/strong>PostGISDBName<\/strong><\/em>‘\u00a0\u00bb <\/strong> -lco SCHEMA=nom_du_sch\u00e9ma<\/strong> <\/strong>fichier.<\/strong><\/em>gdb<\/strong><\/p>\n\n\n\n
  A cette commande de base on peut ajouter une s\u00e9rie d’options. Vous trouverez une description d\u00e9taill\u00e9e sur ce lien: https:\/\/gdal.org\/drivers\/vector\/pg.html<\/a>.<\/p>\n\n\n\n
  Vous remarquerez que la commande charge le dernier \u00e9l\u00e9ment (fichier.gdb). Vous n’avez pas besoin d’indiquer le format des donn\u00e9es que vous voulez charger, GDAL identifiant le format en fonction de l’extension.<\/p>\n\n\n\n
  Pour charger un shapefile, alors, il suffit de modifier ce dernier \u00e9l\u00e9ment:<\/p>\n\n\n\n
  ogr2ogr -f \u00ab\u00a0PostgreSQL\u00a0\u00bb PG:\u00a0\u00bbhost=<\/strong>servername<\/strong><\/em> port=5432 user=’<\/strong>username<\/strong><\/em>‘ password=’<\/strong>password<\/strong><\/em>‘ dbname=’<\/strong>PostGISDBName<\/strong><\/em>‘\u00a0\u00bb -lco SCHEMA=nom_du_sch\u00e9ma <\/strong>fichier.<\/strong><\/em>shp<\/strong><\/p>\n\n\n\n
  Ou bien pour charger tous les shapefiles d’un r\u00e9pertoire, comme on l’a vu plus haut, il suffit de renter le chemin du r\u00e9pertoire:<\/p>\n\n\n\n
  ogr2ogr -f \u00ab\u00a0PostgreSQL\u00a0\u00bb PG:\u00a0\u00bbhost=<\/strong>servername<\/strong><\/em> port=5432 user=’<\/strong>username<\/strong><\/em>‘ password=’<\/strong>password<\/strong><\/em>‘ dbname=’<\/strong>PostGISDBName<\/strong><\/em>‘\u00a0\u00bb -lco SCHEMA=nom_du_sch\u00e9ma <\/strong>c:\/chemin\/<\/strong><\/em><\/p>\n\n\n\n
  Pour une geodatabase personnelle (.mdb)<\/p>\n\n\n\n
  ogr2ogr -f \u00ab\u00a0PostgreSQL\u00a0\u00bb PG:\u00a0\u00bbhost=<\/strong>servername<\/strong><\/em> port=5432 user=’<\/strong>username<\/strong><\/em>‘ password=’<\/strong>password<\/strong><\/em>‘ dbname=’<\/strong>PostGISDBName<\/strong><\/em>‘\u00a0\u00bb -lco SCHEMA=nom_du_sch\u00e9ma <\/strong>fichier.mdb<\/strong><\/em><\/p>\n\n\n\n
  Ce qu’il faut savoir sur la migration d’une geodabase ESRi vers une base de donn\u00e9es Postgresql c’est que la notion de jeu de classes d’entit\u00e9s (Feature Dataset) n’existe pas. Toutes les tables de la geodatabase ,les classes d’entit\u00e9s (Feature Class), seront copi\u00e9es dans le m\u00eame sch\u00e9ma.<\/p>\n\n\n\n
  La migration de la geodatabase suivante:<\/p>\n\n\n\n
  $\"\"$ <\/a><\/figure>\n\n\n\n
  Donnera la base de donn\u00e9es Postgresql suivante:<\/p>\n\n\n\n
  $\"\"$ <\/figure>\n\n\n\n
  Les tables se retrouvent toutes au m\u00eame niveau et les rasters ont \u00e9t\u00e9 ignor\u00e9s.<\/p>\n\n\n\n
  N’oubliez pas les tests de validit\u00e9 des g\u00e9om\u00e9tries<\/a>. Vous serez surpris du nombre d’erreurs que l’on trouve lors de la migration.<\/p>\n","protected":false},"excerpt":{"rendered":"
  Dans l’article pr\u00e9c\u00e9dent (Cohabitation ArcGis-QGis: les donn\u00e9es vecteur ) nous avons vu comment utiliser les donn\u00e9es d’ArcGis (shapefile, geodabase personnelle et geodatabase fichier) dans QGis. Dans cet article nous allons voir l’\u00e9tape suivante, c’est \u00e0 dire…<\/p>\n","protected":false},"author":1,"featured_media":0,"comment_status":"open","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"give_campaign_id":0,"_bbp_topic_count":0,"_bbp_reply_count":0,"_bbp_total_topic_count":0,"_bbp_total_reply_count":0,"_bbp_voice_count":0,"_bbp_anonymous_reply_count":0,"_bbp_topic_count_hidden":0,"_bbp_reply_count_hidden":0,"_bbp_forum_subforum_count":0,"sfsi_plus_gutenberg_text_before_share":"","sfsi_plus_gutenberg_show_text_before_share":"","sfsi_plus_gutenberg_icon_type":"","sfsi_plus_gutenberg_icon_alignemt":"","sfsi_plus_gutenburg_max_per_row":"","_monsterinsights_skip_tracking":false,"_monsterinsights_sitenote_active":false,"_monsterinsights_sitenote_note":"","_monsterinsights_sitenote_category":0,"_jetpack_newsletter_access":"","_jetpack_dont_email_post_to_subs":false,"_jetpack_newsletter_tier_id":0,"_jetpack_memberships_contains_paywalled_content":false,"_jetpack_memberships_contains_paid_content":false,"footnotes":"","jetpack_post_was_ever_published":false},"categories":[145,9,209,146,311,62,1636],"tags":[15,44,227,1476,256],"class_list":["post-9053","post","type-post","status-publish","format-standard","hentry","category-arcgis","category-arcgis-pro","category-arcgisqgis","category-arcmap","category-postgresql","category-qgis-2","category-spatialite","tag-arcgis","tag-geodatabase","tag-postgis","tag-qgis-3","tag-shapefile"],"aioseo_notices":[],"jetpack_featured_media_url":"","jetpack_shortlink":"https:\/\/wp.me\/p6XU0A-2m1","jetpack_sharing_enabled":true,"_links":{"self":[{"href":"https:\/\/www.sigterritoires.fr\/index.php\/wp-json\/wp\/v2\/posts\/9053","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/www.sigterritoires.fr\/index.php\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/www.sigterritoires.fr\/index.php\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/www.sigterritoires.fr\/index.php\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/www.sigterritoires.fr\/index.php\/wp-json\/wp\/v2\/comments?post=9053"}],"version-history":[{"count":0,"href":"https:\/\/www.sigterritoires.fr\/index.php\/wp-json\/wp\/v2\/posts\/9053\/revisions"}],"wp:attachment":[{"href":"https:\/\/www.sigterritoires.fr\/index.php\/wp-json\/wp\/v2\/media?parent=9053"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/www.sigterritoires.fr\/index.php\/wp-json\/wp\/v2\/categories?post=9053"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/www.sigterritoires.fr\/index.php\/wp-json\/wp\/v2\/tags?post=9053"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}