首页 > 数据库开发 > ArcGIS10.2与SQLite

ArcGIS10.2与SQLite

孤风一剑 6月 13, 2013 297 0

在刚刚结束的2013Esri开发者大会中，有好多用户都会咨询ArcGIS10.2什么时候推出，可以见得大家对ArcGIS新版本的期待，今天就给大家介绍一下一个新特性，使用SQLite来存储GIS数据。

大家都知道ArcGIS支持传统的关系型数据库（oracle、SQL Server、IBM DB2、Informix、PostgreSQL），还支持现在比较火的云数据库（SQL Azure、IBM Netszza），而且还有一些轻量级的数据库比如这次讲到的SQlite，而且还有TeraData  Database。

 

首先看看SQLite数据库，这个数据库一般应用在手机开发中。

SQLite，是一款轻型的数据库，是遵守ACID的关联式数据库管理系统，它的设计目标是嵌入式的，而且目前已经在很多嵌入式产品中使用了它，它占用资源非常的低，在嵌入式设备中，可能只需要几百K的内存就够了。它能够支持Windows/Linux/Unix等等主流的操作系统，同时能够跟很多程序语言相结合，比如 Tcl、C#、PHP、Java等，还有ODBC接口，同样比起Mysql、PostgreSQL这两款开源世界著名的数据库管理系统来讲，它的处理速度比他们都快。SQLite第一个Alpha版本诞生于2000年5月。 至今已经有12个年头，SQLite也迎来了一个版本 SQLite 3已经发布。

下载软件点击

 

ArcGIS10.2可以支持将数据存储在SQLite上，ArcGIS提供了相关的GP工具（ArcPy，支持在SQLite上创建空间数据存储）

[csharp] view plaincopyprint?

  1. import arcpy
  3. # Set local variables
  4. sqlite_database_path = ‘C:\sqlite-3_6_22\ex4.sqlite’
  6. # Execute CreateSQLiteDatabase
  7. arcpy.gp.CreateSQLiteDatabase(sqlite_database_path, “ST_GEOMETRY”)
  9. u’C:\\sqlite-3_6_22\\ex4.sqlite’

 

 

注意：虽然说SQLite默认的文件后缀名是*.db，但是ArcGIS只支持*.sqlite后缀名
创建完毕之后，系统会默认创建四个表

[csharp] view plaincopyprint?

  1. sqlite> .tables
  2. st_aux_spatial_reference_systems  st_spatial_reference_systems
  3. st_geometry_columns               st_vtspindex_interface
通过控制 SQLite 数据库的存储位置的文件夹上的权限来控制对 SQLite 数据库的访问。与其他数据库不同的是您没有创建该数据库，通过进行身份验证的用户和你不要向其他用户授予对特定的数据集的权限。

 

SQLite 可以读取由多个用户，但您应不进行任何更新到数据库而另一个用户正在更新。例如，不要将数据追加到现有的表或另一个用户正在将数据追加到现有的表或数据库中创建表时在数据库中创建表。

 

 

创建完毕之后，我们就可以使用桌面在SQlite数据中创建要素类或者将已有的要素类导入到数据库中

上面的ext4.sqlite里面有三个要素类：

dd是一个空要素类（Unknown)

ff是一个有数据的要素类（Unknown)

gg是一个空要素类（Xian_1980_3_Degree_GK_CM_120E）

将要素类导入之后就很好奇，这些数据是怎么存储到SQLite里面的，先查看一下里面的表

[csharp] view plaincopyprint?

  1. C:\sqlite-3_6_22>sqlite3 ex4.sqlite
  2. SQLite version 3.6.22
  3. Enter “.help” for instructions
  4. Enter SQL statements terminated with a “;”
  5. sqlite> .tables
  6. dd                                st_spindex__ff_Shape
  7. ff                                st_spindex__ff_Shape_node
  8. gg                                st_spindex__ff_Shape_parent
  9. st_aux_spatial_reference_systems  st_spindex__ff_Shape_rowid
  10. st_geometry_columns               st_spindex__gg_SHAPE
  11. st_spatial_reference_systems      st_spindex__gg_SHAPE_node
  12. st_spindex__dd_SHAPE              st_spindex__gg_SHAPE_parent
  13. st_spindex__dd_SHAPE_node         st_spindex__gg_SHAPE_rowid
  14. st_spindex__dd_SHAPE_parent       st_vtspindex_interface
  15. st_spindex__dd_SHAPE_rowid

我们可以看到不光有同名的dd、ff、gg表，还有一些系统表（我们习惯于称呼为支持这种数据库的系统表），这就是为什么GIS数据与其他数据的区别，因为GIS数据有地理的概念，这无疑就需要知道投影的信息，在以前我们研究NoSQL（MongoDB）也看到了有存储投影的相关表。

 

ArcGIS支持MongoDB数据源 – ArcGIS技术研究 – 博客频道 – CSDN.NET

我们可以看看这些表里面的相关信息

[csharp] view plaincopyprint?

  1. sqlite> select * from st_geometry_columns;
  2. 1|dd|SHAPE|2006|3|300001|RTREEXY
  3. 2|ff|Shape|6|2|300002|RTREEXY
  4. 3|gg|SHAPE|6|2|2385|RTREEXY
  10. sqlite> select * from st_aux_spatial_reference_systems;
  11. 300000|ESRI|300000|UNKNOWN|-450359962737.05|-450359962737.05|10000.0|0.0|1.0|0.0|1.0||||1
  12. 300001|ESRI|500000|UNKNOWN|-450359962737.05|-450359962737.05|10000.0|0.0|1.0|-100000.0|10000.0|0.001|0.0|0.001|1
  13. 300002|EPSG|4326|GEOGCS[“GCS_WGS_1984”,DATUM[“D_WGS_1984”,SPHEROID[“WGS_1984”,6378137.0,298.257223563]],PRIMEM[“Greenwich”,0.0],UNIT[“Degree”,0.0174532925199433]]|e-09|0.001|0.001|1
  14. sqlite>

2385就是指向的Xian_1980_3_Degree_GK_CM_120E，这个都是符合OGC标准的，ArcGIS10.1之前还是用内部的SRID，现在好了 只需要知道这个标准的编码即可（比如WGS84——4326），具体查询可以参考如下链接：
http://help.arcgis.com/en/arcgisserver/10.0/apis/rest/pcs.html

 

可以看到St_geometry_columns表是存储空间字段的投影信息的类似于Oracle数据的St_geometry_columns，这个st_aux_spatial_reference_systems类似于st_spatial_reference。

查看一下ff数据的信息

[csharp] view plaincopyprint?

  1. sqlite> .mode column
  2. sqlite> select * from ff;
  3. OBJECTID    Shape       CONTINENT
  4. ———-  ———-  ———-
  5. 1           d鈸伐      Asia
  6. 2           d鈸?       North Amer
  7. 3           d鈸-k      Europe
  8. 4           d鈸        Africa
  9. 5           d鈸,-      South Amer
  10. 6           d鈸      Oceania
  11. 7           d鈸?       Australia
  12. 8           d鈸鞱      Antarctica

Shape字段是乱码形式

 

同样，我们可以看看相关表的Schema

[csharp] view plaincopyprint?

  1. sqlite> .schema
  2. CREATE TABLE dd (
  3. OBJECTID integer primary key autoincrement not null,
  4. SHAPE geometryblob check((typeof(SHAPE) = ‘blob’ and length(SHAPE) >= 18 and cast(hex(substr(SHAPE,1,1)) as integer) = 64) or typeof(SHAPE) = ‘null’));
  6. CREATE TABLE ff (
  7. OBJECTID integer primary key autoincrement not null,
  8. Shape geometryblob check((typeof(Shape) = ‘blob’ and length(Shape) >= 18 and cast(hex(substr(Shape,1,1)) as integer) = 64) or typeof(Shape) = ‘null’),
  9. CONTINENT text(13) check((typeof(CONTINENT) = ‘text’ or typeof(CONTINENT) = ‘null’) and not length(CONTINENT) > 13));
  11. CREATE TABLE gg (
  12. OBJECTID integer primary key autoincrement not null,
  13. SHAPE geometryblob check((typeof(SHAPE) = ‘blob’ and length(SHAPE) >= 18 and cast(hex(substr(SHAPE,1,1)) as integer) = 64) or typeof(SHAPE) = ‘null’));
  15. CREATE TABLE st_aux_spatial_reference_systems (
  16. srid           INTEGER NOT NULL PRIMARY KEY AUTOINCREMENT,
  17. auth_name      TEXT(256),
  18. auth_srid      INT32,
  19. srtext         TEXT(2048),
  20. falsex         FLOAT64 NOT NULL,
  21. falsey         FLOAT64 NOT NULL,
  22. xyunits        FLOAT64 NOT NULL,
  23. falsez         FLOAT64 DEFAULT 0.0,
  24. zunits         FLOAT64 DEFAULT 1.0,
  25. falsem         FLOAT64 DEFAULT 0.0,
  26. munits         FLOAT64 DEFAULT 1.0,
  27. xycluster_tol  FLOAT64,
  28. zcluster_tol   FLOAT64,
  29. mcluster_tol   FLOAT64,
  30. object_flags   INT32 DEFAULT 0);
  32. CREATE TABLE st_geometry_columns (
  33. gcid               INTEGER PRIMARY KEY AUTOINCREMENT,
  34. f_table_name       CLOB NOT NULL,
  35. f_geometry_column  CLOB NOT NULL,
  36. geometry_type      INT32,
  37. coord_dimension    INT32,
  38. srid               INTEGER NOT NULL,
  39. spatial_index_type CLOB,
  40. CONSTRAINT gc_uk UNIQUE (f_table_name,f_geometry_column));
  42. CREATE VIRTUAL TABLE st_spatial_reference_systems USING VSRS();
  43. CREATE VIRTUAL TABLE st_spindex__dd_SHAPE USING RTREE (pkid,minx,maxx,miny,maxy);
  44. CREATE TABLE “st_spindex__dd_SHAPE_node”(nodeno INTEGER PRIMARY KEY, data BLOB);
  45. CREATE TABLE “st_spindex__dd_SHAPE_parent”(nodeno INTEGER PRIMARY KEY, parentnode INTEGER);
  46. CREATE TABLE “st_spindex__dd_SHAPE_rowid”(rowid INTEGER PRIMARY KEY, nodeno INTEGER);
  47. CREATE VIRTUAL TABLE st_spindex__ff_Shape USING RTREE (pkid,minx,maxx,miny,maxy);
  48. CREATE TABLE “st_spindex__ff_Shape_node”(nodeno INTEGER PRIMARY KEY, data BLOB);
  49. CREATE TABLE “st_spindex__ff_Shape_parent”(nodeno INTEGER PRIMARY KEY, parentnode INTEGER);
  50. CREATE TABLE “st_spindex__ff_Shape_rowid”(rowid INTEGER PRIMARY KEY, nodeno INTEGER);
  51. CREATE VIRTUAL TABLE st_vtspindex_interface USING VTSpindex();
  52. CREATE TRIGGER st_delete_trigger_dd_SHAPE AFTER DELETE ON dd FOR EACH ROW BEGIN DELETE FROM st_spindex__dd_SHAPE WHERE pkid = OLD._ROWID_; END;
  53. CREATE TRIGGER st_delete_trigger_ff_Shape AFTER DELETE ON ff FOR EACH ROW BEGIN DELETE FROM st_spindex__ff_Shape WHERE pkid = OLD._ROWID_; END;
  54. CREATE TRIGGER st_insert_trigger_dd_SHAPE AFTER INSERT ON dd FOR EACH ROW BEGIN SELECT InsertIndexEntry (‘st_spindex__dd_SHAPE’,NEW.SHAPE,NEW._ROWID_,2); END;
  55. CREATE TRIGGER st_insert_trigger_ff_Shape AFTER INSERT ON ff FOR EACH ROW BEGIN SELECT InsertIndexEntry (‘st_spindex__ff_Shape’,NEW.Shape,NEW._ROWID_,2); END;
  56. CREATE TRIGGER st_update_trigger_dd_SHAPE AFTER UPDATE ON dd FOR EACH ROW BEGIN SELECT UpdateIndexEntry (‘st_spindex__dd_SHAPE’,NEW.SHAPE,NEW._ROWID_,2); END;
  57. CREATE TRIGGER st_update_trigger_ff_Shape AFTER UPDATE ON ff FOR EACH ROW BEGIN SELECT UpdateIndexEntry (‘st_spindex__ff_Shape’,NEW.Shape,NEW._ROWID_,2); END;

从上面可以看出，其实也是建立的Table、Virtual Table、Trigger等。

 

而且Shape字段的类型是geometryblob，核心还是BLOB。

这里面也有相关的字段类型可以参考如下

SQLite 也是不同于其他的数据库中字段未分配特定的数据类型和数据类型定义没有得到严格执行。相反，SQLite 使用要素类可以在其中存储不同的数据类型的值。
然而，ArcGIS 可以只与一个每个字段的数据类型和不会严格执行数据类型。在 ArcGIS 中查看 SQLite 数据时，您应该意识到这一差异的数据类型强制执行。

 

 

同样，我们也可以直接使用SQL语句创建表，创建坐标，使用ArcMap提供的Add XY坐标来显示，基本上ArcGIS10.1之前的版本，Android开发都是使用这种方式

[csharp] view plaincopyprint?

  1. C:\sqlite-3_6_22>sqlite3 ex3.sqlite
  2. SQLite version 3.6.22
  3. Enter “.help” for instructions
  4. Enter SQL statements terminated with a “;”
  5. sqlite> create table tbl1(x smallint,y smallint);
  6. sqlite> insert into tbl1 vaules(10,10);
  7. Error: near “vaules”: syntax error
  8. sqlite> insert into tbl1 values(10,10);
  9. sqlite> insert into tbl1 values(10,20);
  10. sqlite> insert into tbl1 values(20,20);
  11. sqlite> insert into tbl1 values(20,10);
  12. sqlite> select * from tbl1;
  13. 10|10
  14. 10|20
  15. 20|20
  16. 20|10

 

 

同样，我们也可以使用数据库管理工具来对SQLite里面的对象进行研究

 

同样，我们也可以使用代码来操作SQLite，以下是C#来操作SQLite，需要引用System.Data.SQLite（可能需要用户自己下载dll)

[csharp] view plaincopyprint?

  1. public void test()
  2.         {
  3.             string connstring = “Data Source=C:\\Documents and Settings\\esrichina\\桌面\\sqlite\\sqlite-3_6_22\\ex4.sqlite”;
  4.             SQLiteConnection conn = new SQLiteConnection(connstring);
  5.             conn.Open();
  7.             SQLiteCommand cmd = new SQLiteCommand(conn);
  8.             //查询ff要素类的表
  9.             cmd.CommandText = “select * from ff”;
  10.             SQLiteDataReader reader = cmd.ExecuteReader();
  11.             if (reader.HasRows)
  12.             {
  13.                 while (reader.Read())
  14.                 {
  15.                     //获得ObjectID值
  16.                     int a = reader.GetInt32(0);
  17.                     //获得SHAPE值
  18.                     var aaa = reader.GetValue(1);
  19.                     //获得NAME字段值
  20.                     string aa = reader.GetString(2);
  21.                 }
  22.             }

 

 

 

同样，使用ArcGIS Desktop10.2不仅仅能够创建空间字段为ST_Geometry类型的（Esri支持），也提供SQLite原生提供的Spatialite类型的

[csharp] view plaincopyprint?

  1. >>> arcpy.gp.CreateSQLiteDatabase(r’C:\c.sqlite’,”SPATIALITE”)
  2. u’C:\\c.sqlite’

 

 

那么，我在已经创建好的SQLite的原生Statialite存储也同样创建了相关系统表

[csharp] view plaincopyprint?

  1. sqlite> .tables
  2. SpatialIndex                        vector_layers_auth
  3. geom_cols_ref_sys                   vector_layers_field_infos
  4. geometry_columns                    vector_layers_statistics
  5. geometry_columns_auth               views_geometry_columns
  6. geometry_columns_field_infos        views_geometry_columns_auth
  7. geometry_columns_statistics         views_geometry_columns_field_infos
  8. geometry_columns_time               views_geometry_columns_statistics
  9. spatial_ref_sys                     virts_geometry_columns
  10. spatialite_history                  virts_geometry_columns_auth
  11. sql_statements_log                  virts_geometry_columns_field_infos
  12. vector_layers                       virts_geometry_columns_statistics

我们查看一下相关表的记录

[csharp] view plaincopyprint?

  1. sqlite> select * from geometry_columns;
  2. a|shape|6|2|4326|1
  3. sqlite> .mode column
  4. sqlite> select * from a;
  5. 1                       Asia
  6. 2                       North Amer
  7. 3                       Europe
  8. 4                       Africa
  9. 5                       South Amer
  10. 6                       Oceania
  11. 7                       Australia
  12. 8                       Antarctica

 

 

大数据量导入测试：

我将一个面状要素类（3000000）记录的数据导入到SQLite里面，系统会自动创建索引，在1：10000比例尺下浏览速度在秒级延迟，可见效果还是不错的。

 

[csharp] view plaincopyprint?

  1. Executing: FeatureClassToFeatureClass “C:\New File Geodatabase (3).gdb\a” C:\sqlite-3_6_22\ex4.sqlite aa # “DB2GSE_ST_ “DB2GSE_ST_” true true false 8 Double 0 0 ,First,#,C:\New File Geodatabase (3).gdb\a,DB2GSE_ST_,-1,-1;DB2GSE_SDE “DB2GSE_Sde” true true false 8 Double 0 0 ,First,#,C:\New File Geodatabase (3).gdb\a,DB2GSE_SDE,-1,-1;Shape_Length “Shape_Length” false true true 8 Double 0 0 ,First,#,C:\New File Geodatabase (3).gdb\a,Shape_Length,-1,-1;Shape_Area “Shape_Area” false true true 8 Double 0 0 ,First,#,C:\New File Geodatabase (3).gdb\a,Shape_Area,-1,-1″ #
  2. Start Time: Thu Jun 13 03:04:35 2013
  3. Succeeded at Thu Jun 13 03:27:29 2013 (Elapsed Time: 22 minutes 54 seconds)

 

 

假想：

咨询过Android工程师，好像Windows生成的SQLite文件（*.sqlite）可以直接拷贝到Android手机上使用，如果ArcGIS10.2推出后，也不排除android的ArcGIS API有直接读取数据库里面的Shape字段也就是读取成图形信息，这个应用也很广泛吧。

 

未完待续：

还有一个问题没有弄清楚，ArcGIS10.2桌面也提供了关于SQLite的Dll，这个现在还不太清楚干什么用

1：有可能使用桌面操作SQLite就是调用这个dll

2：使用SQL可以直接操作SQLite类似SQL 操作Oracle数据库编辑空间数据。

标签

相关推荐

标签

.NET (32) ActiveMQ (34) AJAX (29) android (463) android开发 (34) ASP.NET (58) C# (153) CSS (21) eclipse (50) Hadoop (23) Hibernate (51) HTML (30) html5 (29) IOS (48) JAVA (378) JavaScript (87) JQuery (85) js (53) json (26) jsp (28) Linux (70) ListView (28) mvc (28) myeclipse (25) MySQL (151) oracle (181) PHP (158) spring (84) SQL (62) SQL Server (28) string (20) Struts2 (39) Tomcat (39) Ubuntu (20) WEB (28) webservice (29) Windows (27) XML (36) 多线程 (21) 存储过程 (22) 实例 (24) 数据库 (89) 服务器 (31) 算法 (34) 设计模式 (23)

文章归档