`
xc_wangwang
  • 浏览: 41193 次
  • 性别: Icon_minigender_1
  • 来自: 上海
社区版块
存档分类
最新评论

(转)geohash:用字符串实现附近地点搜索

 
阅读更多

052011 / 07

geohash:用字符串实现附近地点搜索

上回说到了用经纬度范围实现附近地点搜索。一些小型应用中这样做没问题,但在大型应用中它有个显著的缺点:速度慢。慢的原因有两个,第一是范围比较的索引利用率并不高,第二是SQL语句极其不稳定(不同的当前位置会产生完全不同的SQL查询),很难缓存。

可以考虑使用geohash算法。

geohash是一种地址编码,它能把二维的经纬度编码成一维的字符串。比如,北海公园的编码是wx4g0ec1。

geohash-intro-01.png

geohash有以下几个特点:

首先,geohash用一个字符串表示经度和纬度两个坐标。某些情况下无法在两列上同时应用索引(例如MySQL 4之前的版本,Google App Engine的数据层等),利用geohash,只需在一列上应用索引即可。

其次,geohash表示的并不是一个点,而是一个矩形区域。比如编码wx4g0ec19,它表示的是一个矩形区域。使用者可以发布地址编码,既能表明自己位于北海公园附近,又不至于暴露自己的精确坐标,有助于隐私保护。

第三,编码的前缀可以表示更大的区域。例如wx4g0ec1,它的前缀wx4g0e表示包含编码wx4g0ec1在内的更大范围。这个特性可以用于附近地点搜索。首先根据用户当前坐标计算geohash(例如wx4g0ec1)然后取其前缀进行查询(SELECT * FROM place WHERE geohash LIKE 'wx4g0e%'),即可查询附近的所有地点。

geohash-intro-02.png

 

geohash的算法

下面以(39.92324, 116.3906)为例,介绍一下geohash的编码算法。首先将纬度范围(-90, 90)平分成两个区间(-90, 0)、(0, 90),如果目标纬度位于前一个区间,则编码为0,否则编码为1。由于39.92324属于(0, 90),所以取编码为1。然后再将(0, 90)分成 (0, 45), (45, 90)两个区间,而39.92324位于(0, 45),所以编码为0。以此类推,直到精度符合要求为止,得到纬度编码为1011 1000 1100 0111 1001。

纬度范围 划分区间0 划分区间1 39.92324所属区间
(-90, 90) (-90, 0.0) (0.0, 90) 1
(0.0, 90) (0.0, 45.0) (45.0, 90) 0
(0.0, 45.0) (0.0, 22.5) (22.5, 45.0) 1
(22.5, 45.0) (22.5, 33.75) (33.75, 45.0) 1
(33.75, 45.0) (33.75, 39.375) (39.375, 45.0) 1
(39.375, 45.0) (39.375, 42.1875) (42.1875, 45.0) 0
(39.375, 42.1875) (39.375, 40.7812) (40.7812, 42.1875) 0
(39.375, 40.7812) (39.375, 40.0781) (40.0781, 40.7812) 0
(39.375, 40.0781) (39.375, 39.7265) (39.7265, 40.0781) 1
(39.7265, 40.0781) (39.7265, 39.9023) (39.9023, 40.0781) 1
(39.9023, 40.0781) (39.9023, 39.9902) (39.9902, 40.0781) 0
(39.9023, 39.9902) (39.9023, 39.9462) (39.9462, 39.9902) 0
(39.9023, 39.9462) (39.9023, 39.9243) (39.9243, 39.9462) 0
(39.9023, 39.9243) (39.9023, 39.9133) (39.9133, 39.9243) 1
(39.9133, 39.9243) (39.9133, 39.9188) (39.9188, 39.9243) 1
(39.9188, 39.9243) (39.9188, 39.9215) (39.9215, 39.9243) 1

经度也用同样的算法,对(-180, 180)依次细分,得到116.3906的编码为1101 0010 1100 0100 0100。

经度范围 划分区间0 划分区间1 116.3906所属区间
(-180, 180) (-180, 0.0) (0.0, 180) 1
(0.0, 180) (0.0, 90.0) (90.0, 180) 1
(90.0, 180) (90.0, 135.0) (135.0, 180) 0
(90.0, 135.0) (90.0, 112.5) (112.5, 135.0) 1
(112.5, 135.0) (112.5, 123.75) (123.75, 135.0) 0
(112.5, 123.75) (112.5, 118.125) (118.125, 123.75) 0
(112.5, 118.125) (112.5, 115.312) (115.312, 118.125) 1
(115.312, 118.125) (115.312, 116.718) (116.718, 118.125) 0
(115.312, 116.718) (115.312, 116.015) (116.015, 116.718) 1
(116.015, 116.718) (116.015, 116.367) (116.367, 116.718) 1
(116.367, 116.718) (116.367, 116.542) (116.542, 116.718) 0
(116.367, 116.542) (116.367, 116.455) (116.455, 116.542) 0
(116.367, 116.455) (116.367, 116.411) (116.411, 116.455) 0
(116.367, 116.411) (116.367, 116.389) (116.389, 116.411) 1
(116.389, 116.411) (116.389, 116.400) (116.400, 116.411) 0
(116.389, 116.400) (116.389, 116.394) (116.394, 116.400) 0

接下来将经度和纬度的编码合并,奇数位是纬度,偶数位是经度,得到编码 11100 11101 00100 01111 00000 01101 01011 00001。

最后,用0-9、b-z(去掉a, i, l, o)这32个字母进行base32编码,得到(39.92324, 116.3906)的编码为wx4g0ec1。

十进制 0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15
base32 0 1 2 3 4 5 6 7 8 9 b c d e f g
十进制 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31
base32 h j k m n p q r s t u v w x y z

解码算法与编码算法相反,先进行base32解码,然后分离出经纬度,最后根据二进制编码对经纬度范围进行细分即可,这里不再赘述。不过由于geohash表示的是区间,编码越长越精确,但不可能解码出完全一致的地址。

geohash的应用:附近地址搜索

geohash的最大用途就是附近地址搜索了。不过,从geohash的编码算法中可以看出它的一个缺点:位于格子边界两侧的两点,虽然十分接近,但编码会完全不同。实际应用中,可以同时搜索当前格子周围的8个格子,即可解决这个问题。

以geohash的python库为例,相关的geohash操作如下:

>>> import geohash
>>> geohash.encode(39.92324, 116.3906, 5)  # 编码,5表示编码长度
'wx4g0'
>>> geohash.expand('wx4g0')                # 求wx4g0格子及周围8个格子的编码
['wx4ep', 'wx4g1', 'wx4er', 'wx4g2', 'wx4g3', 'wx4dz', 'wx4fb', 'wx4fc', 'wx4g0']

最后,我们来看看本文开头提出的两个问题:速度慢,缓存命中率低。使用geohash查询附近地点,用的是字符串前缀匹配:

SELECT * FROM place WHERE geohash LIKE 'wx4g0%';

而前缀匹配可以利用geohash列上的索引,因此查询速度不会太慢。另外,即使用户坐标发生微小的变化,也能编码成相同的geohash,这就保证了每次执行相同的SQL语句,使得缓存命中率大大提高。

相关资源

分享到:
评论

相关推荐

    geohash:一个解决计算附近距离的php类库

    3. **范围查询**:通过比较`geohash`字符串的前缀,我们可以快速找到与目标位置相近的所有地点。这种方法极大地优化了搜索附近商业点或用户的性能。 4. **距离计算**:`geohash`库还提供了计算两个位置之间距离的...

    geohash:一个解决计算附近距离的php类库.zip

    1. **编码地理位置**:将经纬度转化为Geohash字符串,这一步是将实际的地理位置数据转换为适合存储和查询的形式。 2. **解码Geohash**:将Geohash字符串转换回经纬度,以便获取具体的位置信息。 3. **范围查询**:...

    Java实现GeoHash算法

    5. **解码和坐标还原**:相反的过程是解码,即将GeoHash字符串恢复为原始的经纬度坐标。这需要反向执行上述步骤,包括二进制转换、位交错和坐标标准化。 在开发过程中,你可以创建一个名为`GeoHashUtil`的工具类,...

    nodejs geohash

    这种方法使得两个相邻地理位置的Geohash字符串具有较高的相似性,便于比较和定位。 在Node.js中,可以使用ngeohash库来实现Geohash的功能。ngeohash是一个开源库,提供了与Geohash相关的多种方法,例如: 1. **...

    Android-java中的Geohash工具类

    1. **编码(Encoding)**:使用Geohash工具类,你可以将经纬度转换为Geohash字符串。这通常涉及将坐标分解为一系列二进制位,并使用特定的编码规则将其转换为字符。在`GeoHash`类中,可能有一个方法如`encode(double...

    geohash经纬度转换包linux

    这可以通过解析Geohash字符串,确定其对应的经纬度范围,并逐步细化到更精确的坐标来实现。 3. **邻接(Neighbours)**: 这个库可能还支持获取给定Geohash的相邻Geohash,这对于处理邻近位置或者进行范围搜索很有用...

    geohash算法实现Java代码

    4. **字符映射**:将二进制串转换为十进制,然后映射到一个预定义的字符集(例如"0123456789bcdefghjkmnpqrstuvwxyz"),生成最终的GeoHash字符串。 5. **解码还原**:相反的过程,从GeoHash字符串反向解析出经纬度...

    Laravel开发-geohash

    5. **迁移(Migration)**:为了存储Geohash编码,项目可能包括一个或多个数据库迁移文件,用于在数据库中创建新的列来存放Geohash字符串。 6. **测试(Tests)**:高质量的代码通常伴随着详尽的单元测试,确保Geo...

    python_geohash-0.8.5-cp36-cp36m-win_amd64.whl.zip

    4. 解码:使用`geohash.decode(geohash_string)`将GeoHash字符串解码回经纬度。 5. 查询:利用`geohash.neighbors(geohash_string)`获取邻居GeoHash,以及`geohash.boundingBox(geohash_string)`获取GeoHash所代表的...

    python_geohash-0.8.5-cp312-cp312-win_amd64.whl.zip

    1. `geohash.encode(latitude, longitude, precision=12)`: 编码一个地理位置为Geohash字符串,`precision`参数定义了编码的精度,数值越大,精度越高,表示的区域越小。 2. `geohash.decode(geohash_string)`: 解码...

    如何找到周围8个区域的GeoHash编码

    GeoHash编码是一种将地理坐标(经度和纬度)转换为字符串的方法,便于存储和查询地理位置数据。在Java中实现找到周围8个区域的GeoHash编码涉及到地理空间索引和定位算法的应用。以下是对这个主题的详细解释: Geo...

    python_geohash-0.8.5-cp311-cp311-win_amd64.whl.zip

    2. **编码和解码**:GeoHash库提供了将经纬度坐标转换成GeoHash字符串的函数(如`geohash.encode`),以及将GeoHash字符串还原为经纬度的函数(如`geohash.decode`)。 3. **精度和长度**:GeoHash字符串的长度决定...

    python_geohash-0.8.5-cp37-cp37m-win_amd64.whl.zip

    3. **范围查询(Range Query)**:通过一个GeoHash字符串,可以查找附近的其他GeoHash,以实现地理位置的邻近性查询。这对于地理数据索引和搜索非常有用。 4. **边界计算(Boundary Calculation)**:可以计算出一...

    geohash:用 Java、Lua 和 PHP 编写的用于解码和编码的 Geohash 库

    `encode()`方法接受经纬度对作为输入,并返回一个Geohash字符串;`decode()`方法则将Geohash字符串转换回经纬度对。此外,还可能包含其他功能,如计算两个Geohash之间的距离,或者根据Geohash范围进行搜索。 在Lua...

    python_geohash-0.8.5-cp38-cp38-win_amd64.whl.zip

    1. **编码与解码**:可以将经纬度坐标转换为Geohash字符串,反之亦然。例如,`geohash.encode(latitude, longitude)`可以编码一个位置,`geohash.decode(geohash_string)`则能解码回经纬度。 2. **邻近搜索**:利用...

    python_geohash-0.8.5-cp39-cp39-win_amd64.whl.zip

    Python Geohash是一个开源库,它实现了基于Geohash算法的功能,Geohash是一种地理编码技术,能够将地理位置转换为字符串,便于存储和查询。这种编码方式可以高效地进行地理空间数据的索引和搜索,广泛应用于地图服务...

    iOS Geohash.zip

    例如,为了找到用户周围一定距离内的所有地点,服务器只需要查找与用户Geohash字符串前缀匹配的其他Geohash,这大大减少了搜索范围。 5. **精度控制**:Geohash的长度决定了其精度。更长的字符串表示更高的精度,但...

    geohash-cpp:GeoHash 库

    GeoHash 技术基于二进制的空间分割算法,通过不断将空间划分为相等的区域,然后用二进制位表示这些区域,最终将地理位置转化为字符串。在 C++ 中实现 GeoHash 库可以帮助开发者处理与地理坐标相关的任务,例如存储、...

    JAVA实现空间索引编码——GeoHash的示例

    - 前缀匹配:较长的GeoHash字符串表示的区域包含较短的GeoHash字符串表示的区域。因此,通过匹配GeoHash的前缀,可以快速找到附近的位置。例如,查找与给定点距离2km内的位置,只需要匹配GeoHash的前8位(在这种...

Global site tag (gtag.js) - Google Analytics