内容简介：爬取程序：爬取地址：区域范围：
-
用
Go编写的瓦片地图爬取工具（Go的goroutine与Python3的asyncio性能对比）； -
瓦片存入
MongoDB，为后期构建分布式文件存储准备； -
Go构建地图服务，并加入Redis缓存层。
Go goroutine
VS Python3 asyncio
爬取程序： go run Crawk.go
- 基准
| 系统 | CPU | RAM |
|---|---|---|
| Ubuntu 18.04.1 LTS | Intel(R) Xeon(R) CPU E5-2643 v4 @ 3.40GHz | 64GB |
- 爬取参数
爬取地址： http://webrd01.is.autonavi.com/appmaptile?lang=zh_cn&size=1&scale=1&style=8&x={x}&y={y}&z={z}
区域范围： 109.227°E ~ 117.182°E
20.196°N ~ 25.5°N
瓦片等级： 12
瓦片数量： 6164
-
用时（单位
s）
| 次数 |
goroutine
|
asyncio
|
|---|---|---|
| 1 | 17.28094745 | 4.405204006 |
| 2 | 16.46757889 | 3.871793148 |
| 3 | 15.89158821 | 4.080148845 |
| 4 | 15.57217884 | 4.166357563 |
| 5 | 16.35038185 | 4.520677129 |
| 平均 | 16.31253505 | 4.208836138 |
以上就是本文的全部内容，希望本文的内容对大家的学习或者工作能带来一定的帮助，也希望大家多多支持 码农网
本站部分资源来源于网络，本站转载出于传递更多信息之目的，版权归原作者或者来源机构所有，如转载稿涉及版权问题，请联系我们。
大数据大创新：阿里巴巴云上数据中台之道
邓中华 / 电子工业出版社 / 2018-11 / 99
阿里巴巴云上数据中台正服务着阿里生态中的数十个业务板块、百余家公司、千万级客户，在帮助决策层看清甚至决定业态走向的同时，在上万个业务场景中应用并催生创新。 《大数据大创新：阿里巴巴云上数据中台之道》基于作者在阿里巴巴的十年大数据从业经历，精彩演绎云上数据中台之道。《大数据大创新：阿里巴巴云上数据中台之道》基于大数据探索的大趋势，讲述阿里巴巴云上数据中台顶层设计，再以实际案例详述阿里巴巴云上数......一起来看看 《大数据大创新：阿里巴巴云上数据中台之道》 这本书的介绍吧!
