苹果/安卓/wp
中国统计年鉴数据库
按年份索引
按国、省、市索引
积分 543, 距离下一级还需 257 积分
权限: 自定义头衔, 签名中使用图片
道具: 彩虹炫, 涂鸦板, 雷达卡, 热点灯, 金钱卡, 显身卡, 匿名卡, 抢沙发下一级可获得
权限: 隐身
购买后可立即获得
权限: 隐身
道具: 金钱卡, 彩虹炫, 雷达卡, 热点灯, 涂鸦板
开心签到天数: 275 天连续签到: 1 天[LV.8]以坛为家I
本帖最后由 jiangbeilu 于
09:50 编辑
很多朋友想把经济管理数据用地图显示出来,那么就需要地图,最好是矢量图。这里分享一份中国行政区划图矢量图,包括省市县各级的地图shp文件格式,可以用arcgis打开和编辑。本图是全国范围的,需要某个省或者某个区域的朋友可以用arcgis进行地图剪裁,当然需要一些arcgis软件操作技术了。地图参考数据如下:
地理坐标系Geographic Coordinate System:& && &&&GCS_Krasovsky_1940
数据标准Datum:& && && &D_Krasovsky_1940
本初子午线Prime Meridian:& && && &Greenwich
角度单位Angular Unit:& && && &Degree
适当收点论坛币,以免被随意下载,滥传滥用。
大家觉得好就顶一下啊
(6.97 MB, 售价: 10 个论坛币)
22:30:29 上传
中国行政区划地图矢量格式shp文件
售价: 10 个论坛币
补充内容 ( 18:45):
为什么我自己不能编辑自己的帖子了?只能补充?太不方便了。。。
本帖资料费用一直为20个论坛币,现在想降价致谢各位朋友,但自己似乎无法修改了,请版主帮忙改一下,改为10个论坛币,谢谢。
补充内容 ( 17:28):
对不住大家了,我是真心想改为10个论坛币的,但是我改不了,要版主或管理员才有权限。我已经请版主帮忙了,但是没有回音。
补充内容 ( 15:45):
抱歉不给各位私下发送本帖内容。论坛币不够的朋友建议来本论坛签到,每天一次可得50点经验,可换算成5个金币,连续四天就够了,这是最简单方便的方法了,具体信息请论坛内查阅。
回复:已经改了。
载入中......
奖励积极上传好的资料
总评分:&经验 + 36&
论坛币 + 12&
热心指数 + 3&
信用等级 + 3&
本帖被以下文库推荐
& |主题: 105, 订阅: 42
& |主题: 308, 订阅: 31
红色的草鱼 发表于
太贵了吧真是好东西哦,绝对值这个价的哈。。。
我是来看看我的积分有多少个的。。。
积分不够呢!是不是全国各省+各市+各县的区域图划分图啊?三级的!
leiniao_19 发表于
积分不够呢!是不是全国各省+各市+各县的区域图划分图啊?三级的!是的,全国的,各省+各市+各县的行政区划图,都有的。。。
新人,么金币,LZ能否发一份到?谢谢
积分不够呢!
有南海数据没?
无限扩大经管职场人脉圈!每天抽选10位免费名额,现在就扫& 论坛VIP& 贵宾会员& 可免费加入
加入我们,立即就学扫码下载「就学」app& Join us!& JoinLearn&
  |
  |
  |
  |
  |
  |
如有投资本站或合作意向,请联系(010-);
邮箱:service@pinggu.org
投诉或不良信息处理:(010-)
京ICP证090565号
京公网安备号
论坛法律顾问:王进律师Jsoup获取全国地区数据属性值(省市县镇村)
字体:[ ] 类型:转载 时间:
这篇文章主要介绍了Jsoup获取全国地区数据属性值(省市县镇村)的相关资料,需要的朋友可以参考下
jsoup 是一款Java 的HTML解析器,可直接解析某个URL地址、HTML文本内容。它提供了一套非常省力的API,可通过DOM,CSS以及类似于jQuery的操作方法来取出和操作数据。
最近手头在做一些东西,需要一个全国各地的地域数据,从省市区到县镇乡街道的。各种度娘,各种谷歌,都没找到一个完整的数据。最后功夫不负有心人,总算找到一份相对来说比较完整的数据,但是这里的数据也只是精确到镇级别,没有村一级的数据(后来通过分析数据源我知道了为什么,呵呵),在加上博主提供的有些数据存在冗余,对于有强迫症和追求完美的我,心想着我一定要自己动手去把这部分数据给爬取出来。
上述博文中的内容还算丰富,博主是用的是php来实现的,作为2015年度编程语言排行榜的第一位,我们也不能示弱啊,下面我就带着大家一起来看看用java怎么从网页当中爬取我们想要的数据...
第一步、准备工作(数据源+工具):
数据源(截止目前最全面权威的官方数据):
爬取数据的工具(爬虫工具):
第二步、数据源分析:
首先jsoup工具的使用我在这里就不做讲解了,感兴趣的可以自己动手去查阅。
做开发就应该多去了解一些软件工具的使用,在平常开发过程中遇到了才知道从何下手,鼓励大家多平时留意一些身边的软件工具,以备不时之需。在做这个东西以前,我也不知道jsoup要怎么用,但我知道jsoup可以用来干嘛,在我需要的用到的时候,再去查阅资料,自己学习。
上述的数据源是2013年中华人民共和国国家统计局发布的,其准确性和权威性不言而喻。
接下来我们分析一下数据源的结构,先从首页说起:
通过分析首页源码我们可以得到如下3点:
1.页面的整个布局是用的table标签来控制的,也就是说我们如果要通过jsoup来选择超链接,那么一定要注意,上图中不是只要标注了省市地区的地方采用的才是表格,整个页面中存在多个表格,因此是不可以直接通过表格
Document connect = connect("");
Elements rowProvince = connect.select("table");
来解析数据的。
2.页面中有超链接的部分有多少地方。可能是官方考虑到了你们这种程序员需要获取这样的数据的原因吧,页面很干净,除开下方的备案号是多余的超链接,其他的链接可以直接爬取。
3.省份城市的数据规律。包含有效信息的表格的每一行都有一个class属性provincetr,这个属性很重要,至于为什么重要,请接着往下看;每一行数据中存在多个td标签,每一个td标签中包含一个a超链接,而这个超链接正是我们想要的超链接,超链接的文本即使省份(直辖市等)的名称。
再次我们再看一下一般的数据页面(一般的数据页面包括市级、县级、镇级这三级数据展示页面):
之所以要把上述三个页面放在一起,是因为通过分析我们可以发现,这三级数据的数据页面完全一致,唯一不同的就是在html源码数据表格中的数据行tr的class属性不一致,分别对应为:citytr,countrytrhe towntr。其他均一致。这样我们就可以用一个通用的方法解决这三个页面的数据爬取。
接下来我们分析一下数据源的结构,先从首页说起:
最后看看村一级的数据页面:
& 在村一级的数据中,和上述市县镇的数据格式不一致,这一级所表示的数据是最低一级的,所以不存在a链接,因此不能采用上面市县镇数据的爬取方式去爬取;这里展示数据的表格行的class为villagetr,除开这两点以外,在每一行数据中包含三列数据,第一列是citycode,第二列是城乡分类(市县镇的数据格式不存在这一项),第三列是城市名称。
& 把握了以上各个要点之外,我们就可以开始编码了。
第三步、编码实现:
import java.io.BufferedW
import java.io.F
import java.io.FileW
import java.io.IOE
import java.util.HashM
import java.util.M
import org.jsoup.J
import org.jsoup.nodes.D
import org.jsoup.nodes.E
import org.jsoup.select.E
* 全国省市县镇村数据爬取
* @author liushaofeng
* @date -- 上午::
* @version ..
public class JsoupTest
private static Map&Integer, String& cssMap = new HashMap&Integer, String&();
private static BufferedWriter bufferedWriter =
cssMap.put(, "provincetr");// 省
cssMap.put(, "citytr");// 市
cssMap.put(, "countytr");// 县
cssMap.put(, "towntr");// 镇
cssMap.put(, "villagetr");// 村
public static void main(String[] args) throws IOException
int level = ;
initFile();
// 获取全国各个省级信息
Document connect = connect("http://www./tjsj/tjbz/tjyqhdmhcxhfdm//");
Elements rowProvince = connect.select("tr." + cssMap.get(level));
for (Element provinceElement : rowProvince)// 遍历每一行的省份城市
Elements select = provinceElement.select("a");
for (Element province : select)// 每一个省份(四川省)
parseNextLevel(province, level + );
closeStream();
private static void initFile()
bufferedWriter = new BufferedWriter(new FileWriter(new File("d:\\CityInfo.txt"), true));
} catch (IOException e)
e.printStackTrace();
private static void closeStream()
if (bufferedWriter != null)
bufferedWriter.close();
} catch (IOException e)
e.printStackTrace();
bufferedWriter =
private static void parseNextLevel(Element parentElement, int level) throws IOException
Thread.sleep();//睡眠一下,否则可能出现各种错误状态码
} catch (InterruptedException e)
e.printStackTrace();
Document doc = connect(parentElement.attr("abs:href"));
if (doc != null)
Elements newsHeadlines = doc.select("tr." + cssMap.get(level));//
// 获取表格的一行数据
for (Element element : newsHeadlines)
printInfo(element, level + );
Elements select = element.select("a");// 在递归调用的时候,这里是判断是否是村一级的数据,村一级的数据没有a标签
if (select.size() != )
parseNextLevel(select.last(), level + );
* 写一行数据到数据文件中去
* @param element 爬取到的数据元素
* @param level 城市级别
private static void printInfo(Element element, int level)
bufferedWriter.write(element.select("td").last().text() + "{" + level + "}["
+ element.select("td").first().text() + "]");
bufferedWriter.newLine();
bufferedWriter.flush();
} catch (IOException e)
e.printStackTrace();
private static Document connect(String url)
if (url == null || url.isEmpty())
throw new IllegalArgumentException("The input url('" + url + "') is invalid!");
return Jsoup.connect(url).timeout( * ).get();
} catch (IOException e)
e.printStackTrace();
数据爬取过程便是一个漫长的过程,只需要慢慢等待吧,呵呵,由于程序运行时间较长,请不要在控制台打印输出,否则可能会影响程序运行....
最终获取到数据的格式如下("{}"中表示城市级别,"[]"中内容表示城市编码):
市辖区{3}[]
东城区{4}[]
东华门街道办事处{5}[]
多福巷社区居委会{6}[]
银闸社区居委会{6}[]
东厂社区居委会{6}[]
智德社区居委会{6}[]
南池子社区居委会{6}[]
黄图岗社区居委会{6}[]
灯市口社区居委会{6}[]
正义路社区居委会{6}[]
甘雨社区居委会{6}[]
台基厂社区居委会{6}[]
韶九社区居委会{6}[]
王府井社区居委会{6}[]
景山街道办事处{5}[]
隆福寺社区居委会{6}[]
吉祥社区居委会{6}[]
黄化门社区居委会{6}[]
钟鼓社区居委会{6}[]
魏家社区居委会{6}[]
汪芝麻社区居委会{6}[]
景山东街社区居委会{6}[]
皇城根北街社区居委会{6}[]
交道口街道办事处{5}[]
交东社区居委会{6}[]
福祥社区居委会{6}[]
大兴社区居委会{6}[]
府学社区居委会{6}[]
鼓楼苑社区居委会{6}[]
菊儿社区居委会{6}[]
南锣鼓巷社区居委会{6}[]
安定门街道办事处{5}[]
交北头条社区居委会{6}[]
北锣鼓巷社区居委会{6}[]
国子监社区居委会{6}[]
拿到以上数据以后,自己想干什么都可以自我去实现了,以上的代码可以直接运行,从数据源爬取后,可以直接转换成自己所要的格式。
您可能感兴趣的文章:
大家感兴趣的内容
12345678910
最近更新的内容
常用在线小工具君,已阅读到文档的结尾了呢~~
... 全面表示市县两级行政区域界线 PAGE 2. 地理空间信息 148 第9卷第2期 的标准画法,具有权威性、规范性,对河南省行政区 域界线管理具有重要意义和作用,是河南省今后进行行政区域界线管理和编制各类专业地图的基础资料与 法定依据。 2 ...
扫扫二维码,随身浏览文档
手机或平板扫扫即可继续访问
河南省市县两级行政区域界线详图集的设计与编制
举报该文档为侵权文档。
举报该文档含有违规或不良信息。
反馈该文档无法正常浏览。
举报该文档为重复文档。
推荐理由:
将文档分享至:
分享完整地址
文档地址:
粘贴到BBS或博客
flash地址:
支持嵌入FLASH地址的网站使用
html代码:
&embed src='/DocinViewer-4.swf' width='100%' height='600' type=application/x-shockwave-flash ALLOWFULLSCREEN='true' ALLOWSCRIPTACCESS='always'&&/embed&
450px*300px480px*400px650px*490px
支持嵌入HTML代码的网站使用
您的内容已经提交成功
您所提交的内容需要审核后才能发布,请您等待!
3秒自动关闭窗口省市县的领导是由人大代表产生吗_百度知道卫星地图-中国省市县卫星地图
赞助商链接
世界各国及全国省市县导航
国 家 一 览
中 国 省 市 县