全部版块 我的主页
论坛 提问 悬赏 求职 新闻 读书 功能一区 经管文库(原现金交易版)
7238 19
2021-05-21
数据名称:1990年人口普查1%抽样微观数据
范围:全国30省(市区);不含港澳台,重庆尚未升格为直辖市,数据并入四川
数据来源:IPUMS https://international.ipums.org/international/

原始文件为30个省(市区)人口普查1%抽样数据(SPSS格式),具有各自地区的自代表性。
我进行了如下数据清洗(及合并)工作(为保护本人的知识产权,具体步骤放在完整版的readme文件中):
使用工具:SPSS 25 + STATA 16.1
1、统一变量
2、高低版本文件转换 存在问题的文件校正(感谢@璐宝宝提出的问题
3、文件合并
4、添加数据标签及值标签(原始数据为英文,codebook中包含对应关系;但行业代码和职业代码是缺失的,本人查阅相关资料进行了填补,具体过程在readme文件中)
5、保存相应的.sav,转换为相应的.dta,并进行一些细节上的处理
关于缺失值:在文件中缺失值以“0”表示,可以识别的变量(没有0值定义)已进行缺失值处理;但存在部分变量本身具有0值定义,这一部分需要通过问卷跳转逻辑识别,因时间缘故没有进行。例如:“生育子女数”本身是15岁至64岁妇女填报,因此男性和15岁以下、64岁以上的妇女是不应该存在数据的,在SPSS数据文件中以0表示;但要注意的是15岁至64岁妇女如果从未生育,此时填报仍为“0”,要进行区分。这一部分请根据研究目的自行清洗。

原始数据在国外数据库是公开的,只需要申请。为方便大家我这里提供搬运版,仅收取辛苦费意思一下。完整版包含原始数据(不需要重复购买),清洗过程说明、中间文件和代码,最终全国层面的数据集(SPSS+STATA版本),样本观测值共11,835,947个,与官方保持一致,可直接使用。具体包含的变量及含义详见One Percent Sample of 1990 Census codebook.xls和第四次全国人口普查表填写说明.pdf。
按照原来的想法,主要是分享本人的数据清洗过程,原始数据仅提供搬运版。也就是说原始数据我得到的是什么样,分享出来的就是什么样子的,因此只有.sav格式的,对于部分文件可能存在的问题,本人概不负责。有需要售后或者数据清洗过程中探讨交流的朋友,请直接购买完整版,谢谢合作。

6.3更新:
1、因@璐宝宝提出样本量差异问题,经过反复检查,确认为原始数据中的Zhejiang.sav文件存在问题(并非或不仅仅是高低版本兼容问题)。根据官方相应的文本型数据文件(.DAT)进行转换,修正后样本容量一致。
前期没有注意到这个问题,深表歉意,因此将转换后的Zhejiang.sav及原始.DAT文件免费附赠在【原始数据】版中(完整版已经包含)。
2、增加了一些清洗的细节说明。

已经购买的朋友可以通过原链接免费获取新的版本。

IPUMS提供的样本容量

最终样本容量

相比网上已有资料,本次数据集具有以下优点:
1、来源、过程可查,上传了相应的MD5码,任何人都可以通过IPUMS网站申请原始数据,对比MD5码,不存在篡改的风险。
2、根据已有资料进行了数据标签和值标签的填补,可读性大大增强。
3、提供不同版本的数据文件,真正做到到手即用(除部分缺失值还需要自行清洗)。

完整版包含内容(2021/06/03更新):
2021/06/03更新

原始数据包含内容(此外,附赠校验后的Zhejiang.sav及原始DAT文件):
原始数据




附件列表
完整版1.png

原图尺寸 23.17 KB

失效

失效

二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

全部回复
2021-5-21 22:07:49
原始数据版也包含了转换后的Zhejiang.sav,确保高版本SPSS可以打开。但不含清洗过程步骤说明及相关文献资料,需要的朋友可以直接购买完整版,完整版含原始数据。

此外,可交换后续年份普查抽样和1%抽样,需要的年份2010、2015(以及更后面的),有这些资料的朋友可以私信联系。

补充内容 (2022-9-15 11:19):
关于数据交换:人口普查(小普查)2015年之后的年份(可适当补偿以满足新数据的价值);需农业农村部农村固定观察点数据;其他罕见的家庭微观数据
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2021-6-1 15:34:25
买了8块钱的版本,stata 16可以直接导入sav文件,然后发现你的文件没有一个能导入的。。。要买数据的注意了
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2021-6-1 19:23:34
璐宝宝 发表于 2021-6-1 15:34
买了8块钱的版本,stata 16可以直接导入sav文件,然后发现你的文件没有一个能导入的。。。要买数据的注意了 ...
sav是spss的格式,我测试了一下stata 16.1确实无法直接导入,但spss 25可以正常打开。这个应该是stata导入外部数据不支持低版本spss格式的缘故。
需要说明的是【原始数据】版本只是方便大家而进行的搬运(免除申请数据而等待的时间),本人未对数据进行任何修改和调整(除了zhejiang.sav连spss 25也无法正常读取,由此可见原始数据就是通过低版本spss录入的)。因此无法保证第三方软件和高版本的可读性。
如果有需要stata格式的朋友可以直接购买完整版。感谢支持!
屏幕截图 2021-06-01 192146.png

二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2021-6-1 19:36:45
有任何问题可以随时提出,欢迎多多讨论、批评指正
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2021-6-2 20:21:24
我购买了数据,但是浙江省的数据缺失严重。在IPUM中浙江省有观测值433,487,楼主的数据中浙江省共有166,123。在IPUM中总观测值为11,835,947,楼主的数据观测值为11,568,585。两个数据的差异基本来源于浙江省数据的缺失,希望楼主检查一下浙江省的情况,把数据补充完整。
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

点击查看更多内容…
相关推荐
栏目导航
热门文章
推荐文章

说点什么

分享

扫码加好友,拉您进群
各岗位、行业、专业交流群