SAS中日期数据的清洗

liyichen17

3499

收藏 2014-10-17

悬赏 50 个论坛币已解决

我的数据已经导入到SAS文件中，数据量大概3000W条数据，30G大小。在日期那一栏中，有各种日期格式，还有各种样式乱码。
我想将乱码替换成缺失值，日期统一格式。

序号	日期格式
1	2013-01-01 00:00:00
2	2013-01-01
3	2013-1-1
4	2012.01.01
5	2012.1.1
6	2013/01/01
7	2013/1/1
8	20120101
9	18991231（乱码）

最佳答案

jingju11 查看完整内容

AS suggested, all the (in)formats you listed can be read in ANYDTDTEw. informats in SAS. 考虑到SAS 对此的解释并不完善, I had 3 summary blogs about this informat. 当然,如果对应我所提供的表格,请告诉我任何的遗漏之处. http://blog.sina.com.cn/s/blog_a3a926360102v3bx.html jingju

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

全部回复

jingju11

2014-10-17 09:12:45

AS suggested, all the (in)formats you listed can be read in ANYDTDTEw. informats in SAS. 考虑到SAS
对此的解释并不完善, I had 3 summary blogs about this informat.
当然,如果对应我所提供的表格,请告诉我任何的遗漏之处.

http://blog.sina.com.cn/s/blog_a3a926360102v3bx.html

jingju

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

zhengbo8

2014-10-17 11:03:50

先对日期变量运行一下proc freq.截图上来，我们才知道您的日期格式有多少种。

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

liyichen17

2014-10-17 11:16:21

zhengbo8 发表于 2014-10-17 11:03
先对日期变量运行一下proc freq.截图上来，我们才知道您的日期格式有多少种。

3000万条数据，freq的话SAS要跑很久，而且可能会有上万条的格式。。。

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

zhengbo8

2014-10-17 12:20:07

那在数据集中，日期变量是什么类型，字符还是数值？
确认了我才好想办法。

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

liyichen17

2014-10-17 13:25:07

zhengbo8 发表于 2014-10-17 12:20
那在数据集中，日期变量是什么类型，字符还是数值？
确认了我才好想办法。

那一列是字符型，有各种日期格式还有各种形式乱码，多谢。

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

点击查看更多内容…

lwien007

2014-10-17 14:17:54

可能要有上万种格式，时间再长也得列出来各种格式，格式都不知道有什么怎么整理。

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

liyichen17

2014-10-17 15:59:48

lwien007 发表于 2014-10-17 14:17
可能要有上万种格式，时间再长也得列出来各种格式，格式都不知道有什么怎么整理。

大概有这几种分类方式：
2013/01/01
20121305
2013-01-01
2013-01-01 00:00:00
2013-1-1
2013/1/01
2012.01.01
2012.1.1
18991231(乱码)

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

pobel

2014-10-17 16:09:08

liyichen17 发表于 2014-10-17 15:59
大概有这几种分类方式：
2013/01/01
20121305

20121305 是年-日-月的格式？
18991231在SAS中可以按照YYMMDD8.的informat正常读入。

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

liyichen17

2014-10-17 16:24:00

pobel 发表于 2014-10-17 16:09
20121305 是年-日-月的格式？
18991231在SAS中可以按照YYMMDD8.的informat正常读入。

20121305 这个是写错了，应该20121205，像这种各种日期格式都在一列，是否都可以按照YYMMDD8.的格式读入？

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

pobel

2014-10-17 16:28:31

liyichen17 发表于 2014-10-17 16:24
20121305 这个是写错了，应该20121205，像这种各种日期格式都在一列，是否都可以按照YYMMDD8.的格式读入？ ...

YYMMDD8，只能读入年-月-日，年是4位，而且中间没有符号的。
像2014-10-17这样的是不能的。

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

liyichen17

2014-10-17 16:51:17

pobel 发表于 2014-10-17 16:28
YYMMDD8，只能读入年-月-日，年是4位，而且中间没有符号的。
像2014-10-17这样的是不能的。

像我这种什么格式的都在一列，应该怎么处理呢？

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

pobel

2014-10-17 16:59:44

liyichen17 发表于 2014-10-17 16:51
像我这种什么格式的都在一列，应该怎么处理呢？

可以根据不同的格式用不同的informat，如yymmdd10.
好像还有一个anydate的，可以同时适用多种格式。

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

liyichen17

2014-10-18 10:30:22

jingju11 发表于 2014-10-18 04:00
AS suggested, all the (in)formats you listed can be read in ANYDTDTEw. informats in SAS. 考虑到SAS
...

非常感谢，我发现我的数据里面还有一种日期格式：
Sun Sep 15 00:00:00 C
Tue Apr 23 00:00:00 C
Thu Aug 08 00:00:00 C
Sat Nov 23 00:00:00 C
Wed Jan 09 00:00:00 C
Wed Mar 27 00:00:00 C

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

小鳄鱼a

2014-10-18 11:24:37

你做的是高频吗

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

teqel

2014-10-19 01:10:13

个人感觉，你可以用input函数结合不同的informat转化日期，转化成功的在一个data set里面存起来。最后把所有的文件连起来

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

lwien007

2014-10-23 13:16:33

复制代码

date = input(d,yymmdd10.); 可以解决前边的所有日期形式，但是
Sun Sep 15 00:00:00 C
Tue Apr 23 00:00:00 C
Thu Aug 08 00:00:00 C
Sat Nov 23 00:00:00 C
这种形式的日期，没有年份，不能合并，上面程序可以把这种形式的日期挑选出来，你根据实际情况自己修改代码，把年份加上就行。你提问题不给足够的信息，别人都不知道怎么做。只写一个乱码，谁能处理。

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

wh7064rg

2014-11-5 09:27:58

学习中

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

sas9.4

2014-11-5 12:17:25

put(datevar, ??yymmdd10.)

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

最佳答案

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

分享

扫码加好友，拉您进群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群