其实更关心楼盘交易分区火热程度，和销售数量占当地区域所有可售房屋的比例还是膜拜一下
是不是上次做出hdb 12月还是几年的transaction 的那位兄弟？(同时的HDB只能查三个月的，后来才改的）[大狗 (7-19 10:36, Long long ago)]
[ 传统版 |
sForum ][登录后回复]21楼
(引用 大狗:其实更关心楼盘交易分区火热程度，和销售数量占当地区域所有可售房屋的比例还是膜拜一下 是不是上次做出hdb 12月还是几年的transaction �...)时间排序不好用，是按照字母而不是时间顺序。。。[大狗 (7-19 10:43, Long long ago)] [ 传统版 | sForum ][登录后回复]22楼
(引用 大狗:时间排序不好用，是按照字母而不是时间顺序。。。)是的要一点一点做 [本文发送自华新iOS APP] [滚雪球 (7-19 10:53, Long long ago)] [ 传统版 | sForum ][登录后回复]23楼
(引用 大狗:其实更关心楼盘交易分区火热程度，和销售数量占当地区域所有可售房屋的比例还是膜拜一下 是不是上次做出hdb 12月还是几年的transaction �...)那个有类似的网站了吧现在就集中做有CEA number的数据，大家有任何有办法查到CEA number相关的网站都可以丢进来，只要不用登录就能查数据的数据我都可以join进来 [本文发送自华新iOS APP] [滚雪球 (7-19 10:54, Long long ago)] [ 传统版 | sForum ][登录后回复]24楼
(引用 ManU:我猜是爬的请lz指正，谢谢)都是来自于data.gov.sgAPI里直接给了json response，只需要用angularjs，reactjs展示就行了，
当然还有各种filter，search
反正楼主是个爱折腾的人
[nevermoi (7-19 11:12, Long long ago)]
[ 传统版 |
sForum ][登录后回复]25楼
大牛太厉害了你可以开课教教我们怎么拿数据做database吗？这个对financial analysis太有用了 [本文发送自华新iOS APP] [vvos (7-19 11:16, Long long ago)] [ 传统版 | sForum ][登录后回复]26楼
(引用 nevermoi:都是来自于data.gov.sgAPI里直接给了json response，只需要用angularjs，reactjs展示就行了，
当然还有各种filter，search
反正楼主是个�)正确我的源代码开放的，欢迎去看，顺便给个star，其实我还想晚一点把这个数据load进去mongoDB，然后我自己再从mongoDB里面读出来。因为他的API提供不了我想要的统计数据，如果所有统计都写在angular里面太奇怪了，理论上倒是也可以把逻辑都写在UI code里面。
data.gov本来就是为了给developer折腾的吧，你不折腾就是看不起政府的智慧国计划
[本文发送自华新iOS APP]
[滚雪球 (7-19 11:18, Long long ago)]
[ 传统版 |
sForum ][登录后回复]27楼
(引用 vvos:大牛太厉害了你可以开课教教我们怎么拿数据做database吗？这个对financial analysis太有用了)可以啊我再发布个页面解释一下每一步怎么做吧 [本文发送自华新iOS APP] [滚雪球 (7-19 11:31, Long long ago)] [ 传统版 | sForum ][登录后回复]28楼
(引用 滚雪球:可以啊我再发布个页面解释一下每一步怎么做吧)蹲一个感觉现在好多工作都需要data analysis，多门技术多条路 [本文发送自华新iOS APP] [Ke33 (7-19 11:35, Long long ago)] [ 传统版 | sForum ][登录后回复]29楼
(引用 滚雪球:可以啊我再发布个页面解释一下每一步怎么做吧)哇，免费分享啊太感谢啦！ [本文发送自华新iOS APP] [vvos (7-19 11:36, Long long ago)] [ 传统版 | sForum ][登录后回复]30楼
condo的，来一份。哈哈 [本文发送自华新手机Wap版] [origin_ice (7-19 12:08, Long long ago)] [ 传统版 | sForum ][登录后回复]31楼
(引用 滚雪球:正确我的源代码开放的，欢迎去看，顺便给个star，其实我还想晚一点把这个数据load进去mongoDB，然后我自己再从mongoDB里面读出来。因为他...)Mongodb 的备份和一些utility比较容易，想之间的其实商业软件比如Oracle, ms SQL的参数很多的，成百上千。 mongodb 的document data type 比较flexible, 号称是为了大数据扩展方便。 你没搭replication 那步吧？自己玩玩。想知道你的程序设计的 pipeline, 整个workflow自动了吗 ? 没准多加几个人你能开公司了。哈哈 [米子 (7-19 12:22, Long long ago)] [ 传统版 | sForum ][登录后回复]32楼
马一下，膜拜技术牛人 [本文发送自华新iOS APP] [结衣酱 (7-19 12:27, Long long ago)] [ 传统版 | sForum ][登录后回复]33楼
(引用 米子:Mongodb 的备份和一些utility比较容易，想之间的其实商业软件比如Oracle, ms SQL的参数很多的，成百上千。 mongodb 的document data type
...)爬数据不是自动的，要自己在合适时间运行程序不过只要数据爬进去mongoDB网页就会自动显示，修复mongoDB里面的数据需要自己写javascript。顺便强调一下，中介那个网站暂时没有用mongoDB，现在只是拿了data gov的数据。不用自己维护原始数据感觉太好了，但是价值就少了很多，最值钱的其实还是数据。
虽然mongoDB不需要有schema我还是强迫自己follow一定的schema，我还是习惯把它当成oracle来用，只不过会重复存很多数据这样就不用自己join不同的collection了。
[本文发送自华新iOS APP]
[滚雪球 (7-19 12:46, Long long ago)]
[ 传统版 |
sForum ][登录后回复]34楼
(引用 滚雪球:可以啊我再发布个页面解释一下每一步怎么做吧)坐等好厉害
膜拜
[本文发送自华新iOS APP]
[MichelleYS (7-19 12:57, Long long ago)]
[ 传统版 |
sForum ][登录后回复]35楼
(引用 滚雪球:正确我的源代码开放的，欢迎去看，顺便给个star，其实我还想晚一点把这个数据load进去mongoDB，然后我自己再从mongoDB里面读出来。因为他...)我也这样做过把政府网站API提供的数据存进mongoDB再分析，这样不用每次都访问API了，用户看到的数据是从mongoDB来的。 [本文发送自华新手机Wap版] [dragon12 (7-19 13:39, Long long ago)] [ 传统版 | sForum ][登录后回复]36楼
(引用 dragon12:我也这样做过把政府网站API提供的数据存进mongoDB再分析，这样不用每次都访问API了，用户看到的数据是从mongoDB来的。)我觉得访问API不是问题但是它的API给的选择太少了，我放进MongoDB以后还会自己写个服务器端的程序提供各种各样我要的API，比如
/top10agent
/top10agentbyarea/:area
/topagentforseller
/topagentforbuyer
...
[本文发送自华新iOS APP]
[滚雪球 (7-19 14:08, Long long ago)]
[ 传统版 |
sForum ][登录后回复]37楼
最佩服的就是楼主这样的能说又能做的。。。。。。 [本文发送自华新手机Wap版] [xiaoleic (7-19 14:08, Long long ago)] [ 传统版 | sForum ][登录后回复]38楼
(引用 x4:公司好像没有给金管局递这方面的数据以后要是能公布出来就好了。 )公司总有问题是内网可以抓吗？[笑天 (7-19 14:15, Long long ago)] [ 传统版 | sForum ][登录后回复]39楼
(引用 nevermoi:都是来自于data.gov.sgAPI里直接给了json response，只需要用angularjs，reactjs展示就行了， 当然还有各种filter，search 反正楼主是个�)恩恩谢谢指点。赞。[ManU (7-19 17:29, Long long ago)] [ 传统版 | sForum ][登录后回复]40楼