当前在线人数14588
首页 - 分类讨论区 - 电脑网络 - 电脑图形处理版 - 同主题阅读文章

此篇文章共收到打赏
0

  • 10
  • 20
  • 50
  • 100
您目前伪币余额:0
未名交友
[更多]
[更多]
优秀程序员请进 (转载)
[版面:电脑图形处理][首篇作者:roselle] , 2013年06月25日03:14:26 ,824次阅读,5次回复
来APP回复,赚取更多伪币 关注本站公众号:
[分页:1 ]
roselle
进入未名形象秀
我的博客
[回复] [回信给作者] [本篇全文] [本讨论区] [修改] [删除] [转寄] [转贴] [收藏] [举报] [ 1 ]

发信人: roselle (蔷薇), 信区: ComputerGraphics
标  题: 优秀程序员请进 (转载)
发信站: BBS 未名空间站 (Tue Jun 25 03:14:26 2013, 美东)

【 以下文字转载自 LosAngeles 讨论区 】
发信人: roselle (蔷薇), 信区: LosAngeles
标  题: 优秀程序员请进
发信站: BBS 未名空间站 (Tue Jun 25 03:13:01 2013, 美东)

请问有没有专门在网上抓取数据的程序尼? 每个subpage的格式都是一样的 但是手动
的每页都要手动点开 然后收集信息 感觉很麻烦 虽然数据量也不算大 对懒人来说还是
有点。。。

如果有程序可以的话 可以报个价先
--
就算明天是世界末日,今天也要种我的苹果树。


※ 来源:·WWW 未名空间站 海外: mitbbs.com 中国: mitbbs.cn·[FROM: 173.]

 
peterx
进入未名形象秀
我的博客
[回复] [回信给作者] [本篇全文] [本讨论区] [修改] [删除] [转寄] [转贴] [收藏] [举报] [ 2 ]

发信人: peterx (peterx), 信区: ComputerGraphics
标  题: Re: 优秀程序员请进 (转载)
发信站: BBS 未名空间站 (Thu Jun 27 13:05:51 2013, 美东)

这个不难吧。把网页存为XML的。找匹配的TAG。只是个想法,没有程序。
【 在 roselle (蔷薇) 的大作中提到: 】
: 发信人: roselle (蔷薇), 信区: LosAngeles
: 标  题: 优秀程序员请进
: 发信站: BBS 未名空间站 (Tue Jun 25 03:13:01 2013, 美东)
: 请问有没有专门在网上抓取数据的程序尼? 每个subpage的格式都是一样的 但是手动
: 的每页都要手动点开 然后收集信息 感觉很麻烦 虽然数据量也不算大 对懒人来说还是
: 有点。。。
: 如果有程序可以的话 可以报个价先



--
哥从不寂寞,只因寂寞总是陪伴哥

※ 来源:·WWW 未名空间站 海外: mitbbs.com 中国: mitbbs.cn·[FROM: 75.]

 
Apell
进入未名形象秀
我的博客
[回复] [回信给作者] [本篇全文] [本讨论区] [修改] [删除] [转寄] [转贴] [收藏] [举报] [ 3 ]

发信人: Apell (A片), 信区: ComputerGraphics
标  题: Re: 优秀程序员请进 (转载)
发信站: BBS 未名空间站 (Mon Jul  1 17:45:06 2013, 美东)

scripted language就可以了,根本不需要优秀程序员,找个会ruby的。

【 在 roselle (蔷薇) 的大作中提到: 】
: 发信人: roselle (蔷薇), 信区: LosAngeles
: 标  题: 优秀程序员请进
: 发信站: BBS 未名空间站 (Tue Jun 25 03:13:01 2013, 美东)
: 请问有没有专门在网上抓取数据的程序尼? 每个subpage的格式都是一样的 但是手动
: 的每页都要手动点开 然后收集信息 感觉很麻烦 虽然数据量也不算大 对懒人来说还是
: 有点。。。
: 如果有程序可以的话 可以报个价先



--

※ 来源:·WWW 未名空间站 海外: mitbbs.com 中国: mitbbs.cn·[FROM: 130.]

 
Hilary99
进入未名形象秀
我的博客
[回复] [回信给作者] [本篇全文] [本讨论区] [修改] [删除] [转寄] [转贴] [收藏] [举报] [ 4 ]

发信人: Hilary99 (故乡的臭豆腐), 信区: ComputerGraphics
标  题: Re: 优秀程序员请进 (转载)
发信站: BBS 未名空间站 (Sat Jul  6 13:11:31 2013, 美东)

开源的程序有很多做这个的啊
【 在 roselle (蔷薇) 的大作中提到: 】
: 发信人: roselle (蔷薇), 信区: LosAngeles
: 标  题: 优秀程序员请进
: 发信站: BBS 未名空间站 (Tue Jun 25 03:13:01 2013, 美东)
: 请问有没有专门在网上抓取数据的程序尼? 每个subpage的格式都是一样的 但是手动
: 的每页都要手动点开 然后收集信息 感觉很麻烦 虽然数据量也不算大 对懒人来说还是
: 有点。。。
: 如果有程序可以的话 可以报个价先



--
==================================================================      
       欢迎大家加入“子女课后活动俱乐部”
       关注子女课后教育,让孩子更加完美!
http://www.mitbbs.com/club_bbsdoc/afterschool_k12.html
==================================================================

※ 来源:·WWW 未名空间站 海外: mitbbs.com 中国: mitbbs.cn·[FROM: 108.]

 
adf
进入未名形象秀
我的博客
[回复] [回信给作者] [本篇全文] [本讨论区] [修改] [删除] [转寄] [转贴] [收藏] [举报] [ 5 ]

发信人: adf (adf), 信区: ComputerGraphics
标  题: Re: 优秀程序员请进 (转载)
发信站: BBS 未名空间站 (Tue Nov 26 10:39:10 2013, 美东)

我做了很多抓web data的程序,你要抓什么站点里面的数据,那些链接要crawling, 要
什么格式可以M我
--

※ 来源:·WWW 未名空间站 海外: mitbbs.com 中国: mitbbs.cn·[FROM: 155.]

 
cogt
进入未名形象秀
我的博客
[回复] [回信给作者] [本篇全文] [本讨论区] [修改] [删除] [转寄] [转贴] [收藏] [举报] [ 6 ]

发信人: cogt (苦荆茶), 信区: ComputerGraphics
标  题: Re: 优秀程序员请进 (转载)
发信站: BBS 未名空间站 (Wed Jan 18 11:25:05 2017, 美东)

Very simple script. You should be able to find a lot of sample code in
python/R/Java/.Net
--
※ 来源:·WWW 未名空间站 网址:mitbbs.com 移动:在应用商店搜索未名空间·[FROM: 216.]

[分页:1 ]
[快速返回] [ 进入电脑图形处理讨论区] [返回顶部]
回复文章
标题:
内 容:

未名交友
将您的链接放在这儿

友情链接


 

Site Map - Contact Us - Terms and Conditions - Privacy Policy

版权所有,未名空间(mitbbs.com),since 1996