免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
› 论坛 › 程序设计 › C/C++ › 老师!!求助呀!!-----怎么样才能抓取网站内容!!
12下一页
最近访问板块 发新帖
查看: 1905 | 回复: 11
打印 上一主题 下一主题

老师!!求助呀!!-----怎么样才能抓取网站内容!! [复制链接]

越走越远

论坛徽章:
0
跳转到指定楼层
1楼 [收藏(0)] [报告]
发表于 2004-09-03 09:27 |只看该作者 |倒序浏览
要想把某个网站的内容抓下来,用哪些方法,请赐教具体的思路!!
yeath

论坛徽章:
0
2楼 [报告]
发表于 2004-09-03 09:38 |只看该作者

老师!!求助呀!!-----怎么样才能抓取网站内容!!

应该有这种工具的吧，GOOGLE里搜索一下。
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
FH

论坛徽章:
0
3楼 [报告]
发表于 2004-09-03 10:09 |只看该作者

老师!!求助呀!!-----怎么样才能抓取网站内容!!

既然这里是C/C++版，所以我只能告诉你：自己写个程序吧。
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
越走越远

论坛徽章:
0
4楼 [报告]
发表于 2004-09-03 10:31 |只看该作者

老师!!求助呀!!-----怎么样才能抓取网站内容!!

谢谢楼上大哥,我是要自己写程序,给我点思路好吗?
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
FH

论坛徽章:
0
5楼 [报告]
发表于 2004-09-03 10:42 |只看该作者

老师!!求助呀!!-----怎么样才能抓取网站内容!!

用HTTP GET抓主页，然后分析内容，递归抓链接。
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
越走越远

论坛徽章:
0
6楼 [报告]
发表于 2004-09-03 12:28 |只看该作者

老师!!求助呀!!-----怎么样才能抓取网站内容!!

顶
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
默难

论坛徽章:
0
7楼 [报告]
发表于 2004-09-03 21:45 |只看该作者

老师!!求助呀!!-----怎么样才能抓取网站内容!!

[quote]原帖由 "FH"]用HTTP GET抓主页，然后分析内容，递归抓链接。[/quote 发表：

没错~你要是觉得这个不爽……libpcap倒是…… 8过那个是抓包的~不适合应用层这点东西~
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
aspbiz

论坛徽章:
0
8楼 [报告]
发表于 2004-09-03 22:53 |只看该作者

老师!!求助呀!!-----怎么样才能抓取网站内容!!

OE
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
JohnBull

论坛徽章:
0
9楼 [报告]
发表于 2004-09-04 10:36 |只看该作者

老师!!求助呀!!-----怎么样才能抓取网站内容!!

找找 wget或者curl的源码.
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
乌鸦飞飞

论坛徽章:
0
10楼 [报告]
发表于 2004-09-04 18:31 |只看该作者

老师!!求助呀!!-----怎么样才能抓取网站内容!!

是不是可以看到他的原码保存成.html或htm的文件在用工具跟踪链接这样可能要麻烦点
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
12下一页
返回列表 发新帖
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号：11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们：huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP