免费注册	查看新帖 \|


平台论坛博客文库

› 论坛 › 操作系统 › Linux新手园地 › 求助：libcurl返回的同一个网页的大小不固定的情况

12 / 2 页下一页

最近访问板块

发新帖

查看: 2864 | 回复: 10

上一主题

下一主题

[学习分享] 求助：libcurl返回的同一个网页的大小不固定的情况 [复制链接]

笑笑笑一下3

论坛徽章:: 0

电梯直达

跳转到指定楼层

1楼 [收藏(0)] [报告]

发表于 2015-08-06 11:05 |只看该作者 |倒序浏览

本帖最后由笑笑笑一下3 于 2015-08-06 11:07 编辑

可以看到，此时的网页内容大小是98666，再请求一次却是这样

文库|博客

笑笑笑一下3

论坛徽章:: 0

2楼 [报告]

发表于 2015-08-06 11:12 |只看该作者

本帖最后由笑笑笑一下3 于 2015-08-06 11:28 编辑

两次请求的网页，我都用httpdebug看了，网页的body大小是96354。返回码都是200，成功返回网页。但是程序抓到的却是不一样

这个图是获取网页内容的回调函数参数设置

当大小是98666的时候获取的网页是这样的：

当大小是20023的时候网页却是这样的的：

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

笑笑笑一下3

论坛徽章:: 0

3楼 [报告]

发表于 2015-08-06 11:29 |只看该作者

希望大家能给个建议，谢谢大家

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 154

2022北京冬奥会纪念版徽章
日期:2015-08-07 17:10:57

20周年集字徽章-年
日期:2022-10-26 16:44:20

15-16赛季CBA联赛之深圳
日期:2022-11-02 14:02:45

15-16赛季CBA联赛之八一
日期:2022-11-28 12:07:48

20周年集字徽章-20
日期:2023-07-19 08:49:45

15-16赛季CBA联赛之八一
日期:2023-11-04 19:23:51

15-16赛季CBA联赛之广夏
日期:2023-12-13 18:09:34

4楼 [报告]

发表于 2015-08-06 12:12 来自手机 |只看该作者

如果网络服务不稳定，那也是没有办法的事情

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 154

2022北京冬奥会纪念版徽章
日期:2015-08-07 17:10:57

20周年集字徽章-年
日期:2022-10-26 16:44:20

15-16赛季CBA联赛之深圳
日期:2022-11-02 14:02:45

15-16赛季CBA联赛之八一
日期:2022-11-28 12:07:48

20周年集字徽章-20
日期:2023-07-19 08:49:45

15-16赛季CBA联赛之八一
日期:2023-11-04 19:23:51

15-16赛季CBA联赛之广夏
日期:2023-12-13 18:09:34

5楼 [报告]

发表于 2015-08-06 12:13 来自手机 |只看该作者

我用php局域网，一直都是一个结果

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

笑笑笑一下3

论坛徽章:: 0

6楼 [报告]

发表于 2015-08-06 13:12 |只看该作者

回复 5# shang2010 我现在已经把问题找出来了，原来是服务器返回的网页是被压缩过的

，现在把图中的语句注释掉就可以，那么请求网页的时候，服务器就不会返回压缩过的网页，现在每次返回的网页内容大小都是98666。都是正确的内容了。并不是网络的问题。

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

笑笑笑一下3

论坛徽章:: 0

7楼 [报告]

发表于 2015-08-06 13:17 |只看该作者

回复 5# shang2010 不过依然要谢谢你

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 154

2022北京冬奥会纪念版徽章
日期:2015-08-07 17:10:57

20周年集字徽章-年
日期:2022-10-26 16:44:20

15-16赛季CBA联赛之深圳
日期:2022-11-02 14:02:45

15-16赛季CBA联赛之八一
日期:2022-11-28 12:07:48

20周年集字徽章-20
日期:2023-07-19 08:49:45

15-16赛季CBA联赛之八一
日期:2023-11-04 19:23:51

15-16赛季CBA联赛之广夏
日期:2023-12-13 18:09:34

8楼 [报告]

发表于 2015-08-06 15:25 来自手机 |只看该作者

你怎么招惹到压缩的呀，真是奇葩老

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 95

程序设计版块每日发帖之星
日期:2015-09-05 06:20:00

程序设计版块每日发帖之星
日期:2015-09-17 06:20:00

程序设计版块每日发帖之星
日期:2015-09-18 06:20:00

2015亚冠之阿尔艾因
日期:2015-09-18 10:35:08

月度论坛发贴之星
日期:2015-09-30 22:25:00

2015亚冠之阿尔沙巴布
日期:2015-10-03 08:57:39

程序设计版块每日发帖之星
日期:2015-10-05 06:20:00

每日论坛发贴之星
日期:2015-10-05 06:20:00

2015年亚冠纪念徽章
日期:2015-10-06 10:06:48

2015亚冠之塔什干棉农
日期:2015-10-19 19:43:35

程序设计版块每日发帖之星
日期:2015-10-21 06:20:00

每日论坛发贴之星
日期:2015-09-14 06:20:00

9楼 [报告]

发表于 2015-08-06 15:53 |只看该作者

回复 8# shang2010

他自个告诉服务器他接受 gzip 格式的数据。

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

求职 : Linux运维

论坛徽章:: 203

拜羊年徽章
日期:2015-03-03 16:15:43

2015年辞旧岁徽章
日期:2015-03-03 16:54:15

2015年迎新春徽章
日期:2015-03-04 09:57:09

2015小元宵徽章
日期:2015-03-06 15:58:18

2015年亚洲杯之约旦
日期:2015-04-05 20:08:29

2015年亚洲杯之澳大利亚
日期:2015-04-09 09:25:55

2015年亚洲杯之约旦
日期:2015-04-10 17:34:10

2015年亚洲杯之巴勒斯坦
日期:2015-04-10 17:35:34

2015年亚洲杯之日本
日期:2015-04-16 16:28:55

2015年亚洲杯纪念徽章
日期:2015-04-27 23:29:17

操作系统版块每日发帖之星
日期:2015-06-06 22:20:00

操作系统版块每日发帖之星
日期:2015-06-09 22:20:00

10楼 [报告]

发表于 2015-08-06 21:38 |只看该作者

要仔细检查

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

12 / 2 页下一页

发新帖

Chinaunix › 论坛 › 操作系统 › Linux新手园地 › 求助：libcurl返回的同一个网页的大小不固定的情况

北京盛拓优讯信息技术有限公司. 版权所有京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号：11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员联系我们：huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP