- 论坛徽章:
- 0
|
今天同事做了一个我们感觉很牛B的彩票预测程序,采用的是遗传算法实现,于是我“剽”来学习先,但是部署到我电脑上以后,就有问题了: 1、用她的抓取程序得到的网页内容出现乱码,导致数据无法解析,苦思不得其解,今天终于在一个牛人的博客上得到正果,哈哈,抓取数据成功。
一下是处理java抓取网页乱码的解决方案,我这里测试通过哦。java 抓取网页乱码问题处理 String htmlContent = "";
java.io.InputStream inputStream;
java.net.URL url = new java.net.URL("
www.csdn.net
");
java.net.HttpURLConnection connection = (java.net.HttpURLConnection) url.openConnection();
connection.connect();
inputStream = connection.getInputStream();
byte bytes[] = new byte[1024*100];
int index = 0;
int count = inputStream.read(bytes, index, 1024*100);
while (count != -1) {
index += count;
count = inputStream.read(bytes, index, 1);
}
System.out.println (count);
htmlContent = new String(bytes, "gb2312");//
System.out.println(htmlContent);
本文来自ChinaUnix博客,如果查看原文请点:http://blog.chinaunix.net/u3/91250/showart_1910208.html |
|