1. import java.io.BufferedReader;
   
2. import java.io.BufferedWriter;
   
3. import java.io.FileWriter;
   
4. import java.io.InputStreamReader;
   
5. import java.net.URL;
   
6. import java.net.URLConnection;
   
7. import java.util.regex.Matcher;
   
8. import java.util.regex.Pattern;
   
9. 
   
10. /**
    
11. * 爬一下黑马的用户。
    
12. * 技术分超过25的
    
13. * 存入文件中。
    
14. * 格式：姓名xxx UIDxxx 技术分xxx
    
15. */
    
16. 
    
17. 
    
18. class Url
    
19. {
    
20.         static String name = null;
    
21.         public static void main(String[] args) throws Exception
    
22.         {
    
23.                 BufferedWriter bw = new BufferedWriter(new FileWriter("f:\\io\\person.txt"));
    
24.                 for(int x=98200;x<100000;x++)
    
25.                 {
    
26.                         //创建连接。
    
27.                          URL url = new URL("http://bbs.itheima.com/space-uid-"+x+".html");
    
28.                          URLConnection ucc = url.openConnection();
    
29.                          BufferedReader br = new BufferedReader(new InputStreamReader(ucc.getInputStream(),"utf-8"));
    
30.                          
    
31.                         //爬这一断代码"数字 </span>技术分"
    
32.                          //还爬一下这断代码"name">用户名<"
    
33.                          String line = null;
    
34.                          while ((line=br.readLine())!=null)
    
35.                          {                               
    
36.                                  String regex = "\\d+ </span>技术分";
    
37.                                  Pattern p = Pattern.compile(regex);
    
38.                                  Matcher m = p.matcher(line);
    
39.                                  
    
40.                                  String regex2 = "name\">.+<";
    
41.                                  Pattern p2 = Pattern.compile(regex2);
    
42.                                  Matcher m2 = p2.matcher(line);
    
43.                                  
    
44.                                  
    
45.                                  while (m2.find())
    
46.                                  {                                       
    
47.                                          name = m2.group();
    
48.                                          name = name.replace( "name\">","");
    
49.                                          name = name.replace("<", "");
    
50.                                  }
    
51.                                  while (m.find())
    
52.                                  {
    
53.                                          //把数据存入文件中
    
54.                                         String s= m.group();
    
55.                                         String[] arr = s.split(" </span>");
    
56.                                         if(Integer.parseInt(arr[0])>=25)
    
57.                                         {
    
58.                                                 bw.write("姓名："+name+"\t\tUID:"+x+"\t"+arr[1]+arr[0]);
    
59.                                                 bw.newLine();
    
60.                                                 bw.flush();
    
61.                                         }
    
62.                                  }                                 
    
63.                                  System.out.println(line);//测试时用的。看有没有连接到数据。
    
64.                          }
    
65.                 }
    
66.                 bw.close();
    
67.                  
    
68.         }
    
69. 
    
70. }
    

复制代码

很不错啊  顶一个   呵呵  学习下

很厉害呀！

学习了，非常赞！

好像很很屌的样子哦{:soso_e113:}

受教了，是根据固定的用户UID号对应的页面来搜的是用户信息，不错，顶.............
自己还是要多学学搜索引擎的原理和相关知识，向爬虫前进，O(∩_∩)O~