当前位置:  技术问答>java相关

大牛们来看看,这个robot程序哪里错了?为什么不能爬行呀?(贴子一)

    来源: 互联网  发布时间:2015-05-23

    本文导语:  老师给了一个ROBOT,用来做毕业设计。做成APPLET后,倒是没有编译错误,但是就是不能执行。找不到错误,希望大家替我找找。谢谢了。 代码如下: /////////////////////////////////////////////////////// import java.applet.Applet; import...

老师给了一个ROBOT,用来做毕业设计。做成APPLET后,倒是没有编译错误,但是就是不能执行。找不到错误,希望大家替我找找。谢谢了。
代码如下:
///////////////////////////////////////////////////////
import java.applet.Applet;
import java.text.*;
import java.awt.*;
import java.awt.event.*;
import java.util.*;
import java.net.*;
import java.io.*;
import java.awt.List;

public class WebCrawler extends Applet implements ActionListener, Runnable {
    public static final String SEARCH = "Search";
    public static final String STOP = "Stop";
    public static final String DISALLOW = "Disallow:";
    public static final int    SEARCH_LIMIT = 50;

    Panel   panelMain;
    List    listMatches;
    Label   labelStatus;

    // URLs to be searched
    Vector vectorToSearch;
    // URLs already searched
    Vector vectorSearched;
    // URLs which match
    Vector vectorMatches;

    Thread searchThread;

    TextField textURL;
    Choice    choiceType;

    public void init() {

// set up the main UI panel
panelMain = new Panel();
panelMain.setLayout(new BorderLayout(5, 5));

// text entry components
Panel panelEntry = new Panel();
panelEntry.setLayout(new BorderLayout(5, 5));

Panel panelURL = new Panel();
panelURL.setLayout(new FlowLayout(FlowLayout.LEFT, 5, 5));
Label labelURL = new Label("Starting URL: ", Label.RIGHT);
panelURL.add(labelURL);
textURL = new TextField("", 40);
panelURL.add(textURL);
panelEntry.add("North", panelURL);

Panel panelType = new Panel();
panelType.setLayout(new FlowLayout(FlowLayout.LEFT, 5, 5));
Label labelType = new Label("Content type: ", Label.RIGHT);
panelType.add(labelType);
choiceType = new Choice();
choiceType.addItem("text/html");
choiceType.addItem("audio/basic");
choiceType.addItem("audio/au");
choiceType.addItem("audio/aiff");
choiceType.addItem("audio/wav");
choiceType.addItem("video/mpeg");
choiceType.addItem("video/x-avi");
panelType.add(choiceType);
panelEntry.add("South", panelType);

panelMain.add("North", panelEntry);

// list of result URLs
Panel panelListButtons = new Panel();
panelListButtons.setLayout(new BorderLayout(5, 5));

Panel panelList = new Panel();
panelList.setLayout(new BorderLayout(5, 5));
Label labelResults = new Label("Search results");
panelList.add("North", labelResults);
Panel panelListCurrent = new Panel();
panelListCurrent.setLayout(new BorderLayout(5, 5));
listMatches = new List(10);
panelListCurrent.add("North", listMatches);
labelStatus = new Label("");
panelListCurrent.add("South", labelStatus);
panelList.add("South", panelListCurrent);

panelListButtons.add("North", panelList);

// control buttons
Panel panelButtons = new Panel();
Button buttonSearch = new Button(SEARCH);
buttonSearch.addActionListener(this);
panelButtons.add(buttonSearch);
Button buttonStop = new Button(STOP);
buttonStop.addActionListener(this);
panelButtons.add(buttonStop);

panelListButtons.add("South", panelButtons);

panelMain.add("South", panelListButtons);

add(panelMain);
setVisible(true);

repaint(); 

// initialize search data structures
vectorToSearch = new Vector();
vectorSearched = new Vector();
vectorMatches = new Vector();

// set default for URL access
URLConnection.setDefaultAllowUserInteraction(false);
    }

    public void start() {
    }

    public void stop() {
if (searchThread != null) {
    setStatus("stopping...");
    searchThread = null;
}
    }

    public void destroy() {
    }

    boolean robotSafe(URL url) {
String strHost = url.getHost();

// form URL of the robots.txt file
String strRobot = "http://" + strHost + "/robots.txt";
URL urlRobot;
try { 
    urlRobot = new URL(/tech-qa-java/strRobot/index.html);
} catch (MalformedURLException e) {
    // something weird is happening, so don't trust it
    return false;
}

String strCommands;
try {
    InputStream urlRobotStream = urlRobot.openStream();

    // read in entire file
    byte b[] = new byte[1000];
    int numRead = urlRobotStream.read(b);
    strCommands = new String(b, 0, numRead);
    while (numRead != -1) {
if (Thread.currentThread() != searchThread)
    break;
numRead = urlRobotStream.read(b);
if (numRead != -1) {
    String newCommands = new String(b, 0, numRead);
    strCommands += newCommands;
}
    }
    urlRobotStream.close();
} catch (IOException e) {
    // if there is no robots.txt file, it is OK to search
    return true;
}

// assume that this robots.txt refers to us and 
// search for "Disallow:" commands.
String strURL = url.getFile();
int index = 0;
while ((index = strCommands.indexOf(DISALLOW, index)) != -1) {
    index += DISALLOW.length();
    String strPath = strCommands.substring(index);
    StringTokenizer st = new StringTokenizer(strPath);

    if (!st.hasMoreTokens())
break;
    
    String strBadPath = st.nextToken();

    // if the URL starts with a disallowed path, it is not safe
    if (strURL.indexOf(strBadPath) == 0)
return false;
}

return true;
    }

    public void paint(Graphics g) {
       //Draw a Rectangle around the applet's display area.
       g.drawRect(0, 0, getSize().width - 1, getSize().height - 1);

panelMain.paint(g);
panelMain.paintComponents(g);
// update(g);
// panelMain.update(g);
    }

    public void run() {
String strURL = textURL.getText();
String strTargetType = choiceType.getSelectedItem();
int numberSearched = 0;
int numberFound = 0;

if (strURL.length() == 0) {
    setStatus("ERROR: must enter a starting URL");
    return;
}

// initialize search data structures
vectorToSearch.removeAllElements();
vectorSearched.removeAllElements();
vectorMatches.removeAllElements();
listMatches.removeAll();

vectorToSearch.addElement(strURL);

while ((vectorToSearch.size() > 0) 
  && (Thread.currentThread() == searchThread)) {
    // get the first element from the to be searched list
    strURL = (String) vectorToSearch.elementAt(0);

    setStatus("searching " + strURL);

    URL url;
    try { 
url = new URL(/tech-qa-java/strURL/index.html);
    } catch (MalformedURLException e) {
setStatus("ERROR: invalid URL " + strURL);
break;
    }


|
what's the error   message?

|
谁会有时间看那么多。

|
请关注下面的贴子
http://www.csdn.net/expert/topic/701/701403.xml?temp=.7961542

    
 
 

您可能感兴趣的文章:

 
本站(WWW.)旨在分享和传播互联网科技相关的资讯和技术,将尽最大努力为读者提供更好的信息聚合和浏览方式。
本站(WWW.)站内文章除注明原创外,均为转载、整理或搜集自网络。欢迎任何形式的转载,转载请注明出处。












  • 相关文章推荐
  • 编程语言 iis7站长之家
  • 呼唤大牛,大牛降临护乎!!!(linux,开启进程问题)
  • 求大牛们赐教!
  • 请大牛指导程序思路
  • 难道csdn没有gstreamer大牛?
  • EJB这么火,决定开始学习,请各位大牛指教,初学该看什么书?
  • 首先,这不是个问题,是个总结。(弱智型的。大牛们不要笑话俺)
  • 那位大牛能知道????
  • 请教版上大牛~
  • 安装net-snmp时遇到问题了,请大牛们指导
  • [求助大牛]如何将连续的多个空格换成tab?
  • [跪求大牛]硬盘有点泄露了。。。
  • 求shell大牛指点
  • 请教各位大牛一个makefile的问题
  • linux下采集视频数据的相关问题,是大牛就进来吧~~
  • 请大牛帮忙,shell脚本的问题
  • 有关Ubuntu的问题,请大牛指点(内详)
  • linux的图形界面为什么没有命令行重要呢,大牛们帮我解惑吧
  • linux大牛来救!HTTP服务器配置文件directory容器中options参数怎么一回事?
  • 请教各位大牛~~那个系统调用open()创建的是什么类型的文件?
  • !!请各位大牛帮忙了,在linux下提取系统时间的话,用什么方法能提取到比毫秒更精确的时间呢?


  • 站内导航:


    特别声明:169IT网站部分信息来自互联网,如果侵犯您的权利,请及时告知,本站将立即删除!

    ©2012-2021,,E-mail:www_#163.com(请将#改为@)

    浙ICP备11055608号-3