当前位置:  技术问答>linux和unix

可不可以 用socket 写一个下载网页的程序

    来源: 互联网  发布时间:2017-01-05

    本文导语:  就是把网页的源代码一起下载下来 | 网页源代码?是指类似ASP代码那些东西吗? | 有wget能直接镜像整个网站何必自己写 有些商业网站不给你镜像,没关系,咱换wekkit,这是...

就是把网页的源代码一起下载下来

|
网页源代码?是指类似ASP代码那些东西吗?

|
有wget能直接镜像整个网站何必自己写

有些商业网站不给你镜像,没关系,咱换wekkit,这是浏览器的内核,你懂的

不要自己发明轮子

|
libcurl

听说很多爬虫都用这个 。

|
照着http协议发请求数据包就可以了

|
可以,看下http协议,像firefox, IE等浏览器就是把Web服务器的网页下载到本地计算机上再显示。

|
可以的,不过不是源代码,而是html源文件,用C/C++写个socket程序,使用的协议是http协议,即将目的主机的端口号写为对应的端口号(默认为80),曾经做过一个小的蜘蛛程序,大概的思路就是这样

|
完全可以实现的。
http基于TCP socket来实现,如果你会写socket程序,搞这个很容易的。

|
6楼说的不错,我就是用你说的做出来的,不过网上有很多别的方法也能实现,只是效率的问题

    
 
 

您可能感兴趣的文章:

  • 在一张网页上可不可以同时显示中文和日文啊?
  • 请问:javabean里可不可以用JSP里的变量,可不可以用JSP里的组件。
  • weblogic可不可以当作jndi服务器使用?如果可以,请问如何管理?
  • linux可不可以和windows共享??可以的话,该怎么做?
  • 请问在servlet中用out.println输出的html可不可以用javascript写方法,如果可以,怎么用
  • linux下可不可以运行window下开发的程序啊,有没有什么方法可以办到啊?是用VB开发的!
  • unix下可不可以开发个自己的账务软件,如果可以用什么好,难度大不大?
  • RedHat7.1可不可以安装在Fat32格式下,而且也不分swap分区,只分“/”分区,这样可以吗?
  • 请问直接把linux光盘里面的内容放到硬盘上面可不可以安装?如果可以的话要用哪一个执行文件安装?
  • shell里可不可以操纵文件指针读取文件中的内容?如果可以能否给一个例子,100分送上!
  • 请问java可不可以这样:
  • 我是第一个人,呵呵. 可不可以开个中间件区哟!!!!
  • 请问下,在嵌入式linux驱动里面可不可以用信号量?
  • 请各位大侠告知小弟可不可以?
  • 问个弱问题,samba和smbclient可不可以分开使用?进的都有分
  • 問大家java程序可不可以編譯成.exe
  • linux可不可以设置虚拟内存
  • 我的是rh9,可不可以XP和rh9双启动
  • 网上下载的redhat可不可以在公司里用?需要lisence吗?
  • 请问:环境变量的名字随便写一个可不可以呀。
  • 可不可以用session 来保存Context,Ejb的信息呢?
  •  
    本站(WWW.)旨在分享和传播互联网科技相关的资讯和技术,将尽最大努力为读者提供更好的信息聚合和浏览方式。
    本站(WWW.)站内文章除注明原创外,均为转载、整理或搜集自网络。欢迎任何形式的转载,转载请注明出处。












  • 相关文章推荐
  • linux下tmp空间可不可以调整
  • 没有光驱,可不可以装saloris8.0 for PC?
  • 大家来看一看,这种方式可不可以实现
  • Linux下可不可以播放.rm格式的文件?如果能,需要什么软件?
  • 可不可以在DOS的批处理中间判断某个文件是否存在?
  • make 命令可不可以接受自定义的参数?
  • modprobes可不可以打出堆栈信息?
  • 可不可以在windows下运行硬盘上的linux安装程序?
  • 线程同步读取变量可不可以不用互斥锁
  • 可不可以用C/C++在UNIX下用ADO實現數據庫操作?
  • QT可不可以做出树形显示窗口?
  • linux和winXP可不可以共存?
  • 多个数据表可不可以只生成一个entitybean?
  • 数据库 iis7站长之家
  • Linux可不可以覆盖安装的,就好象windows98一样?
  • servlet/jsp 中的session(会话)保存在系统的什么地方??可不可以直接修改?
  • 在linux下写的程序,unix下可不可以用啊?
  • 可不可以用Vector的数组
  • 请问可不可以装2个版本的linux?
  • linux 可不可以编译成一个单进程的内核


  • 站内导航:


    特别声明:169IT网站部分信息来自互联网,如果侵犯您的权利,请及时告知,本站将立即删除!

    ©2012-2021,,E-mail:www_#163.com(请将#改为@)

    浙ICP备11055608号-3