登录
首页 » Python » SinaSpider-master

SinaSpider-master

于 2016-12-23 发布 文件大小:41KB
0 71
下载积分: 1 下载次数: 5

代码说明:

  使用master-slave模式的分布式新浪微博爬虫,采用纯python代码编写。(This spider system is programmed by pure Python code and works as Master-Slave schema.)

文件列表:

SinaSpider-master
.................\.gitignore,15,2016-03-07
.................\AddAccounts.py,799,2016-03-07
.................\APISpider.py,2678,2016-03-07

.................\CommercialAPISpider.py,253,2016-03-07
.................\CompleteCrawl.py,3506,2016-03-07
.................\Config.py,683,2016-03-07
.................\CrawlTimelineByAPI.py,145,2016-03-07
.................\Dao.py,4675,2016-03-07
.................\Log
.................\...\log.txt,13963,2016-03-07
.................\Log.py,196,2016-03-07
.................\Parser.py,95723,2016-03-07
.................\README.md,2943,2016-03-07
.................\sina_weibo_table_structures.sql,7698,2016-03-07
.................\Spider.py,29484,2016-03-07
.................\Test.py,851,2016-03-07
.................\Utility.py,1606,2016-03-07
.................\Weibo.py,6574,2016-03-07

下载说明:请别用迅雷下载,失败请重下,重下不扣分!

发表评论

0 个回复

  • proxysearcher
    vs2012开发的代理搜索、验证软件,可以自动搜索代理、网页吸取、google三种模式。(vs2012 development agency search, verification software can automatically search proxy, web lessons, google three modes.)
    2013-12-02 22:07:25下载
    积分:1
  • python_sina_crawl
    新浪微博的爬虫程序。程序运行方式:保存所有代码后,打开Main.py,修改LoginName为你的新浪微博帐号,PassWord为你的密码。运行Main.py,程序会在当前目录下生成CrawledPages文件夹,并保存所有爬取到的文件在这个文件夹中。(Sina microblogging reptiles. Program operation: save all the code, open Main.py, modify LoginName for your Sina Weibo account, PassWord for your password. Run Main.py, the program will generate CrawledPages in the current directory folder and save all files to crawling in this folder.)
    2021-04-08 16:39:00下载
    积分:1
  • WiFiDirectDemo
    wifi-direct的实例源码,实现了基本的搜索、连接等功能。(the example source code of wifi-direct, to achieve a basic search, connection and other functions.)
    2015-05-03 09:25:51下载
    积分:1
  • lizi03
    基于lucence实现自己的搜索引擎。基于.net平台。(lucence achieve example)
    2014-03-29 20:51:40下载
    积分:1
  • htdig-3.1.6.tar
    比较大型的网络搜索引擎,C++实现,可惜只支持unix系统(relatively large network search engines, C realized, but unfortunately, only unix support system)
    2007-03-14 22:21:08下载
    积分:1
  • bbk2818
    说明:  nutch开发自己的搜索引擎 视频教程 简单 环境搭建(nutch own yourself search engine)
    2011-03-30 09:24:59下载
    积分:1
  • 原图DTGHTYHTH
    原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH
    2022-03-22 22:54:16下载
    积分:1
  • WebCrawlers
    搜索是网络技术的热门课题,网络爬虫是搜索技术的基础,用VC++编写的网络爬虫可以很好的学习这门课题,适合初学者(Search is a hot topic of network technology, network reptiles is based on search technology, using VC++ Prepared reptiles can be a very good network of learning in this subject, suitable for beginners)
    2008-06-29 23:48:22下载
    积分:1
  • 基于java的文本的设计与实现
    说明:  基于java的文本搜索引擎的设计与实现(完整毕业论文)。页面使用 html+jsp,分词器使用lucene,网络爬虫使用java实现,数据库使用mysql。(Design and Implementation of Text Search Engine Based on Java)
    2020-12-14 15:09:14下载
    积分:1
  • 交易猫开源
    交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源交易猫开源
    2022-08-18 22:46:24下载
    积分:1
  • 696522资源总数
  • 104042会员总数
  • 18今日下载