登录
首页 » Python » SinaSpider-master

SinaSpider-master

于 2016-12-23 发布 文件大小:41KB
0 100
下载积分: 1 下载次数: 5

代码说明:

  使用master-slave模式的分布式新浪微博爬虫,采用纯python代码编写。(This spider system is programmed by pure Python code and works as Master-Slave schema.)

文件列表:

SinaSpider-master
.................\.gitignore,15,2016-03-07
.................\AddAccounts.py,799,2016-03-07
.................\APISpider.py,2678,2016-03-07

.................\CommercialAPISpider.py,253,2016-03-07
.................\CompleteCrawl.py,3506,2016-03-07
.................\Config.py,683,2016-03-07
.................\CrawlTimelineByAPI.py,145,2016-03-07
.................\Dao.py,4675,2016-03-07
.................\Log
.................\...\log.txt,13963,2016-03-07
.................\Log.py,196,2016-03-07
.................\Parser.py,95723,2016-03-07
.................\README.md,2943,2016-03-07
.................\sina_weibo_table_structures.sql,7698,2016-03-07
.................\Spider.py,29484,2016-03-07
.................\Test.py,851,2016-03-07
.................\Utility.py,1606,2016-03-07
.................\Weibo.py,6574,2016-03-07

下载说明:请别用迅雷下载,失败请重下,重下不扣分!

发表评论

0 个回复

  • data_collect.tar
    新浪微薄爬虫,抓取好友信息和好友的关注列表, 保存文件格式为文本(Sina meager reptiles, grab your friends and friends of watchlist information, save the file as text format)
    2014-01-29 18:32:17下载
    积分:1
  • elasticsearch 拼音
    elasticsearch 拼音搜索,可以根据输入的拼音来判断汉字,然后根据汉字去查找索引内容,返回接口,此插件须ik搜索引擎,elasticsearch版本5.x 以上
    2022-03-20 17:24:31下载
    积分:1
  • xx_20030222
    下一代天网文件搜索引擎(next generation Skynet document search engine)
    2005-01-08 11:27:09下载
    积分:1
  • bbk2818
    说明:  nutch开发自己的搜索引擎 视频教程 简单 环境搭建(nutch own yourself search engine)
    2011-03-30 09:24:59下载
    积分:1
  • 原图DTGHTYHTH
    原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH
    2022-03-22 22:54:16下载
    积分:1
  • python 爬虫
    很精简的大师级爬虫,希望你能认真把每一句都看懂,会收获很多的
    2022-08-08 20:25:03下载
    积分:1
  • xapian-core-0.9.10.tar
    开放源码的搜索引擎(Xapian open source search engine)(open source search engine (Xapian open source search engi ne))
    2007-05-30 14:15:25下载
    积分:1
  • python_sina_crawl
    新浪微博的爬虫程序。程序运行方式:保存所有代码后,打开Main.py,修改LoginName为你的新浪微博帐号,PassWord为你的密码。运行Main.py,程序会在当前目录下生成CrawledPages文件夹,并保存所有爬取到的文件在这个文件夹中。(Sina microblogging reptiles. Program operation: save all the code, open Main.py, modify LoginName for your Sina Weibo account, PassWord for your password. Run Main.py, the program will generate CrawledPages in the current directory folder and save all files to crawling in this folder.)
    2021-04-08 16:39:00下载
    积分:1
  • 6-spsPworkspace
    工作空间分析,利用极限搜索法对空间进行求解(Workspace analysis, the use of space limit search method to solve)
    2021-04-28 13:58:44下载
    积分:1
  • path
    这个是我们大学的一个小学期作业,是完成关键路径的搜索(this is our university a primary period of operation is the completion of the Critical Path Search)
    2007-07-08 01:12:49下载
    积分:1
  • 696518资源总数
  • 104386会员总数
  • 20今日下载