登录
首页 » Python » python_sina_crawl

python_sina_crawl

于 2021-04-08 发布 文件大小:5KB
0 99
下载积分: 1 下载次数: 162

代码说明:

  新浪微博的爬虫程序。程序运行方式:保存所有代码后,打开Main.py,修改LoginName为你的新浪微博帐号,PassWord为你的密码。运行Main.py,程序会在当前目录下生成CrawledPages文件夹,并保存所有爬取到的文件在这个文件夹中。(Sina microblogging reptiles. Program operation: save all the code, open Main.py, modify LoginName for your Sina Weibo account, PassWord for your password. Run Main.py, the program will generate CrawledPages in the current directory folder and save all files to crawling in this folder.)

文件列表:

python_sina_crawl
.................\Main.py,537,2013-08-23
.................\TextAnalyze.py,1040,2013-08-23
.................\WeiboCrawl.py,7872,2013-08-23
.................\WeiboEncode.py,1642,2013-08-23
.................\WeiboSearch.py,1230,2013-08-23

下载说明:请别用迅雷下载,失败请重下,重下不扣分!

发表评论

0 个回复

  • baidu
    说明:  百度竞价自动点击程序,可以自动识别对手网站和自己的网站(Baidu bidding procedures for auto-clicks, you can automatically identify opponent and their own web site web site)
    2008-09-29 16:13:43下载
    积分:1
  • hawzdh_v1.5
    1、全站可采用动态、伪静态、纯静态html方式。 2、分类页包含个性化的title、meta,易于搜索引擎收录! 3、网站分类齐全,网址收录比较全面(程序发布时已删除淮安本地网址,目的是方便其他地区网友使用)。 4、全后台化管理,操作简单。 5、栏目无限分类,自由添加。 6、网站后台用户和密码均为admin(1, the station can be dynamic, pseudo-static, pure static html mode. 2, classification page contains a personalized title, meta, easy to search engines! 3, web assortment site included a more comprehensive (removed Huaian local site when it is published, the purpose is to facilitate the users to use other areas). 4, the whole background of management, easy to operate. 5, columns unlimited classification, the Liberal added. 6, website background user and password are admin)
    2015-06-12 15:50:38下载
    积分:1
  • 网络爬虫-Python和数据分析
    《网络爬虫-Python和数据分析》该本书详细介绍了如何使用python获取数据,很实用("Web crawler -Python and data analysis", this book describes how to use Python to obtain data, very practical)
    2017-08-23 20:31:05下载
    积分:1
  • 原图DTGHTYHTH
    原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH原图DTGHTYHTH
    2022-03-22 22:54:16下载
    积分:1
  • 基于用户的协同过滤推荐算法研究
    实际投标中,由于竞争对手的投标策略是随着市场环境及自身条件的变化而变化的,因此就是对同一个包(货物类型以及对应数量完全相同),同一厂家在不同批次中的报价也可能是不同的。还需要注意价格下浮比例(或称下浮系数)以及减分速率指数对报价也会产生一定的影响
    2022-03-02 05:48:23下载
    积分:1
  • 智联招聘网的爬虫程序
    一个可以搜索智联招聘网的爬虫程序,非常好用(can search a joint recruitment network-the Reptile procedures, very handy)
    2007-04-11 23:59:28下载
    积分:1
  • osgood-visual-spider-master
    基于Xpath的网页爬取,提供了web页面(Web crawling based on Xpath)
    2018-12-06 11:50:30下载
    积分:1
  • MetaSeeker-4.11.2
    主要应用领域: • 垂直搜索(Vertical Search):也称为专业搜索,高速、海量和精确抓取是定题网络爬虫DataScraper的强项,每天24小时每周7天无人值守自主调度的周期性批量采集,加上断点续传和软件看门狗(Watch Dog),确保您高枕无忧 • 移动互联网:手机搜索、手机混搭(mashup)、移动社交网络、移动电子商务都离不开结构化的数据内容,DataScraper实时高效地 采集内容,输出富含语义元数据的XML格式的抓取结果文件,确保自动化的数据集成和加工,跨越小尺寸屏幕展现和高精准信息检索的障碍。手机互联网不是 Web的子集而是全部,由MetaSeeker架设桥梁 • 企业竞争情报采集/数据挖掘:俗称商业智能(Business Intelligence),噪音信息滤除、结构化转换,确保数据的准确性和时效性,独有的广域分布式架构,赋予DataScraper无与伦比的情报采 集渗透能力,AJAX/Javascript动态页面、服务器动态网页、静态页面、各种鉴权认证机制,一视同仁。在微博网站数据采集和舆情监测领域远远领 先其它产品。(The main application areas: • Vertical Search (Vertical Search): also known as professional search, speed, mass and precision is the SDI Web crawler to crawl the strengths DataScraper 24 hours a day 7 days a week periodic unattended batch capture self-scheduling, Canada and software watchdog on the HTTP (Watch Dog), make sure you sit back and relax • Mobile Internet: mobile search, mobile mashups (mashup), mobile social networking, mobile commerce are inseparable from the structure of the data content, DataScraper efficiently capture real-time content, the output is rich semantic metadata XML format for the capture outcome document, to ensure that automated data integration and processing, across the small size screen display and high precision information retrieval obstacles. Mobile Internet is not a subset of Web but all, by building bridges MetaSeeker • Competitive intelligence gathering/data mining: commonly known as Business Intelligence (Business Intelli)
    2011-06-14 20:36:50下载
    积分:1
  • 实现文本聚类,算法使用tf-idf算法
    实现文本聚类,算法使用tf-idf算法 实现文本聚类,算法使用tf-idf算法 实现文本聚类,算法使用tf-idf算法 实现文本聚类,算法使用tf-idf算法 实现文本聚类,算法使用tf-idf算法 实现文本聚类,算法使用tf-idf算法 实现文本聚类,算法使用tf-idf算法 实现文本聚类,算法使用tf-idf算法 实现文本聚类,算法使用tf-idf算法
    2023-05-08 06:35:03下载
    积分:1
  • 作业
    应用背景清华大学搜索引擎pagerank算法,采用C编写而成,处理大数据,大规模的网页,能够完美运行,数据格式为a-b,a代表源网页,b代表目的网页关键技术pagerank算法,大数据处理,数据格式见应用背景,编译环境是dev-c++,在windows下完美运行
    2022-03-03 09:44:49下载
    积分:1
  • 696522资源总数
  • 104042会员总数
  • 18今日下载