您的位置：首页 > 编程技术 > python  >  python爬取分析超级大乐透历史开奖数据第1/2页

python爬取分析超级大乐透历史开奖数据第1/2页

 更新时间：2021年2月25日 00:00  点击：2472

博主作为爬虫初学者，本次使用了requests和beautifulsoup库进行数据的爬取

爬取网站：http://datachart.500.com/dlt/history/history.shtml —500彩票网
（分析后发现网站源代码并非是通过页面跳转来查找不同的数据，故可通过F12查找network栏找到真正储存所有历史开奖结果的网页）

如图：

在这里插入图片描述

爬虫部分：

from bs4 import BeautifulSoup #引用BeautifulSoup库
import requests     #引用requests
import os      #os
import pandas as pd
import csv
import codecs

lst=[]
url='http://datachart.500.com/dlt/history/newinc/history.php?start=07001&end=21018'
r = requests.get(url)      
r.encoding='utf-8'
text=r.text
soup = BeautifulSoup(text, "html.parser")
tbody=soup.find('tbody',id="tdata")
tr=tbody.find_all('tr')
td=tr[0].find_all('td')
for page in range(0,14016):
 td=tr
                            
12下一页阅读全文

						
						

						
						

					



										

						
						
[!--infotagslink--]

					

					

					

						
					

					

						
					

					

					

						
相关文章

						
    • 
						
  •  C#连接SQL数据库和查询数据功能的操作技巧
    本文给大家分享C#连接SQL数据库和查询数据功能的操作技巧，本文通过图文并茂的形式给大家介绍的非常详细，需要的朋友参考下吧...2021-05-17
  •  php简单数据操作的实例
    最基础的对数据的增加删除修改操作实例，菜鸟们收了吧...2013-09-26
  •  解决Mybatis 大数据量的批量insert问题
    这篇文章主要介绍了解决Mybatis 大数据量的批量insert问题，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧...2021-01-09
  •  Antd-vue Table组件添加Click事件,实现点击某行数据教程
    这篇文章主要介绍了Antd-vue Table组件添加Click事件,实现点击某行数据教程，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧...2020-11-17
  •  详解如何清理redis集群的所有数据
    这篇文章主要介绍了详解如何清理redis集群的所有数据，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧...2021-02-18
  •  vue 获取到数据但却渲染不到页面上的解决方法
    这篇文章主要介绍了vue 获取到数据但却渲染不到页面上的解决方法，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧...2020-11-19
  •  mybatis-plus 处理大数据插入太慢的解决
    这篇文章主要介绍了mybatis-plus 处理大数据插入太慢的解决，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧...2020-12-18
  •  php把读取xml 文档并转换成json数据代码
          在php中解析xml文档用专门的函数domdocument来处理，把json在php中也有相关的处理函数，我们要把数据xml 数据存到一个数据再用json_encode直接换成json数据就OK了。...2016-11-25
  •  postgresql数据添加两个字段联合唯一的操作
    这篇文章主要介绍了postgresql数据添加两个字段联合唯一的操作，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧...2021-02-04
  •  Vue生命周期activated之返回上一页不重新请求数据操作
    这篇文章主要介绍了Vue生命周期activated之返回上一页不重新请求数据操作，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧...2020-07-26
  •  c# socket网络编程接收发送数据示例代码
    这篇文章主要介绍了c# socket网络编程,server端接收,client端发送数据,大家参考使用吧...2020-06-25
  •  vue 数据(data)赋值问题的解决方案
    这篇文章主要介绍了vue 数据(data)赋值问题的解决方案，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧...2021-03-29
  •  Python3 常用数据标准化方法详解
    这篇文章主要介绍了Python3 常用数据标准化方法详解，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧...2021-03-24
  •  解决vue watch数据的方法被调用了两次的问题
    这篇文章主要介绍了解决vue watch数据的方法被调用了两次的问题，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧...2020-11-07
  •  node.js从数据库获取数据
    这篇文章主要为大家详细介绍了node.js从数据库获取数据的具体代码，nodejs可以获取具体某张数据表信息，感兴趣的朋友可以参考一下...2016-05-09
  •  分享MYSQL插入数据时忽略重复数据的方法
    使用下以两种方法时必须把字段设为”主键(PRIMARY KEY”或”唯一约束(UNIQUE)”。1：使用REPLACE INTO (此种方法是利用替换的方法，有点似类于先删除再插入)  复制代码 代码如下:REPLACE INTO Syntax  REPLACE [LOW_PRIO...2013-10-04
  •  PostgreSQL 恢复误删数据的操作
    这篇文章主要介绍了PostgreSQL 恢复误删数据的操作，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧...2021-01-18
  •  C#实现窗体间传递数据实例
    这篇文章主要介绍了C#实现窗体间传递数据实例,需要的朋友可以参考下...2020-06-25
  •  postgresql 删除重复数据的几种方法小结
    这篇文章主要介绍了postgresql 删除重复数据的几种方法小结，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧...2021-02-05
  •  C#中WPF ListView绑定数据的实例详解
    这篇文章主要介绍了C#中WPF ListView绑定数据的实例详解的相关资料,希望通过本文能帮助到大家，让大家理解掌握这部分内容，需要的朋友可以参考下...2020-06-25
    •