基于Python怎样实现索引排序和搜索,代码是什么
Admin 2022-07-06 群英技术资讯 953 次浏览
这篇文章将为大家详细讲解有关“基于Python怎样实现索引排序和搜索,代码是什么”的知识,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。今天,我上的课,学了索引排序与搜索。让我们用Python实现,觉得有点意思就跟大家分享一波。
代码如下图:
import requests
import re
def News_Spider():#定义一个爬虫
url = 'https://news.sina.com.cn/'#url地址,新浪新闻
headers = {#请求头
'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/86.0.4240.198 Safari/537.36'
}
response = requests.get(url,headers,verify=False)#针对https,采用verify=False
response.encoding='utf-8'#编码方式
html = response.text#获取页面源代码
#print(html)#打印源代码
reg = 'target="_blank">(.*?)</a>'#设置规则
content = re.findall(reg,html)#从页面源代码中筛选
ls = []#定义一个空列表
for c in content:
if '<' in c:
continue
else:
if len(c) > 6 and '客户端' not in c:
#print(c)
ls.append(c)
else:
continue
docu_set = {}#定义一个字典
for l in range(len(ls)):
docu_set['d{}'.format(l+1)] = ls[l]#格式化方法,从1开始
return docu_set
def change_set():
all_words = []#定义一个空列表用于存储
docu_set = News_Spider()
for i in docu_set.values():
cut = i.split()#分词
all_words.extend(cut)#添加分词
set_all_words = set(all_words)
return set_all_words
#print(set_all_words)
def reverse_index():
invert_index = dict()#定义空字典
set_all_words = change_set()#将返回值传递给变量
docu_set = News_Spider()
for b in set_all_words:
temp = []
for k in docu_set.keys():
field = docu_set[k]
split_field = field.split()
if b in split_field:
temp.append(k)
invert_index[b] = temp
print(invert_index)
return invert_index
def Select():
docu_set = News_Spider()
invert_index = reverse_index()
news = []
# for i in invert_index:
# print(invert_index[i])
while True:
Find = str(input('请输入查找内容:'))
if Find == '不查了':
break
for Contetnt in invert_index:#循环每一个键
if Find in Contetnt:#如果输入在键的字符串中
Result = invert_index[Contetnt]#循环出字典中每一个对应的值
#print(Result)
for r in Result:#循环每一个值
if r in docu_set.keys():#如果值在字典中
news.append(docu_set[r])#列表增加字典docu_set的值
print(docu_set[r])#打印输出字典的值
else:
continue
else:
if Find not in Contetnt:
news.append('很抱歉,没有找到更多内容!!')
#news = set(news)
for n in news:
if '很抱歉' in n:
print(n)
break
else:
print(n)
def main_function():#定义一个主方法
News_Spider()
change_set()
reverse_index()
Select()
if __name__ == '__main__':#程序入口
main_function()
运行结果如下图:



关于代码的解释,我写在注释中了。
免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:mmqy2019@163.com进行举报,并提供相关证据,查实之后,将立刻删除涉嫌侵权内容。
猜你喜欢
这篇文章主要介绍python模块重载的方法,下文给大家分享了python模块重载的五种方法,对大家学习和python模块重载具有一定的帮助,感兴趣的朋友可以参考下,接下来我们一起了解看看吧。
pandas中DataFrame提供了一个灵活高效的groupby功能,它使你能以一种自然的方式对数据集进行切片、切块、摘要等操作,下面这篇文章主要给大家介绍了关于Python groupby函数详解的相关资料,需要的朋友可以参考下
最近在使用python做接口测试,发现python中http请求方法有许多种,今天抽点时间把相关内容整理,分享给大家,具体内容如下所示:一、python
这篇文章主要介绍了python 实现列表的切片操作允许索引超出范围,具有很好的参考价值,希望对大家有所帮助。如有错误或未考虑完全的地方,望不吝赐教
怎样用python生成对称矩阵?有时候我们需要根据给定的数组,然后生成相应的对称矩阵,一些新手可能不了解怎样解决这个问题,对此,这篇文章就主要给大家分享python生成对称矩阵实例,感兴趣的朋友可以参考学习。
成为群英会员,开启智能安全云计算之旅
立即注册关注或联系群英网络
7x24小时售前:400-678-4567
7x24小时售后:0668-2555666
24小时QQ客服
群英微信公众号
CNNIC域名投诉举报处理平台
服务电话:010-58813000
服务邮箱:service@cnnic.cn
投诉与建议:0668-2555555
Copyright © QY Network Company Ltd. All Rights Reserved. 2003-2020 群英 版权所有
增值电信经营许可证 : B1.B2-20140078 ICP核准(ICP备案)粤ICP备09006778号 域名注册商资质 粤 D3.1-20240008