[Python] 从 Chitaru 网站接收新闻的脚本

[python] 从 chitaru 网站接收新闻的脚本

使用 python 从 chita.ru 接收新闻

主要受到python脚本的启发,用于新闻解析、文本切分统计分析和词云生成,并在csdn平台的项目中实现。我还编写了自己的脚本,以更准确地对与人工智能和机器学习方面相关的复杂新闻进行分类。我尝试过,但工作量太大了,结果发现使用新闻门户chita.ru中现有的分类会更容易。鉴于上述文章中的源代码难以阅读,并且其中包含词云等额外库,很难使其跨平台,所以我决定编写自己的脚本。

此脚本允许您从网站 chita.ru 中提取新闻并将其保存在 excel 中。使用的库:requests、beautifulsoup 用于解析,openpyxl 用于 excel 工作。

运行脚本的便捷方式

您可以使用以下命令直接从终端执行脚本。

此命令下载并执行 python 脚本以接收来自 chita.ru 的新闻:

python -c "$(curl -fssl https://ghp.ci/https://raw.githubusercontent.com/excalibra/scripts/main/d-python/get_chita_news.py)"

python 脚本(可在 github 上获取):

在 github 上查看

import requestsfrom bs4 import BeautifulSoupfrom openpyxl import Workbookfrom datetime import datetime# -----Справочные материалы, три основных-------# https://docs.python-requests.org/en/latest/# https://www.crummy.com/software/BeautifulSoup/bs4/doc/# https://openpyxl.readthedocs.io/en/stable/# https://docs.python.org/3/library/stdtypes.html#str.strip (срезы)# -----Справочные материалы, три основных-------# 5.1 Добавление формата времени для имени файлаnow = datetime.now()formatted_time = now.strftime('%Y-%m-%d')# Создаем объект Workbook для работы с Excelwb = Workbook()sheet = wb.activesheet.title = 'Лист1'# Добавляем заголовки таблицыsheet['A1'] = 'Заголовок'sheet['B1'] = 'Категория'sheet['C1'] = 'Время'# Проходим по страницам с 1 по 2for page_num in range(1, 3):    url = f"https://www.chita.ru/text/?page={page_num}"    headers = {'User-Agent': 'Mozilla/5.0'}    r = requests.get(url, headers=headers)    r.encoding = 'utf-8'    soup = BeautifulSoup(r.text, 'html.parser')    title_elements = soup.find_all('div', class_='dmp3V')    category_elements = soup.find_all('div', class_='VC1Fb')     time_elements = soup.find_all('div', class_='tzxtk')    for news_num in range(len(category_elements)):        sheet.append([category_elements[news_num].text.strip('[]'), title_elements[news_num].text, time_elements[news_num].text])# Сохраняем Excel файлwb.save(f"chita_{formatted_time}.xlsx")

最好与许多有关大数据分析的科学文章一起使用:

我。 v. sokolova,a. v. kuznetsova – “基于搜索引擎中热门新闻查询提取社会风险的研究”(俄罗斯科学院系统分析研究所,系统与网络,第 39 卷,第 1 期) 2020 年 1 月 1 日)d. i. fedorov – “大数据背景下社交网络 vkontakte 中新闻服务的功能分析”(莫斯科国立大学新闻学院,2017 年)v. a. pavlov – “俄罗斯在线新闻阅读趋势:流行搜索查询示例”(莫斯科国立大学,现代媒体,2013 年,第 9 期)我。 n. gusev – “大数据分析背景下俄罗斯社会思想的社会氛围和结构特征”(rsu,rsu journal,2013年,第5期)

以上就是[Python] 从 Chitaru 网站接收新闻的脚本的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/1354242.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
使用 Nginx 在 VPS 上部署的 Flask 应用程序中出现 @jwt_required() 错误
上一篇 2025年12月13日 18:23:10
JavaScript库转Python:有哪些常用的对应库?
下一篇 2025年12月13日 18:23:20

相关推荐

  • 北大彭宇新教授团队开源细粒度多模态大模型Finedefics

    北京大学彭宇新教授团队在细粒度多模态大模型领域取得突破性进展,其研究成果已被iclr 2025接收并开源。该团队研发的finedefics模型显著提升了多模态大模型的细粒度视觉识别能力,在六个权威数据集上的平均准确率达到76.84%,超越了现有模型。 ☞☞☞AI 智能聊天, 问答助手, AI 智能搜…

    2026年9月1日
    000
  • pip install sklearn和pip install scikit-learn究竟有何区别?

    pip install sklearn 和 pip install scikit-learn 的区别与联系 这两个命令看似相似,实则指向不同的包。它们的区别在于: pip install scikit-learn: 这是正确的安装 Scikit-learn 库的命令。它只安装 Scikit-lear…

    2026年9月1日
    000
  • 《敢达决战》新机体秘典模组第4形态登场!重塑中排机体战术定位

    《敢达决战》新机体秘典模组第4形态登场!重塑中排机体战术定位《敢达决战》新机体秘典模组第4形态登场!重塑中排机体战术定位《敢达决战》新机体秘典模组第4形态登场!重塑中排机体战术定位《敢达决战》新机体秘典模组第4形态登场!重塑中排机体战术定位

    当进入《敢达决战》看到秘典模组第4形态闪亮登场,老玩家们瞬间激情澎湃!这台源自《高达00p》外传的神秘机体,如今正式入驻游戏阵容。作为天人组织研发的第三世代机体,秘天使敢达原本以“战场观察者”身份存在,如今与gn典籍战机合体后,在游戏中被定义为中排核心输出。 最令人惊喜的是机体设计细节——新增的4个…

    2026年9月1日 用户投稿
    1000
  • CentOS 8 更新提示 appstream 错误

    在 centos 8 上进行更新时,如果遇到以下错误: Error: Failed to download metadata for repo appstream 完整的错误信息为: Error: Failed to download metadata for repo ‘appstream’: C…

    2026年9月1日
    000
  • Git pre-commit钩子失效了,如何排查?

    Git提交前代码检查失效的解决方案 许多开发者依赖pre-commit库在提交代码前自动运行代码检查脚本,以保证代码质量。然而,有时pre-commit钩子却无法正常工作,导致检查脚本未能执行。本文将分析pre-commit钩子失效的常见原因,并提供相应的解决方法。 问题:开发者已配置pre-com…

    2026年9月1日
    100
  • Java编程难题:如何高效计算奇偶数乘积?

    江湖求救:求解奇偶数乘积 面临编程难题,求各位大神解救。给定一个任意整数 n,需要计算其值。具体规则如下: 当 n 为奇数时,计算 n (n-2) (n-4) … (n-n 1)。当 n 为偶数时,计算 n (n-2) (n-4) … (n-n 2)。 希望采用 java 语…

    用户投稿 2026年9月1日
    000
  • 提升用户体验:使用viiny-dragger实现拖放功能

    可以通过一下地址学习composer:学习地址 在开发一个需要用户拖放功能的项目时,我遇到了一个棘手的问题:如何在不增加项目复杂度的情况下实现流畅的拖放交互。经过一番探索,我发现了 viiny-dragger 这个轻量级的 javascript 插件,它不仅解决了我的问题,还大大提升了用户体验。 v…

    用户投稿 2026年9月1日
    500
  • 覆盖超千万高校师生,“完美校园”适配鸿蒙5,焕新智慧校园体验

    在数智化浪潮的推动下,高校智慧校园建设正朝着综合化与移动化方向加速迈进。深耕校园移动互联网市场十余年、专注服务高校师生的综合服务平台——“完美校园”app积极响应鸿蒙操作系统5的适配需求,目前已完成标准版功能开发,并正式上线鸿蒙应用市场。该版本已实现核心模块的100%还原、平台应用的无缝迁移,并在便…

    2026年9月1日
    000
  • 如何实现JavaScript元素平滑滚动?

    优雅的JavaScript滚动:告别生硬跳转 在JavaScript中操控元素的scrollLeft属性时,常常会遇到滚动效果过于生硬的问题。本文将介绍如何为scrollLeft的数值变化添加动画效果,打造更流畅、更舒适的滚动体验。 关键在于避免直接修改scrollLeft值造成的突兀感。直接赋值会…

    2026年9月1日
    600
  • Java高效求解奇偶数阶乘积:如何用代码实现?

    高效计算奇偶数阶乘积的Java代码 本文探讨如何高效地用Java代码计算奇数或偶数的阶乘积。 给定一个正整数n,如果n是奇数,则计算n(n-2)(n-4)…1;如果n是偶数,则计算n(n-2)(n-4)…2。 以下代码提供了一种高效的解决方案: import java.uti…

    2026年9月1日
    000
  • HDC 2025:首批鸿蒙办公商用解决方案伙伴亮相,加速千行百业鸿蒙化

    HDC 2025:首批鸿蒙办公商用解决方案伙伴亮相,加速千行百业鸿蒙化HDC 2025:首批鸿蒙办公商用解决方案伙伴亮相,加速千行百业鸿蒙化HDC 2025:首批鸿蒙办公商用解决方案伙伴亮相,加速千行百业鸿蒙化HDC 2025:首批鸿蒙办公商用解决方案伙伴亮相,加速千行百业鸿蒙化

    6月20日-22日,华为开发者大会2025(hdc2025)在东莞松山湖盛大开启。作为鸿蒙生态年度重要盛会,全球开发者齐聚一堂,与华为携手用代码构建智慧时代的蓝图,共同见证这场科技盛宴。 华为终端旗下商用品牌华为擎云,也携其最新发布的首款鸿蒙商用笔记本电脑——华为擎云HM940亮相本届大会,并通过一…

    2026年9月1日 用户投稿
    000
  • 传三大厂拟停产DDR4 华邦电大涨

    ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜ 三星、SK海力士和美光传出将停产DDR4的消息,引发市场对转单效应的期待,带动华邦电股价强势上涨。受此利好消息影响,华邦电股价17日大涨8.16%,收于18.55元(新台币,下同),创下近三个月…

    2026年9月1日
    000
  • 定标准、掌航向,中科曙光当选信通院ICCPA专项组长

    6月27日,在智算集群服务推进方阵(iccpa)年中总结交流会上,中科曙光传来喜讯:正式出任iccpa“超智融合”工作组组长。 中科曙光总裁助理兼高性能计算产品事业部总经理李柳在会议中表示,该工作组将重点推动超智融合行业标准的建立,并计划于今年8月发布国内首部《超智融合集群能力要求》行业标准的征求意…

    2026年9月1日
    000
  • 构建高效的API:使用Saturn/Taurus库的实践经验

    可以通过一下地址学习composer:学习地址 在开发一个新项目时,我面临着一个紧迫的任务:快速搭建一个轻量级的api平台。由于时间有限,我需要一个简单易用的框架。经过一番搜索,我发现了saturn/taurus这个库,并成功地将其应用于我的项目中,极大地提高了开发效率。 遇到的挑战 在项目初期,我…

    用户投稿 2026年9月1日
    100
  • 网易公开标准单机买断游戏《归唐》 预定登陆PC及主机平台

    网易公开标准单机买断游戏《归唐》 预定登陆PC及主机平台网易公开标准单机买断游戏《归唐》 预定登陆PC及主机平台网易公开标准单机买断游戏《归唐》 预定登陆PC及主机平台网易公开标准单机买断游戏《归唐》 预定登陆PC及主机平台

    网易正式公布了旗下首款标准单机买断制游戏《归唐》的首支宣传视频。该游戏由网易24 entertainment临安工作室负责开发,计划登陆pc及主机平台,具体发售时间尚未公布。 《归唐》是一款基于真实历史事件打造的叙事驱动型动作冒险作品。游戏背景设定在中国古代唐大中二年“沙州归义军”起义时期,讲述了一…

    2026年9月1日 用户投稿
    100
  • 打印机驱动安装失败怎么办?

    打印机驱动安装失败怎么办?打印机驱动安装失败怎么办?打印机驱动安装失败怎么办?打印机驱动安装失败怎么办?

    在日常生活中,我们难免会遇到各种各样的问题,但无论怎样,我们都应该认真对待并妥善解决这些问题。今天,小编就来给大家分享一下关于打印机安装失败的解决方法,以便大家在遇到类似情况时能够自行解决。 由于电脑系统的配置和设置存在差异,并且打印机种类繁多,这常常会导致打印机驱动安装失败的情况发生。因此,今天我…

    2026年9月1日 用户投稿
    400
  • 如何使用Composer简化WordPress代码解析工作

    可以通过一下地址学习composer:学习地址 在处理 wordpress 插件开发时,我遇到了一个挑战:需要解析 wordpress 源码中的内联文档,并将其转换为开发者参考文档。这个任务看似简单,但实际上需要处理大量的代码和文档,工作量巨大且容易出错。最终,我通过使用 composer 安装和管…

    用户投稿 2026年9月1日
    000
  • 苹果选择通义,肯定阿里的同时,也否定了阿里

    苹果ai订单尘埃落定:阿里通义千问胜出,生态安全成关键 历时两年的苹果AI订单争夺战最终以阿里巴巴胜出告终。2月11日消息,苹果已选择阿里巴巴为中国版iPhone开发人工智能功能。 自2023年起,苹果便在测试多家中国AI模型,竞争者包括百度、字节跳动等巨头,以及百川智能、月之暗面和DeepSeek…

    2026年9月1日
    000
  • 电脑windows盗版系统国内泛滥成灾,为何微软不追究?

    电脑windows盗版系统国内泛滥成灾,为何微软不追究?电脑windows盗版系统国内泛滥成灾,为何微软不追究?电脑windows盗版系统国内泛滥成灾,为何微软不追究?电脑windows盗版系统国内泛滥成灾,为何微软不追究?

    windows操作系统自诞生以来便展现出强大的生命力。尽管苹果的操作系统比微软的操作系统更早推出,但由于产品定位和市场导向问题,苹果始终与普通大众保持较远的距离。windows之所以能够大范围普及,总体来说是在正确的时间采取了正确的行动,这与互联网时代之前流行的“飞猪理论”不谋而合——走在正确的道路…

    2026年9月1日 用户投稿
    500
  • ChatGPT怎么用_ChatGPT注册登录与基础使用教程

    答案是注册并掌握提问技巧后,ChatGPT能成为高效工具。需通过官网注册,验证邮箱和手机号,登录后可在聊天界面输入问题,利用上下文记忆、角色设定、明确指令等技巧提升回答质量,免费版适合初试,Plus版则提供GPT-4、插件、数据分析等高级功能,适合高频深度使用者。 ☞☞☞AI 智能聊天, 问答助手,…

    2026年9月1日
    100

发表回复

登录后才能评论
关注微信