靠谱杨
-
5分钟实现调用ChatGPT接口API实现多轮问答
5分钟实现调用ChatGPT接口API完成多轮问答 最近ChatGPT也是火爆异常啊，在亲自使用了几个月之后，我发现这东西是真的好用，实实在在地提高了生产力。那么对于开发人员来说，有时候可能需要在自己的代码里加入这样一个智能问答的功能，我最近就出现了这样的想法和需求，所以简单研究了一下。网上类似的方法有很多，这里我提供一种我目前测试成功的也正在使用的一种，有…
-
python爬虫爬取国家科技报告服务系统数据，共计30余万条
python爬虫爬取国家科技报告服务系统数据，共计30余万条 按学科分类【中图分类】 共计三十余万条科技报告数据 爬取的网址：https://www.nstrs.cn/kjbg/navigation ！！！ 如果要完整地跑起来代码，需要先看一下我的这篇博客，完成IP代理池的相关配置： https://www.cnblogs.com/rainbow-1/p/1…
-
科技报告数据语料处理（关键词、中图分类名称）
科技报告语料处理 接着上次爬取到的科技报告数据进行处理【参考 https://www.cnblogs.com/rainbow-1/p/16725576.html】 为了建立科技报告的分类模型，现将其关键字和中图分类名称进行汇总，作为原始语料库。 先前爬取的数据，存在数据格式不统一不规范的问题，比如分类名称为【数理科学与化学、数理科学和化学 分为了同一类】 经…
