分享好友 最新动态首页 最新动态分类 切换频道
献给热衷于自然语言处理的业余爱好者的中文新闻分类语料库之二
2024-11-07 21:22

注:博文转载、语料库使用,请注明提供者、来源以及空间提供方。

献给热衷于自然语言处理的业余爱好者的中文新闻分类语料库之二

免责声明:此语料库仅供自然语言处理的业余爱好者研究和交流,禁止用于任何商业用途(包括在资源内部链接广告等行为)。

感谢网易新闻中心、腾讯新闻中心、凤凰新闻中心以及新浪新闻中心提供新闻素材。新闻著作权归以上网站所有,任何人未经上述公司允许不得抄袭。

 

语料库下载地址:       http://download.cnblogs.com/finallyliuyu/corpus.rar

(注意:有网友提出要MSSQL2000数据库的MDF版本数据,这样在2000以上的数据库上可以进行附加。所以给出MDF,LDF格式的语料库下载地址:MDF版本语料库下载地址)

语料素材来源:      凤凰新闻中心、网易新闻中心、腾讯新闻中心、新浪新闻中心。

语料库整理提供者:  finallyliuyu 

语料库空间提供方: 博客园无偿提供

 

说明:

1、此语料库非职务作品,由本人在业余时间搜集整理,免费提供给对NLP狂热的业余爱好者学习研究使用;本人是自然语言处理的业余爱好者,在类别定义等方面都可能存在一些欠缺,欢迎大家提出宝贵意见和建议;

2、下载地址提供的是MS SQL2000数据库的备份文件。使用此数据库,您需要安装 MS SQL2000 server,然后将corpus.rar解压并还原。压缩包大小为54.8M,共包含39247篇新闻,分为历史、军事、文化、读书、教育、IT、娱乐、社会与法制等八个类别。历史类、文化类、读书类新闻来自于凤凰网,IT类的新闻全部来自tech.qq,教育类的新闻来自edu.qq,娱乐类的新闻来自网易。社会与法制类的新闻来自于新浪和腾讯的几个版面;

3、需要特别注意的是,有的新闻在开头处有大量空白,因此在查询数据库ArticleText字段中有大片空白的,不是空新闻,是整个新闻体截断显示的缘故。

4、有关语料库的其他情况,请参考《献给热衷于自然语言处理的业余爱好者的中文新闻分类语料库之一》

 

我本人在此语料库做过的验证性实验有:《KL语义距离计算系列》Kmeans聚类系列》。今后会接着用此语料库以及搜狗实验室提供的新闻分类语料库做一些有关分类特征词选择方面的算法研究和文本分类器性能分析的实验,敬请大家关注。

感谢DUDU博客园无偿帮忙提供空间也感谢博客园团队。衷心祝愿你们越办越好!

欢迎加入自然语言处理业余研究小组共同研究讨论:http://space.cnblogs.com/group/NLP/

最新文章
谷歌SEO中,如何轻松获得高排名?
在当下这个信息爆炸的时代,每一个企业或个人都渴望自己的网站能在谷歌搜索引擎中脱颖而出,获得更高的排名,从而吸引更多的流量和潜在客户。基于我多年的实战经验和对SEO行业的深刻理解,我发现,要想在谷歌SEO中轻松获得高排名,并非一朝
谷歌SEO里,你既爱又恨的SEO工具是什么?
在SEO行业的摸爬滚打中,我逐渐发现,那些让人又爱又恨的工具,往往是最具争议也是最有效的。今天,我们就来聊聊我在谷歌SEO实战中,对某个既爱又恨的SEO工具的深刻体会。一、谷歌SEO里,我难以割舍的双刃剑作为一名SEO老鸟,我深知每个工
揭秘2024新奥资料,免费获取精准资源全攻略
随着科技的飞速发展和信息时代的到来,资料获取变得日益重要,对于即将迈入新奥时代的我们来说,掌握一手的、精准的2024新奥资料,无疑将为我们的发展带来巨大的优势,本文将为您详细介绍如何免费获取这些精准资料,助您在新奥时代站稳脚跟
域名收录 批量查询域名收录的方法
互联网世界是一个庞大而复杂的网络,每天都有数以亿计的网页在其中产生、消失,网站的排名与权重更是对于一个网站的存在和发展至关重要。但是,对于普通用户来说,如何了解一个网站的真实情况?如何判断一个网站的价值与可信度?这就需要借
生成式人工智能赋能社区教育
生成式人工智能(以下简称AI)为主要特征的第四次科技革命,将对我国社区教育产生全方位的冲击及影响,成为未来社区教育变革的重要推手。研究AI驱动的社区教育变革特征,剖析未来面临的现实挑战,阐明应对策略,对促进我国未来社区教育高质
ai创作产品设计怎么用ps打开及文件操作指南
随着科技的不断发展人工智能()在设计领域的应用越来越广泛多设计师开始借助技术实创作。本文将为您详细介绍怎么样采用Photoshop(PS)打开创作的设计文件以及实文件操作的方法。创作设计是指利用人工智能技术,通过算法和模型对设计元素
网站改造大揭秘:如何让你的网站百度收录量大幅攀升?
一、优化网站结构在此次设计改造中,首先对整个网站架构作了深度优化。我们力求以科学合理的布局和清晰明了的导航指引,让使用者可以快速获取所需信息,提升了用户体验的满足感。此外,我们也将网页加载速度作为重点考虑因素,希望能为大家
长尾关键词搜索,挖掘用户需求之秘密利器!
摘要:长尾关键词搜索是一种有效的挖掘潜在需求的方法,它能够帮助企业发现并利用那些不太被关注但具有特定用户群体的关键词。通过长尾关键词搜索,企业可以深入了解用户的兴趣和需求,进而优化产品和服务,满足用户的个性化需求。这一秘密
百度推广怎么做关键词优化,效果更好?
在互联网营销这片浩瀚的海洋中,百度推广无疑是众多企业扬帆起航的重要平台。作为一名在数字营销领域摸爬滚打多年的实践者,我深知关键词优化对于百度推广效果的重要性。今天,我将结合过往的实战经验,与大家分享如何精准地优化关键词,让
江西南昌seo网站优化
江西南昌SEO网站优化 - 南昌网站排名优化公司南昌SEO网站优化,是指通过优化网站的结构、内容、代码和外部链接等因素,提升网站在搜索引擎中的排名,从而增加网站的曝光度、流量和转化率。作为江西省南昌市的一家专业网站排名优化公司,我
相关文章
推荐文章
发表评论
0评