https://www.neican.ai/tags/%E6%95%B0%E6%8D%AE%E9%9B%86/ Recent content in 数据集 on AI内参 Hugo zh-cn Wed, 17 Sep 2025 11:40:06 +0800 https://www.neican.ai/insights/hugging-face3pdf-20250917114006997-0/ Wed, 17 Sep 2025 11:40:06 +0800 https://www.neican.ai/insights/hugging-face3pdf-20250917114006997-0/ Hugging Face这次放大招，推出了巨无霸级的FinePDFs数据集，一次性搞定3万亿个Token的PDF文档，让大模型能吃上高质量的“硬核”知识。这不仅解决了PDF数据难以提取的痛点，还成功验证了它能大幅提升模型的学习能力和长上下文处理能力，简直是开源社区的“福利大放送”！ https://www.neican.ai/insights/article-20250702124004461-2/ Wed, 02 Jul 2025 12:40:04 +0800 https://www.neican.ai/insights/article-20250702124004461-2/ 一项斯坦福研究发现Meta的Llama等大型语言模型能“复刻”《哈利波特》等受版权保护书籍的90%内容，暴露了训练数据中普遍存在的版权问题。尽管Meta在随后的诉讼中因版权方未能证明市场损害而获胜，但AI行业普遍依赖含有盗版内容的Books3数据集的现实，以及Anthropic为规避侵权而销毁实体书的极端做法，凸显了AI技术发展与知识产权保护之间日益激化的伦理与法律矛盾。