学生分享阿里云OSCopilot，体验AI助手中数据库操作与Linux命令支持。遇到AccessKey配置小困扰，发现尖括号非必需。给予9分好评，期待开源并贡献力量。与GitHub Copilot相比，OSCopilot执行效率高，但需增强错误分析功能，适合新手简化服务器运维，目前仍有改进空间。

YOLOv5原创自研，助力创新

基座模型与训练数据、代码微调、测试基准、代码Agent、低资源语言处理、AI代码安全与分析、人机交互、软件工程下游任务应用主题代码大模型论文分享，干货满满~

【7月更文挑战第3天】一种基于YOLOv8改进的高精度表面缺陷检测， 在NEU-DET和GC10-DET任务中涨点明显；

D2LLM：一种针对语义搜索任务的新颖方法，它结合了大语言模型（LLM）的准确性与双编码器的高效性。实验表明，D2LLM在多项任务上的性能超越了五个领先基准模型，尤其是在自然语言推理任务中，相对于最佳基准模型的提升达到了6.45%

【7月更文挑战第2天】 💡💡💡创新点： 1）SPD-Conv特别是在处理低分辨率图像和小物体等更困难的任务时优势明显； 2）引入Wasserstein Distance Loss提升小目标检测能力； 3）YOLOv8中的Conv用cvpr2024中的DynamicConv代替；

《YOLOv8原创自研》专栏介绍 & CSDN独家改进创新实战&专栏目录

CodeFuse团队从一个全新的视角，剖析了传统的 Transformer架构在长文本推理的糟糕表现，并给出了相应的解决方案

【7月更文挑战第1天】 优点：为了利用不同的池化核尺寸提取特征的方式可以获得更多的特征信息，提高网络的识别精度； 如何优化：在此基础上加入注意力机制，能够在不同尺度上更好的、更多的获取特征信息，从而获取全局视角信息并减轻不同尺度大小所带来的影响； SPPF_attention，重新设计加入注意力机制 ，在NEU-DEU任务中mAP50从0.683提升至0.703；

本文改进： 在进行目标检测时，小目标会出现漏检或检测效果不佳等问题。YOLOv10有3个检测头，能够多尺度对目标进行检测，但对微小目标检测可能存在检测能力不佳的现象，因此添加一个微小物体的检测头，能够大量涨点，map提升明显； 多头检测器提升小目标检测精度，1）mAP50从0.666提升至0.677

`try-catch`是错误处理的关键结构，用于执行可能出错的代码并捕获异常，防止程序崩溃。它用于异常处理、资源管理、错误恢复、日志记录和控制业务逻辑。例如，在数据库操作、文件操作、网络请求及用户输入处理中常见其身影，确保程序稳定性和用户体验。

该论文针对蚂蚁集团的现实应用场景，详细介绍了CodeFuse-13B预训练模型的数据准备和训练过程，揭秘了CodeFuse是如何成为一款能够同时处理英文和中文提示的高效预训练代码大型语言模型(LLM)。论文还对CodeFuse在代码生成、翻译、注释和测试用例生成等应用场景中的性能进行了评估。CodeFuse-13B在蚂蚁集团内广

OpenAI暂停中国API服务，阿里云百炼响应迅速，提供免费tokens（2200万）与迁移服务给受影响开发者。Qwen2-72B与GPT-4同列全球第四（HELM MMLU榜）。Qwen-plus调用成本仅GPT-4的1/50。阿里云百炼以开放性著称，兼容LlamaIndex等，支持多种数据源及自定义组件，加速AI应用集成。官网有丰富资源，助力快速上手大模型开发。

这篇文章介绍了AI音效生成器如何助力提升创作体验。AI音效生成器，如ElevenLabs、Audiogen和LOVO AI，利用深度学习创造和编辑音效，为电影制作、游戏开发及播客制作人提供高效、高质量且多样的声音效果。这些工具节省了时间和成本，具有用户友好的界面，方便各类型创作者使用。考虑功能、易用性、音质、成本等因素，选择合适的AI音效生成器能显著增强内容的专业性和吸引力。

日志问题；log问题

在虚拟机上成功部署了Docker化的modelscope-funasr服务，日志显示初始化正常。防火墙已关闭，但尝试通过HTML页面访问时连接失败。

本文介绍如果通过postman调用阿里云通义千问API，然后介绍如果使用多语言集成，最后介绍了快速使用postman压测创建的API请求。

问题不少，可以提升的空间还很大

【5月更文挑战第24天】本文探讨了在使用大型语言模型时保护个人数据的重要性，特别是涉及敏感信息如PII（个人可识别信息）的情况。为了降低数据泄露风险，文章介绍了数据匿名化的概念，通过在数据进入LLM前替换敏感信息。重点讲解了Microsoft的Presidio库，它提供了一个可定制的文本匿名化工具。此外，文章还展示了如何结合LangChain库创建一个安全的匿名化流水线，包括初始化匿名器、添加自定义识别器和操作符，以及在问答系统中集成匿名化流程。通过这种方式，可以在利用LLMs的同时保护数据隐私。

该文讨论了AI助手在企业服务中的应用，指出通用的“助手”Agent（如Coze、钉钉）在B端业务场景中表现一般，因为它们依赖用户正确指导且易发散。相比之下，任务式Agent（如TFlow）针对特定行业和场景进行微调，能更好地理解和执行复杂任务，具有更高准确性和稳定性，适合企业业务流程。TFlow的优势包括场景微调、优化流程处理，开发和使用成本较低，能直接解决实际业务问题。作者认为，B端Agent的机会在于为企业降低成本或增加效益，而任务式Agent通过微调形成的适配性成为其核心竞争力。

【5月更文挑战第23天】本文探讨了如何评估复杂且精密的语言模型（LLMs）应用。通过创建QA应用程序，如使用GPT-3.5-Turbo模型，然后构建测试数据，包括手动创建和使用LLM生成示例。接着，通过手动评估、调试及LLM辅助评估来衡量性能。手动评估借助langchain.debug工具提供执行细节，而QAEvalChain则利用LLM的语义理解能力进行评分。这些方法有助于优化和提升LLM应用程序的准确性和效率。

【5月更文挑战第22天】本文探讨了如何使用大型语言模型（LLM）进行文档问答，通过结合LLM与外部数据源提高灵活性。 LangChain库被介绍为简化这一过程的工具，它涵盖了嵌入、向量存储和不同类型的检索问答链，如Stuff、Map-reduce、Refine和Map-rerank。文章通过示例展示了如何使用LLM从CSV文件中提取信息并以Markdown格式展示

本文重点围绕向量数据库Chroma的使用和实战，主要包括以下内容： * Chroma设计理念 * Chroma常见概念（数据集，文档，存储，查询，条件过滤） * Chroma快速上手 * Chroma支持的Embeddings算法 * 实战：在Langchain中使用Chroma对中国古典四大名著进行相似性查询

【5月更文挑战第21天】LangChain是一个框架，利用“链”的概念将复杂的任务分解为可管理的部分，便于构建智能应用。数据科学家可以通过组合不同组件来处理和分析非结构化数据。示例中展示了如何使用LLMChain结合OpenAI的GPT-3.5-turbo模型，创建提示模板以生成公司名称和描述。顺序链（SimpleSequentialChain和SequentialChain）则允许按顺序执行多个步骤，处理多个输入和输出

【5月更文挑战第19天】LangChain是一个Python库，简化了与大型语言模型（LLM）如GPT-3.5-turbo的交互。通过ChatOpenAI类，开发者可以创建确定性输出的应用。提示词是指导LLM执行任务的关键，ChatPromptTemplate允许创建可重用的提示模板。输出解析器如StructuredOutputParser将模型的响应转化为结构化数据，便于应用处理。LangChain提供可重用性、一致性、可扩展性，并有一系列预建功能。它使得利用LLM构建复杂、直观的应用变得更加容易。

【5月更文挑战第18天】 本文介绍了构建聊天机器人和语义搜索的关键组件——向量存储和嵌入。首先，文章描述了工作流程，包括文档拆分、生成嵌入和存储在向量数据库中。接着，通过Python代码展示了如何设置环境并处理文档，以及如何创建和比较文本嵌入。向量存储部分，文章使用Chroma存储嵌入，并进行了相似性检索的演示。最后，讨论了故障模式，如重复文档和未捕获结构化信息的问题。整个博文中，作者强调了在实际应用中解决这些问题的重要性。

【5月更文挑战第17天】LangChain代理利用大型语言模型（LLM）作为推理引擎，结合各种工具和数据库，处理复杂任务和决策。这些代理能理解和生成人类语言，访问外部信息，并结合LLM进行推理。文章介绍了如何通过LangChain构建代理，包括集成DuckDuckGo搜索和维基百科，以及创建Python REPL工具执行编程任务。此外，还展示了如何构建自定义工具，如获取当前日期的示例，强调了LangChain的灵活性和可扩展性，为LLM的应用开辟了新途径。

【5月更文挑战第16天】 本文介绍了从零构建一个轻量级的深度学习框架tinynn，旨在帮助读者理解深度学习的基本组件和框架设计。构建过程包括设计框架架构、实现基本功能、模型定义、反向传播算法、训练和推理过程以及性能优化。文章详细阐述了网络层、张量、损失函数、优化器等组件的抽象和实现，并给出了一个基于MNIST数据集的分类示例，与TensorFlow进行了简单对比。tinynn的源代码可在GitHub上找到，目前支持多种层、损失函数和优化器，适用于学习和实验新算法。

【5月更文挑战第15天】 本文介绍了LangChain中文档拆分的重要性及工作原理。文档拆分有助于保持语义内容的完整性，对于依赖上下文的任务尤其关键。LangChain提供了多种拆分器，如CharacterTextSplitter、RecursiveCharacterTextSplitter和TokenTextSplitter，分别适用于不同场景。MarkdownHeaderTextSplitter则能根据Markdown标题结构进行拆分，保留文档结构。通过实例展示了如何使用这些拆分器，强调了选择合适拆分器对提升下游任务性能和准确性的影响。

云效流水线Flow是Java&Maven项目理想的CI/CD工具，以其直观界面、全面功能和阿里云的强性能支持脱颖而出。它简化了新用户的学习过程，无缝集成阿里云ECS，且允许自定义构建脚本，提供高开放性和定制化。尽管非阿里云服务集成有改进空间，但对已有阿里云基础架构的团队，Flow在成本效益和满意度上表现出色，推荐给寻求深度集成解决方案的团队。

【5月更文挑战第14天】 LangChain提供80多种文档加载器，简化了从PDF、网站、YouTube视频和Notion等多来源加载与标准化数据的过程。这些加载器将不同格式的数据转化为标准文档对象，便于机器学习工作流程中的数据处理。文中介绍了非结构化、专有和结构化数据的加载示例，包括PDF、YouTube视频、网站和Notion数据库的加载方法。通过LangChain，用户能轻松集成和交互各类数据源，加速智能应用的开发。

ModelScope-Agent是一个交互式创作空间，它支持LLM（Language Model）的扩展能力，例如工具调用（function calling）和知识检索（knowledge retrieval）。它已经对相关接口进行了开源，以提供更原子化的应用LLM能力。用户可以通过Modelscope-Agent上的不同代理（agent），结合自定义的LLM配置和消息，调用这些能力。

XTuner和魔搭社区（SWIFT）合作引入了一项长序列文本训练技术，该技术能够在多GPU环境中将长序列文本数据分割并分配给不同GPU，从而减少每个GPU上的显存占用。通过这种方式，训练超大规模模型时可以处理更长的序列，提高训练效率。魔搭社区的SWIFT框架已经集成了这一技术，支持多种大模型和数据集的训练。此外，SWIFT还提供了一个用户友好的界面，方便用户进行训练和部署，并且支持评估功能。

【5月更文挑战第9天】 使用Python和预训练的AI模型，结合Gradio前端框架，创建了一个文本及PDF摘要聊天机器人。通过加载"FalconsAI/text_summarization"模型，实现文本和PDF的预处理，包括PDF合并与文本提取。聊天机器人接收用户输入，判断是文本还是PDF，然后进行相应的摘要生成。用户可以通过运行`app.py`启动机器人，访问`localhost:7860`与之交互，快速获取内容摘要。这个工具旨在帮助忙碌的人们高效获取信息。

Yi-1.5是Yi的升级版本。 它使用 500B tokens的高质量语料库在 Yi 上持续进行预训练，并在 3M 个多样化的微调样本上进行微调。

【5月更文挑战第12天】 LangChain代理是利用大语言模型和推理引擎执行一系列操作以完成任务的工具，适用于从简单响应到复杂交互的各种场景。它能整合多种服务，如Google搜索、Wikipedia和LLM。代理通过选择合适的工具按顺序执行任务，不同于链的固定路径。代理的优势在于可以根据上下文动态选择工具和执行策略。适用场景包括网络搜索、嵌入式搜索和API集成。代理由工具组成，每个工具负责单一任务，如Web搜索或数据库查询。工具包则包含预定义的工具集合。创建代理需要定义工具、初始化执行器和设置提示词。LangChain提供了一个从简单到复杂的AI解决方案框架。

本文为魔搭社区轻量级训练推理工具SWIFT微调实战教程系列

LISA是Layerwise Importance Sampling for Memory-Efficient Large Language Model Fine-Tuning的简写，由UIUC联合LMFlow团队于近期提出的一项LLM微调技术，可实现把全参训练的显存使用降低到之前的三分之一左右，而使用的技术方法却是非常简单。

5月6日，幻方继1月份推出首个国产MoE模型，历时4个月，带来第二代MoE模型DeepSeek-V2，并开源了技术报告和模型权重，魔搭社区可下载体验。

【5月更文挑战第13天】智能学生顾问构建技术学习（Lyrz SDK + OpenAI API ）

魔搭社区特别推出研习社栏目，包含AI前沿技术解读、模型应用最佳实践、动手做AI应用（AIGC/Agent/RAG）等主题，持续更新，代码实战点击即运行

Chinese-LLaMA-Alpaca-3开源大模型项目正式发布，开源Llama-3-Chinese-8B（基座模型）和Llama-3-Chinese-8B-Instruct（指令/chat模型）

5月更文挑战第2天

元象公司发布了开源多模态大模型XVERSE-V，该模型在图像输入的宽高比方面具有灵活性，并在多项评测中展现出优越性能，超越了包括谷歌在内的多个知名模型。XVERSE-V采用创新方法结合全局和局部图像信息，适用于高清全景图识别、文字检测等任务，且已在Hugging Face、ModelScope和GitHub上开放下载。此外，模型在视障场景、内容创作、教育解题、百科问答和代码生成等领域有广泛应用，并在VizWiz等测试集中表现出色。元象致力于推动AI技术的普惠，支持中小企业、研究者和开发者进行研发和应用创新。

【5月更文挑战第7天】基于检索增强技术（RAG）构建大语言模型（LLM）应用程序实践