众所周知，苹果MacOs系统虽然贵为Unix内核系统，但由于系统不支持N卡，所以如果想在本地跑AI项目，还需要对相关的AI模块进行定制化操作，本次我们演示一下如何将基于Python3.11的AI项目程序打包为MacOS可以直接运行的DMG安装包，可以苹果系统中一键运行AI项目。 MacOs本...[2024/8/26]

分页查询 分页查询是处理大量数据时常用的技术，通过分页可以将数据分成多个小部分，方便用户逐页查看。SQLAlchemy 提供了简单易用的方法来实现分页查询。 本篇我们也会在最终实现这样的分页效果： 1. 什么是分页查询 分页查询是将查询结果按照一定数量分成多页展示，每页显示固定数量的记录...[2024/7/13]

模块介绍 adorner 是一个现代轻量级的 Python 装饰器辅助模块。 目前该模块仅实现了 4 个类，对应着 4 个功能：制造装饰器、执行计时、函数缓存、捕获重试。 仓库地址：https: github.com/gupingan/adorner 安装 该模块可在上方仓库中的 Re...[2024/7/13]

大侠幸会，在下全网同名「算法金」 0 基础转 AI 上岸，多个算法赛 Top 「日更万日，让更多人享受智能乐趣」 今日 210+/10000，内含 Pandas 是一个强大的数据分析库，广泛应用于科学研究、金融分析、商业智能等领域。它提供了高效的数据结构和数据分析工具，使得处理和分...[2024/7/11]

这是一个自己写的使用pyqt5制作简单计分桌面应用的实例，希望对大家有所帮助。制作这个小程序的起因是因为有个艺术类比赛需要设计这个一个桌面程序，方便统分。 （此程序尚存在部分小bug，请慎用，公开代码只为让小白熟悉如何开发一个简单的桌面计分程序） ui设计 众所周知，使用pyqt5开发可以直...[2024/7/11]

题目 监听服务器端口，得到题目如下： 源码解析 主函数 主函数中是题目界面的逻辑，对应于用户的选择做出相应的操作，其中需要注意的是选项2，解压操作需要获得root权限(uid==0). 选项1，2：文件压缩和解压缩，是常规的文件压缩代码，不做解释。 选项3...[2024/7/3]

上一篇介绍的SingleStringMathTex主要用来显示只有一行的数学公式， 对于复杂的数学公式，可以使用MathTex类。 MathTex类继承自SingleStringMathTex，在其基础之上增加了更多的功能。 其实，MathTex是制作数学动画时常用的类，反而SingleStr...[2024/6/28]

简介 在CUDA程序中, 访存优化个人认为是最重要的优化项. 往往kernel会卡在数据传输而不是计算上, 为了最大限度利用GPU的计算能力, 我们需要根据GPU硬件架构对kernel访存进行合理的编写. 这章主要以计算一个tensor的模为例, 来看具体如何优化访存从而提升并行效率. 以下代...[2024/6/17]

MoneyPrinterPlus是一款使用AI大模型技术,一键批量生成各类短视频,自动批量混剪短视频,自动把视频发布到抖音,快手,小红书,视频号上的轻松赚钱工具。 之前有出过一期基本的介绍，但是后台收到有些小伙伴说，不知道如何使用。 今天我将会手把手的详细介绍如何使用MoneyPrinter...[2024/6/17]

现在有很多去除水印的工具，但基本上都需要你花钱。作为资深白嫖党，想让我花钱，那是不可能的。 于是我做了下research(search, search, research…)，我发现现在的“去水印”基本上都是一个思路：利用图像修复算法。把有水印的地方看作是图像损坏的地方，用相邻像素替换那些损坏...[2024/6/5]

背景 在flask web中我们通常需要一个traceid作为调用参数传递给全链路各个调用函数 需要针对一次请求创建一个唯一的traceid：这里用uuid去简化代替 我们需要保证traceid不被污染，在每个请求期间存在，在请求结束销毁且线程独立：这里通过flask中的g对象来存储线程内的数...[2024/6/3]

安装pytorch Nano上预装的Jetpack版本为4.6.1，Python为3.6.9，CUDA环境为10.2。在PyTorch for Jetson中可以下载不同版本的torch，torch<=1.10.0。 1 安装torch1.8.0 # substitute the li...[2024/6/3]

适用于linux的bilibiliB站直播间弹幕爬虫脚本,命令行运行之,输入到命令行,部分内容参考自网络,代码底部可见原始代码出处 BUFF:然而,经测试,每次爬只能读取10条弹幕记录,这就使得在(sleeptime*10)(每秒)<弹幕新增量(每秒)时出现弹幕丢失的情况,此时需要调短s...[2024/5/31]

RCTF 2024 WEB wp 前言 赛后复现，proxy发现自己真是个呆b... what_is_love 首先拿key1，sql语句处有注入，可以盲注拿key1的值 import requests import string strings = string.digits + stri...[2024/5/29]

前言 学会如何安装配置华为云ModelArts、开发板Atlas 200I DK A2。 并打通一个Ascend910训练到Ascend310推理的全流程思路。 在本篇章，我们继续进入推理阶段！ 推理阶段 B. 环境搭建 AscendCL 开发板 模型推理 Step1 准备硬件 ...[2024/5/29]

论文设计了用于密集预测任务的纯Transformer主干网络PVT，包含渐进收缩的特征金字塔结构和spatial-reduction attention层，能够在有限的计算资源和内存资源下获得高分辨率和多尺度的特征图。从物体检测和语义分割的实验可以看到，PVT在相同的参数数量下比CNN主干网络...[2024/5/22]

最大权闭合子图 引入 Introduction 闭合子图指对于子图 \(G=(V,E)\)，\(\forall u \in V, (u,v)\in E\)，都有 \(v\in V\)。 最大权闭合子图无非就是对于所有的闭合子图 \(G\) 中 \(\sum_{u\in V} w_u\) 最大的...[2024/5/22]

Playwright是微软开发的，专门为满足端到端测试需求而创建的。Playwright支持包括Chromium、WebKit和Firefox在内的所有现代渲染引擎。在Windows、Linux和macOS上进行测试，本地或在CI上，无头或有头，带有本机移动仿真。 安装 安装playwrigh...[2024/5/15]

技术背景 分子动力学模拟中的控制器（Controller）可以被用于修改模拟过程中的原子坐标和原子速度等参量，从而达到控制系统特定参量的目的。例如控温器可以用于实现NVT系综，控压器可用于实现NPT系综。而在MindSponge分子动力学模拟框架下，控温控压都可以基于控制器Controller来...[2024/5/15]

  cartpole游戏，车上顶着一个自由摆动的杆子，实现杆子的平衡，杆子每次倒向一端车就开始移动让杆子保持动态直立的状态，策略函数使用一个两层的简单神经网络，输入状态有4个，车位置，车速度，杆角度，杆速度，输出action为左移动或右移动，输入状态发现至少要给3个才能稳定一会儿，给...[2024/5/13]

最近OpenVoice项目更新了V2版本，新的模型对于中文推理更加友好，音色也得到了一定的提升，本次分享一下如何在苹果的MacOs系统中本地部署OpenVoice的V2版本。 首先下载OpenVoiceV2的压缩包： OpenVoiceV2-for-mac代码和模型 https: pan...[2024/5/11]

Tensors张量的学习 张量是一种特殊的数据结构，与数组和矩阵非常相似。在PyTorch中，我们使用张量来编码模型的输入和输出，以及模型的参数。 张量类似于NumPy的ndarrays，只是张量可以在GPU或其他硬件加速器上运行。事实上，张量和NumPy数组通常可以共享相同的底层内存，从而无...[2024/5/8]

文章代码仓库：https: github.com/LXP-Never/window_fun 窗函数贯穿整个语音信号处理，语音信号是一个非平稳的时变信号，但“**短时间内可以认为语音信号是平稳时不变的，一般 10~30ms**。 对连续的语音分帧做STFT处理，等价于截取一段时间信号，对其...[2024/5/6]

最近在做交易数据的统计分析时，多次用到数据行之间的一些操作，对于其中的细节，简单做了个笔记。 1. shfit函数 shift函数在策略回测代码中经常出现，计算交易信号，持仓信号以及资金曲线时都有涉及。 这个函数的主要作用是将某列的值上下移动。 默认情况下，shift函数是向下移动一行， 移动...[2024/4/29]

东方财富网-数据中心 —— 爬虫项目 0x00 起因 MaMa 看到别人有个软件，可以直接把一个网站上的数据全部爬进一个 Excel 里边，但是那个人不给这个软件，所以她怂恿我写一个。。。 0x01 需求 千股千评 _ 数据中心 _ 东方财富网 (eastmoney.com) 对于里边的00...[2024/4/23]

6 概率 简单地说，机器学习就是做出预测。根据病人的临床病史，我们可能想预测他们在下一年心脏病发作的概率。在飞机喷气发动机的异常检测中，我们想要评估一组发动机读数为正常运行情况的概率有多大。在强化学习中，我们希望智能体（agent）能在一个环境中智能地行动。这意味着我们需要考虑在每种可行的行为下...[2024/4/23]

利用PyTorch训练模型识别数字+英文图片验证码 摘要：使用深度学习框架PyTorch来训练模型去识别4-6位数字+字母混合图片验证码（我们可以使用第三方库captcha生成这种图片验证码或者自己收集目标网站的图片验证码进行针对训练）。 一、制作训练数据集 我们可以把需要生成图片的一些参数放...[2024/4/17]

本文分享自华为云社区《从数据到部署使用Plotly和Dash实现数据可视化与生产环境部署》，作者： 柠檬味拥抱。 数据可视化是数据分析中至关重要的一环，它能够帮助我们更直观地理解数据并发现隐藏的模式和趋势。在Python中，有许多强大的工具可以用来进行数据可视化，其中Plotly和Dash是两...[2024/4/15]

Sparse稀疏检索介绍 在处理大规模文本数据时，我们经常会遇到一些挑战，比如如何有效地表示和检索文档，当前主要有两个主要方法，传统的文本BM25检索，以及将文档映射到向量空间的向量检索。 BM25效果是有上限的，但是文本检索在一些场景仍具备较好的鲁棒性和可解释性，因此不可或缺，那么在NN模型...[2024/4/15]

技术背景 这篇文章来源于MindSpore仓库中的一个I ue，简单描述问题就是，如果你用MindSpore开发了一个python软件供别人使用，那么很有可能涉及到编译构建的问题。但是如果直接使用编译好的whl包去运行的话，就有可能出现一个跟Jit即时编译有关的报错，这里Jit在其他的一些模块中...[2024/4/11]

Deep Learning Demo of Primary 下面介绍一个入门案例，如何使用TensorFlow和Keras构建一个CNN模型进行手写数字识别，以及如何使用该模型对自己的图像进行预测。尽管这是一个相对简单的任务，但它涵盖了深度学习基本流程，包括： 数据准备 模型构建 模型训练 ...[2024/4/3]

目录前言Aravis简介依赖关系说明安装过程meson安装aravis源文件下载构建和安装aravis视频查看器安装过程中遇到的问题meson版本过低CMake版本过低缺少GStreamer组件参考文章 前言 最近在做采集软件的开发，由于我自己使用过Huaray和Basler两个品牌的相机，...[2024/4/1]

0.环境准备，我使用的VS版本是17.9.4，SDK版本是10.0.22621.0，最好不要用太老的版本   1.去下载Python，git，cmake这三个工具，然后在D盘根目录新建TBuild文件夹，里面再建Libraries和ThirdParty这两个文件夹 下载地址：...[2024/4/1]

为了重复利用已有的代码，我使用自定义插件进行开发。当每个插件独立开发时没有遇到问题，但是当插件B引用了插件A时就会在编译时报错 error: LNK2001: 无法解析的外部符号。 例如，先定义一个插件ColorPicker，用于颜色选取。关键代码如下: cla QDESIGNER_WID...[2024/3/29]

【Pavia】遥感图像数据集下载地址和读取数据集代码 目录【Pavia】遥感图像数据集下载地址和读取数据集代码前言Pavia数据集Pavia数据集地址：Pavia数据集预览PaviaU.matPaviaU_gt.matPavia数据集的Matlab读取方式Pavia数据集中PaviaU.mat...[2024/3/29]

缺失值填充 拿到的数据或多或少都不是立即可以用的，对于一些可能因为各种主观或者客观原因导致缺失的情况我们需要进行缺失值处理，尽可能地保留更多地数据。 多重插补法 （1）插补：将不完整数据集缺失的观测行估算填充m次。请注意，填充值是从某种分布中提取的。模拟随机抽取并不包含模型参数的不确定性。更好...[2024/3/27]

在本篇文章中，爬虫的讲解不仅仅局限于爬虫本身，还会引申至另一个重要领域：数据分析。对我们而言，爬虫的核心价值实际上在于获取数据，一旦获得了数据，接下来必然是要加以利用。数据分析便是其中关键一环，因此在爬虫的讲解之后，我们将会稍作涉及与数据分析相关的知识要点。 今天主要任务是爬取全国消费数据，然...[2024/3/25]

一、检查点的方式有哪些: 主要是python 内置的a ert 断言（自动断言）还有locust 中的catch_response 断言（手动断言）；那么这两者之间有什么区别呢？ 其实主要区别在与生成locust 报告上面，手动断言失败，我们在locust上面可以清楚的看到报错信息，如果通过内...[2024/3/20]

在过去的实践中，我们通常通过爬取HTML网页来解析并提取所需数据，然而这只是一种方法。另一种更为直接的方式是通过发送HTTP请求来获取数据。考虑到大多数常见服务商的数据都是通过HTTP接口封装的，因此我们今天的讨论主题是如何通过调用接口来获取所需数据。 目前来看，大多数的http接口数据都采用...[2024/3/20]

在数据分析相关的工作中，Pandas无疑是一个强大的工具，它的易用性和灵活性广受青睐。 然而，随着数据量的不断增长和计算需求的日益复杂，Pandas代码的性能问题也逐渐浮出水面。 如何让Pandas代码运行得更快、更高效，成为了每一个人使用者都需要面对的挑战。 今天，本文就一个简化版的实际分析...[2024/3/19]

今天我们将继续进行爬虫实战，除了常规的网页数据抓取外，我们还将引入一个全新的下载功能。具体而言，我们的主要任务是爬取小说内容，并实现将其下载到本地的操作，以便后续能够进行离线阅读。 为了确保即使在功能逐渐增多的情况下也不至于使初学者感到困惑，我特意为你绘制了一张功能架构图，具体如下所示： ...[2024/3/19]

我想做一个尝试，看看能不能用尽量清晰的逻辑，给“AI外行人士”（当然，我也是……）引入一下LangChain，试着从工程角度去理解LangChain的设计和使用。同时大家也可以将此文档作为LangChain的“10分钟快速上手”手册，本意是希望帮助需要的同学实现AI工程的Bootstrap。 ...[2024/3/18]

今天是第二堂课，我们将继续学习爬虫技术。在上一节课中，我们已经学会了如何爬取干饭教程。正如鲁迅所说（我没说过），当地吃完饭就去外地吃，这启发了我去爬取城市天气信息，并顺便了解当地美食。这个想法永远是干饭人的灵魂所在。 今天我们的目标是学习如何爬取城市天气信息，因为要计划去哪里玩耍，首先得了解天...[2024/3/18]

pandas的DataFrame可以通过设置参数使得在jupyter notebook中显示的更加美观， 但是，将DataFrame的数据导出excel时，却只能以默认最朴素的方式将数据写入excel。 本文介绍一种简单易用，让导出的excel更加美观的方法。 1. 概要 首先，引入一个库S...[2024/3/15]

本文分享自华为云社区《深入Python：sys模块的功能与应用详解》，作者： 柠檬味拥抱。 在Python的标准库中，sys 模块是一个常用而强大的工具，它提供了与Python解释器交互的函数和变量。本文将介绍sys模块的一些常用函数和方法，并通过实际的代码实例来解析它们的用法。 1...[2024/3/4]

技术背景 分子动力学模拟（Molecule Dynamics Simulation，MD），本质上是一门采样技术。通过配置力场参数、拓扑结构和积分器，对一个给定的体系不断的采样，最终得到一系列的轨迹。那么得到分子动力学模拟的轨迹之后，如何使用后分析工具进行轨迹分析，也是一项很重要的工作。目前来说...[2024/3/1]

官方介绍 LangChain 是一个利用LLM开发应用程序的框架。它让应用程序具备： 上下文感知能力：将LLM连接到上下文源（提示说明、少量示例、用以形成其响应的内容等） 推理：依靠LLM进行推理（例如根据提供的上下文确定如何回答、采取什么措施等） LangChain 框架包含以下几部分：...[2024/3/1]

技术背景 在python中定义一个列表时，我们一定要注意其中的可变对象的原理。虽然python的语法中没有指针，但是实际上定义一个列表变量时，是把变量名指到了一个可变对象上。如果此时我们定义另外一个变量也指到同一个可变对象的话，就会造成一个“联动”的现象。也就是改变其中的一个值时，另一个值也会随...[2024/2/28]

记一次 splice 导致 io.Copy 阻塞的排查过程 简而言之，net.TCPConn 的 ReadFrom 零拷贝实现 splice 在 1.21.0 - 1.21.4 删除了 SPLICE_F_NONBLOCK 参数，导致在 CentOS7.2(内核版本 3.10.0) 上 splic...[2024/2/26]

今天我们要介绍的是Python的内置库——小海龟（turtle），它是一个非常实用的绘画工具，不仅可以帮助我们绘制图形，还能让我们查看整个绘画过程。即使对绘画一窍不通的人也能够使用它来创作出生动、形象的gif动图。现在正是龙年即将到来，距离过年也只有几天的时间了。因此，我今天的主要目的就是使用小...[2024/2/2]