Python
anaconda的python3.9的site-packages的位置路径
anaconda的python3.9的site-packages的安装位置为： /root/anaconda3/lib/python3.9/site-packages
【补充】Django自带的序列化组件
【11.0补充】Django自带的序列化组件 【一】准备数据 【二】需求 在前端获取到后端用户表里面的所有数据，并且格式是列表套字典 【1.0】简单版本 后端 前端 前端接收到的数据展示 【2.0】升级版 前端返回的到的数据
19.实例方法,类方法,静态方法
python 实例方法,类方法,静态方法 目录python 实例方法,类方法,静态方法实例方法类方法静态方法案例参考资料 实例方法 只能被被实例对象调用 第一个参数必须是实例对象，该参数名一般约定为“self”，通过它来传递实例的属性和方法 方法内部可以传类的属性和方法 类方法 实例对象和类对象都可以调用。 使用装饰器@classmethod。第一个参数必须是当前类对象，该
Scrapy自带的断点续爬JOB-DIR参数
参考官方文档：https://docs.scrapy.org/en/latest/topics/jobs.html?highlight=JOBDIR#jobs-pausing-and-resuming-crawls Scrapy原生是支持断点续爬，这意味着如果运行爬虫时发生错误或中断，可以从上次停止的位置恢复爬取。下面是一些可以实现断点续爬的方法： 使用Scrapy自带的JOBDIR设置。使用该
Scrapy-redis组件，实现分布式爬虫
安装包 settings.py 爬虫类：（一般只需要将继承类修改为Scrapy-redis提供的爬虫类即可） 启动爬虫： 手动添加start_urls： 为什么需要手动添加呢？
Scrapy集成selenium-案例-淘宝首页推荐商品获取
scrapy特性就是效率高，异步，如果非要集成selenium实际上意义不是特别大....因为selenium慢.... 案例：淘宝首页推荐商品的标题获取 爬虫类 toabao.py settings.py SeleniumMiddleware.py 下载器中间件
Scrapy如何在启动时向爬虫传递参数
高级方法： 一般方法： 运行爬虫时使用-a传递参数 然后在爬虫类的__init__魔法方法中获取kwargs 方法2： 或则可以通过-s传递settings选项，然后在爬虫类中获取settings也可以！
django项目中分多个models.py创建table
django项目每个app都默认有一个model.py文件。 当app需要大量建立table，且需要分类时，能否建立多个model.py文件? 。 1、在app文件夹下创建一个models文件夹(myapp/models/)： 2、将app文件夹中models.py文件删除（也可以剪切到models文件夹中）： 3、models文件夹下新建__init__.py： 4、models文件夹下
Scrapy框架爬取HTTP/2网站
scrapy本身是自带支持HTTP2的爬取： https://docs.scrapy.org/en/latest/topics/settings.html?highlight=H2DownloadHandler#download-handlers-base 需要把这个包安装一下 然后在settings.py中打开下载处理器 另外可以使用其他支持HTTP2的模块来利用中间件加载并返回数据，如：h
Scrapyd、scrapyd-client部署爬虫项目
命令参考：https://github.com/scrapy/scrapyd-client https://scrapyd.readthedocs.io 安装组件 Scrapyd服务器端 服务器端是可以有多个的，你爱多少个就搞多少个服务器端。部署scrapy时，可以手动指定部署到那个目标服务器端中。 scrapyd配置文件： https://scrapyd.readthedocs.io/en/l
python操作mongodb基本使用
使用pymongo，具体可以参考官方文档： 语法上基本和原生mongodb是一样的，所以非常容易入手... https://pymongo.readthedocs.io/en/stable/tutorial.html 日常使用
python操作mongodb副本集（mongodb高可用）
https://pymongo.readthedocs.io/en/stable/examples/high_availability.html# pymongo比较”智能“，只要你连接的时候指定副本集中的任意一个或者多个成员都可以连接到整个副本集中的成员。 实例： 连接到副本集
python操作mongodb实现读写分离
读写分离 默认情况下，MongoClient 实例将查询发送到副本集的主要成员。 要使用副节点作为查询，以实现读写分离，我们必须更改读取首选项： 读取首选项在模块pymongo.ReadPreference下： PRIMARY： 从主节点中读取（默认） PRIMARY_PREFERRED： 优先从主节点读取，如果不可用则从副节点读取、 SECONDARY： 从副节点读取，如果副节点不可用，则抛出
python学习_循环结构(while循环和for循环)
一、什么叫循环结构？ 反复做同一件事情的情况，就要循环 python中的循环结构主要有两种: 1）while 2）for-in 二、while循环 只要条件成立，其包含的某条语句或某个语句块就会一直被执行，while循环与if语句的区别就是if语句是判断一次，条件为True就执行一次执行体，while循环是判断N+1次，条件为True就执行N次循环体 语法结构 while循环的
百度飞桨PP-YOLOE ONNX 在LabVIEW中的部署推理(含源码)
目录前言一、什么是PP-YOLO二、环境搭建1、部署本项目时所用环境2、LabVIEW工具包下载及安装三、模型的获取与转化1、安装paddle2、安装依赖的库3、安装pycocotools4、导出onnx模型（1）导出推理模型（2） 安装paddle2onnx（3） 转换成onnx格式四、在LabVIEW实现PP-YOLOE的部署推理1、LabVIEW调用PP-YOLOE实现目标检测pp-yolo
python：python解析器和pycharm编译器安装
python解析器下载地址：https://www.python.org/getit/ 注意事项： 1. 建议下载3.6以以上的版本， 2. 官网下载比较慢，可以自行寻找其它网站下载， 3. 建议使用.exe安装包方式下载安装 下载完成后双击运行 验证是否安装成功： &nbs
REST API 设计最佳实践：为什么不要在URI中使用动词？
总的来说，HTTP协议出现以来Web服务也就存在了。但是，自从云计算出现后，才成为实现客户端与服务和数据交互的普遍方法。 作为一名开发者，我很幸运能够在工作中使用一些仍然存在的SOAP服务。但是，我主要接触的是REST，这是一种基于资源的API和Web服务开发架构风格。在我的职业生涯中有很大一部分时间都参与了构建、设计和使用API 的项目。我见过的大多数API 都“声称” 是 “符合REST原则”
提高Djang查询速度的9种方法
引言 在Web应用程序中，数据库查询是一个关键的环节。优化数据库查询可以显著提高应用程序的性能和响应速度。Django作为一个高度可扩展的Web框架，提供了多种方式来优化数据库查询。本文将介绍一些常用的Django数据库查询优化技巧，从入门到精通，帮助您构建高效的应用程序。 目录 索引的优化 查询集的延迟加载 使用select_related进行关联查询 使用prefetch_related进行
dash构建多页应用
dash 构建多页面应用一种方案 本方案对dash官网多页面案例使用dash_bootstrap_components案例进行优化与测试,效果如下 项目代码结构如下 assets/assets_file.py 用来指定样式 pages/page_home.py 多页应用中的一页 pages/page_analytics.py 多页应用中的另一页,同时验证callback ap
解密数据背后的故事：数据分析师的职业魅力
数据在当今信息时代中扮演着至关重要的角色，而数据分析师则是解读和发掘数据中隐藏信息的关键人物。作为数据分析师，他们运用统计学、机器学习和数据可视化等技术手段，从海量的数据中提取出有价值的信息和洞察，并将其转化为可供决策和行动的建议。数据分析师既是数据科学家，又是故事讲述者，他们能够通过数据背后的故事为企业和组织提供战略指导和业务优化的方向。 数据分析师需要具备扎实的数据分析能力和统
python连接Mysql 1-01
import pymysql # 打开数据库连接 db = pymysql.connect(host='localhost', user='root', password='123456', db='test1') # 使用 cursor() 方法创建一个游标对象 cursor cursor = db.cursor() # 使用 execute() 方法执行 SQL 查询 cursor