Python
Spark 框架模块和Spark的运行模式 -
整个Spark 框架模块包含：Spark Core、 Spark SQL、 Spark Streaming、 Spark GraphX、 Spark MLlib，而后四项的能力都是建立在核心引擎之上 Spark Core：Spark的核心，Spark核心功能均由Spark Core模块提供，是Spark运行的基础。Spark Core以RDD为数据抽象，提供Python、Java、 Scala、
python3文本文件读写
读写txt文件 with open("../files/test.txt", encoding="utf-8-sig") as f: str = f.read() lst = [] if str: data = str.split("n") for row in data: if len(row) > 0:
tkdu - 用Python重新实现的 ncdu
磁盘空间越来越少，可是不知道空间究竟被谁占了？ 在Linux下有一个命令行小工具 ncdu，可以列出目录及其子目录所占磁盘空间的大小。首先，du 是一个古老的 UNIX 命令，可以打印一个目录所占磁盘空间的大小，它的名字是 disk usage的首字母缩写。du 的局限在于它一次只能列出一个目录的大小。ncdu 则更进一步，它可以列出一整个目录树中，所有子目录和文件的大小。而且它使用了图形用户界面
python3控制结构
选择 n = 10 i = 2 if n == i: print("equal") elif n < i: print("lower") else: print("higher") 遍历 while i < n: i += 1 print(i) else: print("done") for i in range(0, 5):
python3图片处理之pillow库
pillow库简单使用 from PIL import Image, ImageFilter # pillow库 img = Image.open("../../files/1.jpg") # 通道 print(img.getbands()) # ('R', 'G', 'B') print(img.getbbox()) # (0, 0, 690, 517) # 图片的尺寸 print(im
python3可视化之matplotlib库
import matplotlib.pyplot as plt import numpy as np N = 8 i = 0 # 指定一个画板 fig = plt.figure(figsize=(20, 5 * N)) x = np.arange(0, 3 * np.pi, 0.1) y_sin = np.sin(x) y_cos = np.cos(x) i += 1 plt.s
张正友棋盘代码-python
具体实现方案： 棋盘是一块由黑白方块间隔组成的标定板，我们用它来作为相机标定的标定物（从真实世界映射到数字图像内的对象）。之所以我们用棋盘作为标定物是因为平面棋盘模式更容易处理（相对于复杂的三维物体），但与此同时，二维物体相对于三维物体会缺少一部分信息，于是我们会多次改变棋盘的方位来捕捉图像，以求获得更丰富的坐标信息。 下面将依次对刚体进行一系列变换，使之从世界坐标系进行仿射变换、投影透射，最终得
记录一次不太成功的人脸识别测试
本意是想找一个在 C# 中方便直接调用的人脸识别模型代码，原来用过 python 的，但是转到 C# 中很麻烦，最近发现一个项目 FaceRecognitionDotNet（开源地址：https://github.com/takuya-takeuchi/FaceRecognitionDotNet） 虽然在 2022 年已经停更了，但是感觉应该还不算太久，应该问题不大吧，唔，就踩了坑了，最后也没能解
中文语音识别转文字的王者,阿里达摩院FunAsr足可与Whisper相颉顽
君不言语音识别技术则已，言则必称Whisper，没错，OpenAi开源的Whisper确实是世界主流语音识别技术的魁首，但在中文领域，有一个足以和Whisper相颉顽的项目，那就是阿里达摩院自研的FunAsr。 FunAsr主要依托达摩院发布的Paraformer非自回归端到端语音识别模型，它具有高精度、高效率、便捷部署的优点，支持快速构建语音识别服务，最重要的是，FunASR支持标点符号识别、
rm -rf dir删除不了的几种情况
我勒个去！root用户通过rm -rf 竟无法删除文件了！ 原创 浩道 浩道Linux 2024-01-09 07:50 发表于广东 关注上方浩道Linux，回复资料，即可获取海量Linux、Python、网络通信、网络安全等学习资料！ 前言 大家好，这里是浩道Linux，主要给大家分享Linux、Python、网络通信、网络安全等相关的IT知识平
使用cv2.getOptimalNewCameraMatrix函数，变为圆形是出现什么错误
cv2.getOptimalNewCameraMatrix 函数用于计算一个新的相机矩阵，以进行图像畸变校正。这个函数的目标是通过考虑畸变的影响，生成一个新的相机矩阵，使得校正后的图像更接近理想的情况。 cv2.getOptimalNewCameraMatrix(cameraMatrix, distCoeffs, imageSize, alpha, newImgSize) 其中参数的含义如下：
1，一个测试驱动的Spring Boot应用程序开发
系统任务 用户每次访问页面时，系统显示一道两位数的乘法题。用户输入别名（简称）并对计算结果进行猜测。这是基于他们只能进行心算的假设。用户发送数据后，Web页面将显示猜测是否正确。 另外，希望能保持用户的积极性，引入游戏机制。对每个正确的猜测结果，系统会给出评分，用户能在排名中看到分数，这样就可以与他人竞争。 用户故事 作为用户，想通过心算来解随机的乘法题，以锻炼自己的大脑。 为此，需要为这个Web
k8s-1.28版本多master部署
一、环境准备 k8s集群角色 IP 主机名 安装相关组件 kubernetes版本号 控制节点 192.168.10.20 master apiserver、controller-manager、scheduler、kubelet、etcd、docker、kube-proxy、keepalived、nginx、calico 1.28.2 控制节点 192.168.10.21 mast
PyTorch项目源码学习（2）——Tensor代码结构初步学习
PyTorch版本：1.10.0 Tensor Tensor是Pytorch项目较为重要的一部分，其中的主要功能如存储，运算由C++和CUDA实现，本文主要从前端开始探索学习Tensor的代码结构。 结构探索 PyTorch前端位于torch目录下，从_tensor.py可以找到Tensor的python定义，可以看到其继承自torch._C._Tensorbase 而Tensorbase的定义
一个 python 拆解文本文件的工具
背景 你是否有遇到过文本文档太大无法打开的情况？比如说压测了好几天，生成了一个十几 G 的日志文件。 下面这个脚本可以帮助你将一个大文件分解成一个小文件。 假设文件名位：splitfile.py 使用方法位：python splitfile.py log 20 该文件将会将 log 文件拆分成 log.0 log.1 log.2 ... log.19 等 20 个文件 源码
2024.1.10-学习进度笔记
今天，主要尝试安装了Anaconda3并进行了一些基础配置。 参考：https://blog.csdn.net/weixin_52677672/article/details/133632708 安装Anaconda3-2023.09-0-Windows-x86_64.exe 配置环境变量 D:softanaconda3 D
软件测试/测试开发/全日制|Pytest参数化神器，pytest.mark.parametrize()使用
前言 当我们要使用pytest输入多个数据对一个功能进行测试时，如果写多个测试用例的话，那就完全体现不出通过代码来执行测试的优势了，这个时候，就轮到pytest的参数化功能闪亮登场了。所谓参数化，就是就是把测试过程中的数据提取出来，通过参数传递不同的数据来驱动用例运行。其实也就是数据驱动的概念。本文就给大家介绍一下pytest的参数化和数据驱动。 参数化方式 在unittest中，我们使用ddt
软件测试/测试开发/全日制|pytest如何标记测试用例
前言 在pytest中，有时候我们并不需要对所有的用例全部执行。pytest提供了一种机制：有选择的挑选用例去执行，即标记测试函数。下面详细介绍几种方法给函数标记。 使用pytest.mark在函数上进行标记 标记格式 @表示这是一个装饰器，pytest.mark是pytest固定的写法,mark_name可以使用自定义标记和内置标记。如下： 常用内置标记 示例如下： 执行结果如下： 自
软件测试/测试开发全日制培训|Pytest跳过用例和失败重试
前言 在我们日常进行自动化测试时，经常会遇到功能阻塞，未实现或者环境有问题等等原因，一些用例执行不了，如果我们注释掉或删除掉这些测试用例，后面可能还要进行恢复操作，这个时候pytest的跳过测试功能就能帮助我们，先跳过，等到问题解决时，恢复执行即可；同时我们还有可能会遇到需要对失败用例重新运行进行测试的情况，pytest也能满足我们的需求，本文就来给大家介绍一下Pytest跳过用例和失败重试的实
flask中设置日志
新建一个log.py文件 import os import logging from logging.handlers import RotatingFileHandler def get_cwd(): return os.path.dirname(os.path.abspath(__file__)) def log_config(): # 设置日志的登记 loggi
vscode使用anaconda虚拟环境
问题分析： 当我们第一次使用vscode+anaconda虚拟环境来运行项目时，一般会报错no module name 'torch'这样的错误，尽管我们已经切换vscode使用的环境为正确的环境也还是不行。这个问题是因为我们在vscode中运行项目是在终端运行的，但如果这个终端是powershell，会导致无法激活你的conda环境，导致使用的环境是默认的python环境。 解决方法： 方法1.
盘点一个Python自动化办公的需求——一键批量插图到Excel指定单元格
大家好，我是皮皮。 一、前言 前几天在Python白银交流群【上海新年人】问了一个Python自动化办公的问题，问题如下：大佬们，昨天我在做插入excel图片的时候想起一个需求，好像挺难办的，也蛮现实的。比如每个图片是有名称的，但在做excel的时候，能不能按照excel中的名称调用图片插入。就像下面这样子，插入在B列对应的名称边上。 相当于你现在的图片名称已经命名好了，你现在只需要插入到Exc
vue2-vue3 1
vue介绍 一、前端发展史 1、HTML(5)、CSS(3)、JavaScript(ES5、ES6)：编写一个个的页面 -> 给后端(PHP、Python、Go、Java) -> 后端嵌入模板语法 -> 后端渲染完数据 -> 返回数据给前端 -> 在浏览器中查看 2、Ajax的出现 -> 后台发送异步请求，Render+Ajax混合 3、单用Ajax（加载数据，