Python
常用的rddTransformation算子
根据文章： 暑假生活每周总结10 from pyspark import SparkContext # 创建SparkContext对象 sc = SparkContext("local", "RDD Transformations Example") # 假设我们有一个RDD数据源 data = sc.parallelize([1, 2, 3, 4, 5])
使用 AI 构建面向未来的 DevOps
从去年底开始，生成式 AI（AIGC） 作为热门话题，深入影响到了 IT 行业的各个领域和所有从业者。 DevOps 是通过持续集成、持续部署、持续交付的方式，将开发和运营更好地整合在一起的流程，它的发展与架构的演进是紧密相连的。当前的架构逐渐在向微服务化的方向发展，出现了许多新的技术，如容器、无服务器、可观测等技术等，它们都推动了 DevOps 技术以及整个 DevOps 生
软件测试|京东科技控股股份有限公司岗位开放~
测试开发工程师 岗位职责 1、参与项目测试全流程，根据产品需求和研发设计进行需求分析和风险评估，制定测试计划，设计并执行测试用例，进行缺陷定位和跟踪修复，保障项目质量； 2、项目测试环境和线上环境自动化部署工具的开发和维护； 3、自动化测试工具的开发和维护，提升测试效率； 4、系统或业务监控的设计和部署，保障系统安全稳定运行； 5、优化测试流程，并能站在用户角度提出系统优化建议、完善用户体验。 岗
python之常用标准库-configparser
configparser主要用于生成和修改常见配置文档，所以常见的操作为读和写 1.写 定义参数变量，赋值 直接赋值法 通过增加section ，set赋值法 通过增加section.option赋值法 通过空字典赋值法 View Code 写入文件 将conf变量里面的值存入文件中，打开文件，执行写操作 View Code 2.读 从变量里面读
五、基本结构_线性结构
五、基本结构_线性结构 线性结构 Linear Structure 线性结构是一种有序数据项的集合，其中每个数据项都有唯一的前驱和后继。 除了第一个没有前驱，最后一个没有后继，新的数据项加入到数据集中时，只会加入到原有某个数据项之前或之后 具有这种性质的数据集，就称为线性结构。 线性结构总有两端，称呼不同，“左”“右”“前”“后”“顶”“底”。 两端的称呼并不是关键，不同线性结构的关键区别在于数据
luffy_09 celery+1
前倾回顾： 今日内容 celery介绍 # celery 是什么 -翻译过来是芹菜 -官网：https://docs.celeryq.dev/en/stable/ -吉祥物：芹菜 -分布式的异步任务框架 - 分布式：一个任务，拆成多个任务在不同机器上做
celery实现异步任务、定时任务和延迟任务
1.异步任务 2.延迟任务 3 定时任务 —— 需要启动beat 3.1 在celery.py 中配置 3.2 启动worker 3.3 启动beat
Opencompass笔记整理
Smiling & Weeping ---- 山海自有归期，风雨自有相逢 大模型评测教程 随着人工智能技术的快速发展， 大规模预训练自然语言模型成为了研究热点和关注焦点。OpenAI于2018年提出了第一代GPT模型，开辟了自然语言模型生成式预训练的路线。沿着这条路线，随后又陆续发布了GPT-2和GPT-3模型。与此同时，谷歌也探索了不同的大规模预
Imdeploy笔记
Smiling & Weeping ---- 天气不好的时候，我会小心地把自己心上的裂缝补起来。为什么？... LMDeploy 的量化和部署 1 环境配置 2 服务部署 2.1 模型转换 2.1.1 在线转换 2.1.2 离线转换 2.2 TurboMind 推理+命令行本地对话 2.3 TurboMind推理+API服务 2.4
Django中使用celery注意事项
第一步：把封装的包：celery_task 复制到项目中 第二步：在celery.py 文件中加入 第三步：写任务，启动worker 第四步：在django的视图类中，异步调用即可
Debug: tfx: ERROR:absl:[StatisticsGen] Input resolution error
[ERROR:absl:[StatisticsGen] Input resolution error: Error while resolving inputs for StatisticsGen: InputSpec min_count has not met: inputs[examples] has min_count = 1 but only got 0 artifacts. (Artif
python操作yaml
补充：yaml语法 详见：yaml语法 yaml应用场景 1、保存测试数据 2、也可以保存自动化测试中的关联数据 安装yaml模块 pip install pyyaml==5.4.1 读取yaml数据 读取数据：load()或者full_load() ，返回一个对象 用例数据：case.yaml - caseId: 1 a
使用 docker 部署 kafka
在很多时候我们需要使用到消息队列, 其中 kafka 是一个非常优秀的消息队列, 在我们平时开发中也经常会用到, 但是在开发环境中部署 kafka 是一个非常麻烦的事情 在 kafka 官网上, 有一个详细的部署文档, 需要的小伙伴可以参考这个文档 https://kafka.apache.org/quickstart, 但是随之带来的问题是, 我们需要 java 环境, 并且需要安装 zooke
1.29寒假每日总结20
将你的Python代码打包成一个exe文件，方便其他人在没有安装Python环境的情况下运行，可以使用PyInstaller或cx_Freeze等工具将其打包成可执行文件。 以下是使用PyInstaller的步骤： 首先，确保你已经安装了PyInstaller。你可以使用以下命令在终端或命令提示符中进行安装： Copy Code pip install pyinstaller 进入你的项目
2024.1.29寒假每日总结20
算法题：514. 自由之路 - 力扣（LeetCode） 将你的Python代码打包成一个exe文件，方便其他人在没有安装Python环境的情况下运行，可以使用PyInstaller或cx_Freeze等工具将其打包成可执行文件。 以下是使用PyInstaller的步骤： 首先，确保你已经安装了PyInstaller。你可以使用以下命令在终端或命令提示符中进行安装： Copy Code pip
docker常用的镜像
`set -o errexit docker pull mysql:5.7.41 docker run -itd --restart=always --log-opt max-size=100m --log-opt max-file=2 --name mysql2 -p 3307:3306 -e MYSQL_ROOT_PASSWORD=qiuwen123456 mysql:5.7.4
今日回顾-回溯算法-17. 电话号码的字母组合
注意点&感悟： 我知道为什么，当初有些学霸说要复习了。 因为有的知识点，你一遍没学会，自然要重复学习。所为复习，就是再学一遍。 而简单的知识点，就不需要复习了，你已经明显知道自己掌握了，就不需要复习了。 而预习呢？是为了，让提前学一遍，更多的是针对那些上课时间有限，以及学生等不及的情况下，主动去预习。 预习更多的是为了充分利用上课时间，可以有针对性的听。（或者说，为了上课装逼，哈哈哈）
虚拟环境python3.8安装GDAL包
网上的方法直接是： pip install GDAL‑3.4.1‑cp38‑cp38‑win_amd64.whl 但是这个方法不适用于我，因为我的pycharm上面的anaconda是python3.7，但是我创建了一个python3.8的虚拟环境 所以需要： 1. 切换虚拟环境2. 导入离线包 python3.8对应着的GDAL为：GDAL-3.4.3-cp38-cp38-win_amd6
ubuntu18容器内编译安装python3.9后，pip安装失败问题
参考文档 https://www.jianshu.com/p/8a17267caf5fhttps://blog.csdn.net/youxijishu/article/details/128885291https://blog.csdn.net/Beyond_F4/article/details/104004626https://zhuanlan.zhihu.com/p/598697
Linux环境安装postgresql
一、资源包下载 1.1、官网下载地址 https://www.postgresql.org/ftp/source/ 1.2 上传安装包，并解压 二、配置环境 2.1 安装依赖 2.2 创建用户组 2.3 创建目录并授权 2.4 添加环境变量 三、开始安装 3.1 编译 &n
SysTrayIcon 改的 python tkinter 最小化至系统托盘，适用TTK
网上的SysTrayIcon改的，Tk页面最小化至托盘，托盘图标左键单击恢复Tk界面 1.点击最小化隐藏至托盘 2.托盘图标右键菜单展示，左键返回Tk界面。 托盘图标可以自定义，修改了SysTrayIcon更容易调用，Demo窗口加了注释，具体查看 _Main 类。 代码如下：
installForge打包记
在一个python小项目中完成windows下exe程序创建后，需要将其打包成安装包，之前因为这个需求并不多所以一直没做，直到看到https://www.pythonguis.com/tutorials/packaging-pyqt5-pyside2-applications-windows-pyinstaller/文档的介绍后，发现一个超好用的开源工具，于是尝试了一下，首先进行设置如下： 1、总