本文分类：news发布日期：2024/9/20 22:30:34
相关文章
linux 自动清除日志 脚本
文章目录 1. remove_logs.sh 脚本编写2.赋予脚本执行权限3. cron 自动化配置 1. remove_logs.sh 脚本编写 #!/bin/bash
#定义日志文件路径
LOG_DIR"/usr/local/src/cncareer-client/logs"
#删除超过三天的日志文件
find $LOG_DIR -name "*.log" -type f -m…
建站知识
2024/9/18 0:49:37
大模型微调 - 自动加载预训练模型
大模型微调 - 自动加载预训练模型
flyfish
AutoModelFor 是 Hugging Face transformers 库中的一个通用接口，这里用的是modelscope ，用于自动加载预训练模型，涵盖多种任务的模型。AutoModelFor 后面接不同的任务名称会对应不同的模型架构&a…
建站知识
2024/9/19 10:24:18
C# HttpListener 实现的HTTP Sever浏览器文件下载
1. 前端页面请求
编写简单的test.html 文件，body体值配置a标签，其href 属性设置为文件下载请求的http接口要求的参数序列。
<!DOCTYPE html><html>
<head><meta name"viewport" content"widthdevice-width" …
建站知识
2024/9/16 22:18:07
128. 最长连续序列-LeetCode(C++)
128. 最长连续序列
2024.9.12
题目
给定一个未排序的整数数组 nums ，找出数字连续的最长序列（不要求序列元素在原数组中连续）的长度。
请你设计并实现时间复杂度为 O(n) 的算法解决此问题。
提示：
0 < nums.length < …
建站知识
2024/9/19 9:35:50
【ShuQiHere】探索人工智能核心：机器学习的奥秘
【ShuQiHere】
💡 什么是机器学习？ 机器学习（Machine Learning, ML）是人工智能（Artificial Intelligence, AI）中最关键的组成部分之一。它使得计算机不仅能够处理数据，还能从数据中学习&#x…
建站知识
2024/9/19 8:51:54
本地调试spark，访问kerberos鉴权的hdfs、hive
文章目录 准备连接hive的配置申请kerberos tgt在scala项目启动本地spark本地Jupyter Notebook启动pyspark 准备连接hive的配置
core-site.xml、hdfs-site.xml、yarn-site.xml、hive-site.xml复制到本地； 不知道为什么yarn-site.xml里的配置也必须存在，即…
建站知识
2024/9/17 14:51:04
用于大数据分析的数据存储格式：Parquet、Avro 和 ORC 的性能和成本影响
高效的数据处理对于依赖大数据分析做出明智决策的企业和组织至关重要。显著影响数据处理性能的一个关键因素是数据的存储格式。本文探讨了不同存储格式（特别是 Parquet、Avro 和 ORC）对 Google Cloud Platform （GCP） 上大数据环境…
建站知识
2024/9/18 14:11:20
