前言 在自学了《动手学深度学习》之后想要找一个成熟的框架来进行模型训练实操,利用Pytorch手动引用训练经典模型那样太慢,我们还是要学会站在巨人的肩膀上,最终找到了HuggingFace,但是网上的教程都很零散,没有成体系的教程,自己在学习过程中遇到了很多坑,慢慢的爬到山顶,自己清晰了整个脉络,于是把走过的路总结下,也算给后人留一个地图吧。 本教…
前言 在第二章:实战演练篇,我们已经接触了各种各样的实战例子,在训练过程中或许大家因为设备性能、使用GPU卡的问题从而想要得到结果变得非常漫长,本篇就来给大家介绍下如何使用参数高效微调加快模型训练速度。 参数高效微调简介 什么是参数高效微调 在传统的深度学习中,针对下游任务进行微调通常采用全量微调 (Full Fine-Tuning),即更新模型网…
仓促编写,新鲜出炉,如有错误,欢迎大家指正~ 目标 早干完,早回家!不熬夜! 痛点 服务众多,上线发布巨慢无比 目前有五十个微服务,需要把这些全部上线才能构建完整系统。CPD项目引入serverless,完全实现后服务数量会成指数级增长。上线时一个个发布巨慢无比。 配置众多,不好管理 基于以上服务,每个至少有三个配置文件,就是总共约150个配置文件…
先看本地和operator的效果! 原理也可简单,就是通过k8sGPT把集群状态信息发送给大模型,由大模型进行诊断并给出具体操作由k8sGPT去执行。 前言 深夜被告警邮件叫醒,对着满屏飘红的 CrashLoopBackOff 和 ImagePullBackOff 发呆?又或者在成百上千行的 Kubernetes 事件日志里大海捞针,试图寻找那个导…
前言 构建k8s集群大体可分为三种方式: 使用kubeadm或者封装了kubeadm的框架进行部署。 使用terraform在支持的云厂商进行部署。 直接购买云厂商现成的k8s集群产品。 这三种方式由难到易(其实难的也没多难,就是可能会稍微复杂一点点),这里记载使用terraform在腾讯云构建k8s集群因参数设置不对,导致serviceIP不够,…
这篇文章没有摘要
前言 最近在换工作,积累了一些心得,故此总结下来分享给大家。仅一家一言,不喜轻喷。 简历的小技巧 因为我是程序员,这里只介绍关于程序员简历的心得。简历如下: 简约模板 大家挑选简历模板时尽量挑选简约素色的,不要挑选花里胡哨的,因为过于眼花缭乱的简历会干扰HR或面试官的视线和思考,给HR挑选简历造成困扰,HR一般是不懂技术的,挑选简历都是寻找有没有符…
前言 在k8s环境下,当我们选择用helm升级环境服务时,会发现随着时间的推移,有一些修改会直接通过工具或命令直接修改正式/测试环境配置,并且没有及时更新helm脚本,导致正式/测试环境配置与helm配置不一致。严格来说环境配置修改应统一由helm脚本去修改,去掉个人直接修改环境配置权限。但是对于已经存在配置不一致的情况,找到了以下方法可以方便对比…
以0为下标 问题:为什么Java,C等大多数编程语言下标都是以0开头的。 因为是基于计算机内存寻址特性来的,因为是a=b+(i*c),所以用零开头,可以少一次计算,如果从1开始就是a=b+(i-1)*c,会多一次计算。 网关 在微服务中,网关都有什么职责,鉴权的话,网关鉴过权了拿了token请求后面服务,那后面服务还需要去验证token有效性么,去…
前言 打工人上班面临的第一课就是打卡,本次介绍的是基于定位打卡的方式实现自动打卡,如果小伙伴是指纹或其它打卡方式,那就另当别论,不用往下看了┐(´д`)┌ 我们平时上班中,偶尔一两次会忘记打卡,那就非常麻烦,有的小伙伴就不得不设定闹钟提醒自己打卡,越来越复杂。 本文是介绍基于手机自动化任务自动打卡的教程,不涉及非法操作,请放心使用~ 打卡软件设置 …