JVM实战—7.如何模拟GC场景并阅读GC日志
大纲 1.动手模拟出频繁Young GC的场景 2.JVM的Young GC日志应该怎么看 3.代码模拟动态年龄判定规则进入老年代 4.代码模拟S区放不下部分进入老年代 5.JVM的Full GC日志应该怎么看 6.问题汇总 1.动手模拟出频繁Young GC的场景 (1)程序的JVM参数示范 (2 ...
Python 虚拟环境：原理解析与最佳实践
从一个困境说起 小王最近遇到了一个棘手的问题：他在维护两个 Python 项目，一个是去年开发的数据分析系统，依赖 TensorFlow 1.x；另一个是最近在做的预测模型，需要用到 TensorFlow 2.x 的新特性。每次切换项目时，他都要手动更改 Python 包的版本，这不仅繁琐，而且经常 ...
深度学习基础理论————分布式训练（模型并行/数据并行/流水线并行/张量并行）
主要介绍Pytorch分布式训练代码以及原理以及一些简易的Demo代码 模型并行 是指将一个模型的不同部分（如层或子模块）分配到不同的设备上运行。它通常用于非常大的模型，这些模型无法完整地放入单个设备的内存中。在模型并行中，数据会顺序通过各个层，即一层处理完所有数据之后再传递给下一层。这意味着，在任 ...
基于高德地图API在Python中实现地图功能的方法
本文介绍在高德开放平台中，申请、获取地图API的Key的方法；同时通过简单的Python代码，调取API信息，对所得Key的可用性加以验证~ ...
DVWA靶场File Inclusion (文件包含) 漏洞所有级别通关教程及源码解析
文件包含 文件包含漏洞（File Inclusion Vulnerability）是一种常见的网络安全漏洞，主要出现在应用程序中不安全地处理文件路径时。攻击者可以利用此漏洞执行恶意文件，或者访问不该被访问的文件 1. low 有3个页面 随便点击一个，可以在url处发现传参点 访问：http://1 ...
分布式系统架构6：链路追踪
本文深入探讨了链路追踪在分布式系统中的重要性，介绍了追踪与跨度的核心概念，及数据收集和存储的有效方法。我们还分析了OpenTracing和OpenTelemetry等现代追踪协议，帮助开发者提升系统的可观测性和性能优化。如果你想了解如何更好地掌握链路追踪技术，点击阅读全文，开启系统架构的新视野！ ...
大语言模型提示技巧（一）－指令要清晰、具体
在与大语言模型对话时，应该提供尽可能清晰和具体的指令来表达希望模型执行的操作，这将有助于模型给出接近你所期待的输出，并降低得到无关或不正确回复的可能性。但需要注意的是，编写清晰的指令不意味着编写简短的指令，事实上，更长的提示实际上更清晰且提供了更多的上下文，这会使得大语言模型输出更详细更相关的内容。 ...
再见2024，一个算法研发的个人年终总结
元旦将近，显然又是一年岁末。 同事开始讨论中午吃什么，以及晚上的跨年计划之类的大问题。 我开始努力回想自己的2024，秉承着毕业以来每年写个人总结的习惯， 也因为近年来自己的节奏和生活越来越快，只能在年终的节点停下来回顾下自己的历程。 前言 我打开了自己的相册，下面且慢慢说来。 一些流水账 因为时间 ...
您的公司需要小型语言模型
当专用模型超越通用模型时 “越大越好”——这个原则在人工智能领域根深蒂固。每个月都有更大的模型诞生，参数越来越多。各家公司甚至为此建设价值100亿美元的AI数据中心。但这是唯一的方向吗？ 在NeurIPS 2024大会上，OpenAI联合创始人伊利亚·苏茨克弗提出了一个观点：“我们所熟知的预训练将无 ...
平淡与新鲜 - 我的2024关键词
我坐在电脑前，仔细回想这一年发生的事情，竟然有点模糊，好像我的2024不存在一样，犹如2023、2022年我已记不起来了。于是乎我紧忙翻阅手机里面的相册，试图回忆起我的2024。 ...
自动评估基准 | 技巧与提示
过去几年，大语言模型 (LLM) 的进程主要由训练时计算缩放主导。尽管这种范式已被证明非常有效，但预训练更大模型所需的资源变得异常昂贵，数十亿美元的集群已经出现。这一趋势引发了人们对其互补方法的浓厚兴趣， 即推理时计算缩放。推理时计算缩放无需日趋庞大的预训练预算，而是采用动态推理策略，让模型能够对难 ...
Java子线程无法获取Attributes的解决方法
在Java多线程编程中，开发者经常会遇到子线程无法获取主线程设置的Attributes的问题。Attributes通常用于存储与当前线程相关的数据，尤其在Web应用中，它们常用于请求上下文的管理。然而，由于Java线程是独立运行的，每个线程有自己的内存空间，一个线程无法直接访问另一个线程的局部变量或... ...
JVM实战—6.频繁YGC和频繁FGC的后果
大纲 1.JVM GC导致系统突然卡死无法访问 2.什么是Young GC什么是Full GC 3.Young GC、Old GC和Full GC的发生情况 4.频繁YGC的案例(G1解决大内存YGC过慢) 5.频繁FGC的案例(YGC存活对象S区放不下) 6.问题汇总 1.JVM GC导致系统突然 ...
【Java 温故而知新系列】基础知识-03 基本类型对应之包装类
1、包装类都有哪些？ 基本类型都有对应的包装类型，这些包装类提供了一种面向对象的方式来处理基本数据类型，允许它们被用于需要对象的场景，如集合框架、泛型等。 对应关系： 基本类型包装类型 boolean Boolean byte Byte char Character float Float int ...
[深度学习] 大模型学习1-大语言模型基础知识
大语言模型（Large Language Model，LLM）是一类基于Transformer架构的深度学习模型，主要用于处理与自然语言相关的各种任务。简单来说，当用户输入文本时，模型会生成相应的回复或结果。它能够完成许多任务，如文本续写、分类、摘要、改写、翻译等。常见的LLM包括GPT、LLaMA ...
WxPython跨平台开发框架之前后端结合实现附件信息的上传及管理
在使用 wxPython 开发跨平台应用时，结合后端实现附件信息的上传和管理是一种常见需求。WxPython跨平台开发框架是前后端分离的框架，前端采用的是WxPython + aiohttp 来构建跨平台的界面展示和处理，后端使用 FastAPI, SQLAlchemy, Pydantic, Red... ...
促销系统：促销业务详解
大家好，我是汤师爷~ 促销活动的核心价值在于利用价格优势吸引贪便宜的消费者。许多用户会积极寻找各类优惠，看到红包或折扣时容易产生购买冲动。 对商家而言，促销是快速清理库存的有效工具。特别是对于季节性商品或临期产品，促销能加快出货速度。同时，促销也能提升销售额，当顾客对商品感兴趣，但因价格犹豫不决时， ...
Windows应用开发-常用工具
.NET/WPF开发 Visual Studio 最新版本是VS2022，官网下载：Visual Studio 2022 IDE - 适用于软件开发人员的编程工具 VsColorOutput 控制台可视化很强、编译会区分颜色输出，在VS扩展中在线安装最新VsColorOutput64 Reshape ...
年终总结的总结
1、要不要认真写 一般来说，年终总结基本都是公司要求写的，因此有部分人会排斥地认为这是形式主义，所以就到网上随便复制一篇来应付了事。 实际上，认真回顾并总结过去一年中成功的经验以及失败的教训，对个人来说是百利而无一害的，也是对自己人生负责任的表现。 毕竟，一年下来，忙前忙后、加班加点、实实在在做了这 ...
