苏洋博客
网站首页
工作生活
编程记录
知识地图
文章存档
关于苏洋
关于本站
GitHub
折腾笔记
联系作者
文章列表
Tag: # Linux
改善 GitHub Pages 阅读体验:Quick Docs
2024年01月04日
go-embed
,
GitHub
,
Golang
,
Linux
Quick Docs 是一款不足 10MB 的开源工具,旨在解决 GitHub Pages 文档访问缓慢、加载中断影响开发效率的问题。该工具支持通过二进制文件或 Docker 容器快速部署本地文档服务,默认监听 8080 端口,可将多个项目
阅读全文
完善 Golang Gin 框架的静态中间件:Gin-Static
2024年01月03日
go-embed
,
Gin-Static
,
Golang
,
Linux
针对 Golang Gin 框架原生静态文件处理在根目录部署、通配符路由及动态逻辑共存等场景的局限,以及对社区停滞维护的 gin-contrib/static 中间件进行功能升级与代码完善,推出了开源项目 soulteary/gin-sta
阅读全文
中文版大模型 Token 成本计算器
2023年12月28日
LLMs
,
Docker
,
Linux
开源轻量工具 ai-token-calculator,约 10MB,基于 OpenAI 官方 tokenizer 汉化封装,用于直观计算大模型 API 的 Token 数量与使用成本。支持直接运行可执行文件、Docker 及 Docker
阅读全文
CPU 混合推理,非常见大模型量化方案:“二三五六” 位量化
2023年12月12日
GGUF
,
Yi-Model
,
llama.cpp
,
Python
,
Docker
,
Linux
基于 llama.cpp 框架介绍非常见整数位量化方案,涵盖 2、3、5、6 位等非标准位数量化技术。详细说明 GGUF 格式转换流程,包括使用 convert.py 将 PyTorch/Safetensors 模型转为 F16 中间格式,
阅读全文
零一万物模型折腾笔记:官方 Yi-34B 模型基础使用
2023年12月10日
GGUF
,
Yi-Model
,
llama.cpp
,
Python
,
Docker
,
Linux
基于实践测试,对零一万物官方 Yi-34B 及 Yi-34B-200K 模型的本地部署与基础使用进行客观记录。涵盖 Docker 与裸机两种环境配置、模型文件获取方式、硬件资源需求分析,重点验证模型在默认参数下的文本生成表现,包括指令遵循能
阅读全文
本地运行“李开复”的零一万物 34B 大模型
2023年11月26日
GGUF
,
Yi-Model
,
llama.cpp
,
Python
,
Docker
,
Linux
零一万物34B大模型本地部署方案详解,针对该模型量化后约24GB显存占用易触发内存溢出的问题,提出基于llama.cpp的CPU与GPU混合推理方案。通过Docker构建NVIDIA PyTorch运行环境,利用gguf格式模型与GPU层卸
阅读全文
使用 Redis 构建轻量的向量数据库应用:图片搜索引擎(二)
2023年11月16日
图片搜索引擎
,
向量数据库
,
Redis
,
Docker
,
Clip
,
Python
,
Ubuntu
,
Linux
,
OpenAI
文章延续前篇,继续介绍基于 Redis 构建轻量级向量数据库的图片搜索引擎实现方案。重点阐述如何利用 OpenAI Clip 模型的文本-图像关联能力,通过两种文本交互方式扩展搜索功能:一是借助分类检测能力进行内容安全风控,通过关键词列表与
阅读全文
使用 Redis 构建轻量的向量数据库应用:图片搜索引擎(一)
2023年11月15日
图片搜索引擎
,
向量数据库
,
Redis
,
Docker
,
Clip
,
Python
,
Ubuntu
,
Linux
,
OpenAI
探讨基于 Redis 构建轻量级本地图片搜索引擎的技术实践,采用 Docker 容器化部署方案,结合 OpenAI CLIP 模型实现图片特征提取与向量化存储。针对万级图片数据集,使用稠密向量检索方式完成搜索,总耗时低于十分之一秒。
阅读全文
开源软件 FFmpeg 生成模型使用图片数据集
2023年11月14日
数据集
,
FFmpeg
,
GitHub
,
Linux
开源软件FFmpeg可将视频文件高效转换为高质量图片数据集,适用于构建机器学习训练数据或壁纸集合。通过调整帧率参数控制输出密度,配合图片压缩与缩放策略,能在保证画面代表性的同时显著降低存储占用。以电影《流浪地球2》为例,按每秒提取一帧可生成
阅读全文
廉价的全闪存雷电 NAS 折腾笔记:NUC9 操作系统踩坑
2023年09月12日
HomeLab
,
NAS
,
MacBook
,
ThunderBolt
,
Ubuntu
,
ESXi
,
Linux
,
NUC9
,
硬件经验
基于 NUC9i5QNX 构建低成本全闪存雷电 NAS 的实操记录,涵盖硬件准备、BIOS 升级流程及多系统兼容性踩坑。重点测试了淘汰固态硬盘的实际读写性能,对比 TrueNAS Scale、Unraid、Debian 等操作系统在雷电组网
阅读全文
««
«
1
2
3
4
5
6
7
8
9
10
»
»»