news 2026/9/11 3:56:33

抱脸(huggingface)的使用姿势

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
抱脸(huggingface)的使用姿势

抱脸(huggingface)的使用姿势

简介

抱脸huggingface.co,其实早知道他有一个很好的免费资源给到所有用户:2c16g

这个配置,也许扛不动太多的流量业务,但是足够部署各种学习和测试环境了。一直没动心思,只是因为他需要私网来访问。但是随着内存翻了几番,各家开始抠起来,就又想起来他了。

尝试几种姿势

hugging face space: https://huggingface.co/spaces

首先这里有这大量的别人公开的项目,可以多看看,知道这个space能做什么(部分是付费的)

jupyter lab

抱脸大数据,大模型,最先想到的事python,最友好的工具就是jupyter了,先试试他:

点击“new space” ,然后按照如下选择:

新建好会自动打开,登录后如下图:

  1. ipykernel 正常notebook ,如下:

  1. terminal 可以用来安装软件和包

另外需要注意,源码包映射的事/app, 而jupyterlba打开的数据目录是/data,如果想要保存ntebook,记得自己保存(下载或者挪入git)

restful api

作为一个苦逼程序员,任何时候很容易想到的,就是部署一个restful测试环境:

这个直接按照官方文档建了一个:https://huggingface.co/docs/hub/spaces-sdks-docker-first-demo

这是一个泗洪fastapi写的helloworld:

fromfastapiimportFastAPI app=FastAPI()@app.get("/")defgreet_json():return{"Hello":"yiqiu!"}

dockerfile

FROM python:3.9 RUN useradd -m -u 1000 user USER user ENV PATH="/home/user/.local/bin:$PATH" WORKDIR /app COPY --chown=user ./requirements.txt requirements.txt RUN pip install --no-cache-dir --upgrade -r requirements.txt COPY --chown=user . /app CMD ["uvicorn", "app:app", "--host", "0.0.0.0", "--port", "7860"]

代码提交后,会自动启动:

注意,这是一个嵌入式的,想要直接当restful访问是不行,参考如下:

找到这个菜单:

打开的窗口:

这个就是独立地址,来试试:


这就是要的效果,可以用来当做后端测试了。

终极

提供的很多docker模板,就不一一测试了,来试试终极:blank

我的理解,就是可以自定义dockerfile,来试试!

新建完有了git地址,直接下载代码(就是个空的),新建一个dockerfile

FROM debian:trixie RUN apt-get update && apt-get install -y \ curl \ wget \ && rm -rf /var/lib/apt/lists/* RUN curl -fsSL -o /usr/local/bin/ttyd https://github.com/tsl0922/ttyd/releases/download/1.7.7/ttyd.x86_64 && \ chmod +x /usr/local/bin/ttyd ENTRYPOINT ["/usr/local/bin/ttyd","-p","7860","-W","/usr/bin/bash"]

就是一debian为基,装了个webssh,提交代码(push),然后系统会自动开始启动:

成了!!

装了几个软件,看看资源,一切正常,可惜,docker in docker 没有……

好了,现在可以发挥创造力了!!!!

小结

抱脸,还是值得找个私网来访问的,毕竟现在存储那么贵,各家都开始扣起来了,他的价值也慢慢体现……

微信公众号:

https://mp.weixin.qq.com/s/a_Y4yqk4ZO_UBcXiZPc-7Q

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/9/9 9:21:31

开源大模型部署新趋势:Qwen2.5-7B镜像化实践详解

开源大模型部署新趋势:Qwen2.5-7B镜像化实践详解 1. 引言:从本地部署到镜像化——大模型落地的新范式 随着大语言模型(LLM)在自然语言理解、代码生成和多模态任务中的广泛应用,如何高效、稳定地将模型部署到生产环境成…

作者头像 李华
网站建设 2026/9/3 4:03:11

Qwen2.5-7B医疗诊断:症状分析与建议生成案例

Qwen2.5-7B医疗诊断:症状分析与建议生成案例 1. 引言:大模型在医疗场景中的潜力与挑战 1.1 医疗AI的演进背景 随着人工智能技术的发展,大型语言模型(LLM)正逐步渗透到专业垂直领域,其中医疗健康是极具潜力…

作者头像 李华
网站建设 2026/9/3 4:02:36

Qwen2.5-7B推理成本优化:降低GPU消耗的7种方法

Qwen2.5-7B推理成本优化:降低GPU消耗的7种方法 随着大语言模型(LLM)在实际业务场景中的广泛应用,推理成本成为制约其规模化部署的关键瓶颈。Qwen2.5-7B作为阿里云最新发布的开源大模型,在性能和功能上实现了显著提升—…

作者头像 李华
网站建设 2026/9/5 22:23:38

如何高效部署Qwen2.5-7B?网页服务接入实战步骤详解

如何高效部署Qwen2.5-7B?网页服务接入实战步骤详解 1. 引言:为什么选择 Qwen2.5-7B 进行网页推理? 随着大语言模型(LLM)在自然语言理解与生成任务中的广泛应用,越来越多企业与开发者希望将高性能模型快速集…

作者头像 李华
网站建设 2026/9/10 12:00:46

Qwen2.5-7B自动摘要:长文档精简技巧

Qwen2.5-7B自动摘要:长文档精简技巧 1. 技术背景与问题提出 在信息爆炸的时代,长文本处理已成为自然语言处理(NLP)领域的重要挑战。无论是科研论文、法律合同还是企业报告,动辄数千甚至上万token的文档给人工阅读和信…

作者头像 李华
网站建设 2026/9/8 2:49:42

Qwen2.5-7B测试用例:自动化测试生成

Qwen2.5-7B测试用例:自动化测试生成 1. 引言:为何选择Qwen2.5-7B进行自动化测试生成? 1.1 大模型赋能软件测试的新范式 随着大语言模型(LLM)在代码理解与生成能力上的显著提升,自动化测试用例生成正从传统…

作者头像 李华