在Kaggle上运行Devstral-2-small 28B(q4)模型,您需要使用免费的GPU资源。首先,请登录您的Kaggle账户,然后访问以下链接:kaggle.com。点击“Copy & Edit”按钮,然后依次点击“cells”进行操作。此代码提供了OpenAI兼容的接口,并具有工具调用能力。您需要获取一个NGROK_AUTHTOKEN,您可以通过此链接获取:NGROK官网。此外,您还可以在社区找到更多相关信息,:1349289)。请注意,您可能需要查看一些图片资源以获取更详细的操作指南。

标签: none

评论已关闭