AVt天堂网 手机版,亚洲va久久久噜噜噜久久4399,天天综合亚洲色在线精品,亚洲一级Av无码毛片久久精品

當前位置:首頁 > 科技  > 軟件

使用LLM插件從命令行訪問Llama 2

來源: 責編: 時間:2023-08-05 11:45:57 4168觀看
導讀最近的一個大新聞是Meta AI推出了新的開源授權的大型語言模型Llama 2。這是一項非常重要的進展:Llama 2可免費用于研究和商業用途。(幾小時前,swyy發現它已從LLaMA 2更名為Llama 2)。Facebook最初的LLaMA模型于今年2月發

最近的一個大新聞是Meta AI推出了新的開源授權的大型語言模型Llama 2。這是一項非常重要的進展:7hV28資訊網——每日最新資訊28at.com

Llama 2可免費用于研究和商業用途。7hV28資訊網——每日最新資訊28at.com

(幾小時前,swyy發現它已從LLaMA 2更名為Llama 2)。7hV28資訊網——每日最新資訊28at.com

Facebook最初的LLaMA模型于今年2月發布,掀起了開源LLM領域的創新浪潮——從微調變體到從零開始的再創造。7hV28資訊網——每日最新資訊28at.com

只有一個限制:用戶不能將它用于商業目的。7hV28資訊網——每日最新資訊28at.com

Llama 2的出現改變了這一點!7hV28資訊網——每日最新資訊28at.com

它仍然有一些有趣的限制,重點是:7hV28資訊網——每日最新資訊28at.com

用戶不得使用Llama材料或Llama材料的任何輸出或結果來改進任何其他大型語言模型(不包括Llama 2或其衍生作品)。7hV28資訊網——每日最新資訊28at.com

如果在Llama 2版本發布之日,由被許可人或被許可人的附屬機構提供的產品或服務的月活躍用戶在前一個日歷月超過7億,則必須向Meta申請許可,Meta可自行決定是否授予許可。7hV28資訊網——每日最新資訊28at.com

這使得它仍然可以適用于大多數商業用途。接下來跟隨本文試一試。7hV28資訊網——每日最新資訊28at.com

使用LLM訪問Llama 2

LLM工具可以通過命令行訪問各種語言模型,既可以通過網絡應用程序接口訪問,也可以在自己的機器上自行托管。7hV28資訊網——每日最新資訊28at.com

添加插件支持以擴展它對新模型的支持。現在,一個獨立發布的插件可以為現有的CLI工具添加對新模型的支持。7hV28資訊網——每日最新資訊28at.com

全新的llm-replicate插件提供了對Replicate上托管的模型的CLI訪問,a16z-infra發布了a16z-infra/llama13b-v2-chat,該插件提供了對新的Llama 2 13B聊天模型的Replicate API訪問。7hV28資訊網——每日最新資訊28at.com

需要一個Replicate API密鑰。7hV28資訊網——每日最新資訊28at.com

使用如下命令安裝LLM:7hV28資訊網——每日最新資訊28at.com

pip install llm

如果沒有安裝pip,但可以使用Homebrew:7hV28資訊網——每日最新資訊28at.com

brew install simonw/llm/llm

運行llm--version確認已安裝成功。7hV28資訊網——每日最新資訊28at.com

接下來,安裝llm-replicate插件:7hV28資訊網——每日最新資訊28at.com

llm install llm-replicate

該插件添加了一組新的llm replicate命令——可以使用llm --help查看。7hV28資訊網——每日最新資訊28at.com

配置Replicate API密鑰,以便插件能與API通信:7hV28資訊網——每日最新資訊28at.com

llm keys set replicateEnter key: <paste key here>

在插件中注冊新的a16z-infra/llama13b-v2-chat模型:7hV28資訊網——每日最新資訊28at.com

llm replicate add a16z-infra/llama13b-v2-chat /  --chat --alias llama2

這就告訴插件它是一個“chat”模型,這意味著用戶可以與它進行持續對話,而不僅僅是發送單個提示。7hV28資訊網——每日最新資訊28at.com

現在,可以使用在這里配置的llama2別名發送提示信息:7hV28資訊網——每日最新資訊28at.com

llm -m llama2 "Ten great names for a pet pelican"

得到的輸出如下所示:7hV28資訊網——每日最新資訊28at.com

當然!以下是十個適合作為寵物鵜鶘的好名字:7hV28資訊網——每日最新資訊28at.com

  1. 花生(Peanut):一個可愛而活潑的小鵜鶘的名字。
  2. 水洼(Puddles):一個有趣而傻氣的名字,適用于喜歡在水中嬉戲的鵜鶘。
  3. 皮特(Pete):一個經典的名字,適合友好外向的鵜鶘。
  4. 彭洛麗(Penelope):一個漂亮而優雅的名字,適合雌性鵜鶘。
  5. 佩西(Percy):一個迷人而精致的名字,適合雄性鵜鶘。
  6. 皮皮(Pippy):一個活潑而親愛的名字,適合個性活躍的鵜鶘。
  7. 佩爾蒂(Pelty):一個有趣而古怪的名字,適合個性獨特的鵜鶘。
  8. 皮普(Pip):一個甜美而討人喜歡的名字,適合小鵜鶘。
  9. 勇敢(Plucky):一個勇敢而冒險的名字,適合個性鮮明的鵜鶘。
  10. 波比(Poppy):一個可愛而嬌嫩的名字,適合性情溫和的雌性鵜鶘。

希望這些建議能幫助你為寵物鵜鶘找到一個完美的名字!7hV28資訊網——每日最新資訊28at.com

由于是聊天模型,可以在同一對話中發送后續提示:7hV28資訊網——每日最新資訊28at.com

llm -c "Five more and make them more nautical"

Ahoy!這里有五個更具海洋氣息的名字,適合你的寵物鵜鶘:7hV28資訊網——每日最新資訊28at.com

  1. 海鳥(Seabird):適合喜歡海洋及其奇觀的鵜鶘的名字。
  2. 船長胡克(Captain Hook):適合勇敢無畏的鵜鶘的英勇名字。
  3. 錨(Anchor):適合始終穩定可靠的鵜鶘的堅固名字。
  4. 芬利(Finley):適合熱愛海洋及其生物的鵜鶘的有關魚的名字。
  5. 輕快(Buoyant):適合心情輕松愉快的鵜鶘的活潑愉快名字。

希望這些建議能讓你滿意,伙計!7hV28資訊網——每日最新資訊28at.com

LLM會將通過它發送的每個提示和響應記錄到SQLite數據庫中。在這里使用--truncate來縮短輸出,將輸出截斷以便在本文中顯示:7hV28資訊網——每日最新資訊28at.com

llm logs --truncate
[  {    "id": "01h5n5b3q6s54e03wtvqe90w2g",    "model": "replicate-a16z-infra-llama13b-v2-chat",    "prompt": "Five more and make them more nautical",    "system": null,    "response": "Ahoy matey! Here be five more nautical-themed names for yer pet pelican:/n/n1. Captain Hook/n2. Anch...",    "response_json": null,    "conversation_id": "01h5n5atsqfg4bhxc53j3ymnx2",    "duration_ms": 7364,    "datetime_utc": "2023-07-18T18:48:51.999944",    "conversation_name": "Ten great names for a pet pelic/u2026",    "conversation_model": "replicate-a16z-infra-llama13b-v2-chat"  },  {    "id": "01h5n5atss6k9zsr5qs5hb2wzd",    "model": "replicate-a16z-infra-llama13b-v2-chat",    "prompt": "Ten great names for a pet pelican",    "system": null,    "response": "Sure, here are ten great names for a pet pelican:/n/n1. Pelty/n2. Peanut/n3. Puddles/n4. Nibbles/n5. Fu...",    "response_json": null,    "conversation_id": "01h5n5atsqfg4bhxc53j3ymnx2",    "duration_ms": 7873,    "datetime_utc": "2023-07-18T18:48:42.356413",    "conversation_name": "Ten great names for a pet pelic/u2026",    "conversation_model": "replicate-a16z-infra-llama13b-v2-chat"  }]

或運行llm logs path命令查看SQLite數據庫文件的路徑。如果已經安裝了Datasette,可以使用以下命令打開日志數據庫:7hV28資訊網——每日最新資訊28at.com

datasette "$(llm logs path)"

或使用Datasette Desktop:7hV28資訊網——每日最新資訊28at.com

open "$(llm logs path)"

結語

對Llama 2感到非常興奮。預計隨著模型權重的逐步推出,用戶將開始看到在其基礎上的各種創新。7hV28資訊網——每日最新資訊28at.com

特別期待以下內容:7hV28資訊網——每日最新資訊28at.com

  • 微調模型。Alpaca、Vicuna等人在原始LLaMA模型的基礎上進行微調,取得了驚人的成就。預計在接下來的幾周內,我們將看到數十個微調模型。
  • 實現reAct和Toolformer模式,這將使Llama 2能夠以類似于OpenAI Functions的方式驅動外部工具。Llama 2的論文已經提到了針對Toolformer提示的測試,因此希望這不會太困難。

希望能記錄什么類型的提示語能與Llama 2效果良好地配合使用,因為預計這一模型在未來一段時間內將成為生態系統中頗具影響力的一部分。7hV28資訊網——每日最新資訊28at.com

本文鏈接:http://www.tebozhan.com/showinfo-26-138-0.html使用LLM插件從命令行訪問Llama 2

聲明:本網頁內容旨在傳播知識,若有侵權等問題請及時與本網聯系,我們將在第一時間刪除處理。郵件:2376512515@qq.com

上一篇: 一篇文章帶你了解 CSS 屬性選擇器

下一篇: 這款新興工具平臺,讓你的電腦效率翻倍

標簽:
  • 熱門焦點
  • K60至尊版剛預熱 一加Ace2 Pro正面硬剛

    Redmi這邊剛如火如荼的宣傳了K60 Ultra的各種技術和硬件配置,作為競品的一加也坐不住了。一加中國區總裁李杰發布了兩條微博,表示在自家的一加Ace2上早就已經采用了和PixelWo
  • 小米平板5 Pro 12.4簡評:多專多能 兼顧影音娛樂的大屏利器

    疫情帶來了網課,網課盤活了安卓平板,安卓平板市場雖然中途停滯了幾年,但好的一點就是停滯的這幾年行業又有了新的發展方向,例如超窄邊框、高刷新率、多攝鏡頭組合等,這就讓安卓
  • 2023 年的 Node.js 生態系統

    隨著技術的不斷演進和創新,Node.js 在 2023 年達到了一個新的高度。Node.js 擁有一個龐大的生態系統,可以幫助開發人員更快地實現復雜的應用。本文就來看看 Node.js 最新的生
  • 微信語音大揭秘:為什么禁止轉發?

    大家好,我是你們的小米。今天,我要和大家聊一個有趣的話題:為什么微信語音不可以轉發?這是一個我們經常在日常使用中遇到的問題,也是一個讓很多人好奇的問題。讓我們一起來揭開這
  • 一文掌握 Golang 模糊測試(Fuzz Testing)

    模糊測試(Fuzz Testing)模糊測試(Fuzz Testing)是通過向目標系統提供非預期的輸入并監視異常結果來發現軟件漏洞的方法。可以用來發現應用程序、操作系統和網絡協議等中的漏洞或
  • 一個注解實現接口冪等,這樣才優雅!

    場景碼猿慢病云管理系統中其實高并發的場景不是很多,沒有必要每個接口都去考慮并發高的場景,比如添加住院患者的這個接口,具體的業務代碼就不貼了,業務偽代碼如下:圖片上述代碼有
  • Temu起訴SHEIN,跨境電商戰事升級

    來源 | 伯虎財經(bohuFN)作者 | 陳平安日前據外媒報道,拼多多旗下跨境電商平臺Temu正對競爭對手SHEIN提起新訴訟,訴狀稱Shein&ldquo;利用市場支配力量強迫服裝廠商與之簽訂獨家
  • 東方甄選單飛:有些鳥注定是關不住的

    文/彭寬鴻編輯/羅卿東方甄選創始人俞敏洪帶隊的&ldquo;7天甘肅行&rdquo;直播活動已在近日順利收官。成立后一年多時間里,東方甄選要脫離抖音自立門戶的傳聞不絕于耳,&ldquo;7
  • Android 14發布:首批適配機型公布

    5月11日消息,谷歌在今天凌晨舉行了I/O大會,本次發布會谷歌帶來了自家的AI語言模型PaLM 2、谷歌Pixel Fold折疊屏、谷歌Pixel 7a手機,同時發布了Androi
Top