Technology sharing

Magnum exemplar [Qwen2-7B instruere loci (versio WEB)] (fenestrae)

2024-07-12

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

Magnum exemplum series articuli directorium


Qwen2-7B loci instruere (versio WEB)

Praefatio

Exemplar magnum fortissimum est AI ut primae dimidium 2024, et Qwen2 recens emissum est magnum exemplar fons apertum, quod fortissimum in Sinis esse asseruit. Hic primus articulus in magna serie exemplarium ordinatur. Cito explicandum est et vide quomodo recentia exempla magna emissa perficiant.

1. Download and install Ollama

  1. IntraOfficial website
  2. Click Download
  3. Elige Windos, preme Download pro Windows (Praevisum), fq multo citius hic erit
  4. Default installation

2. Download and install Qwen2

1. Download Qwen2

  1. Intrant officialem consequat: https://qwen.readthedocs.io/zh-cn/latest/getting_started/installation.html
  2. Primum deprime aestimationem in fundo efficientiae, vide memoriam video ab unoquoque exemplari occupatam, et elige unum quod tibi decet. GPTQ-Int4 erudi.Quaeso addere imaginem descriptionem
  3. IntraDownload link
  4. Videbis suffixas varias, q" + numerus digitorum ad pondera (precisionis) + ad certas variantes reponendas, quo altior numerus melior effectus est.
  5. Quo maior numerus, eo accuratio superior. k accurationem per 2 digitos in omnem attentionem et tensores pascendi melioris, et m accurationem per 2 digitos in dimidia parte attentionis et tensores feed_forward ampliat.
  6. Exemplar elige secundum necessitates tuas.

2. Curre Qwen2

  1. Novam folder, redde nomen Anglicum (qwen), et move qwen2-7b-instrue-q8_0.gguf in folder.
  2. Novam file nomine Modelfile in folder et imple eam
FROM ./qwen2-7b-instruct-q8_0.gguf
  • 1
  1. Tum utere imperio linea ad exemplar Qwen2-7B creare per ollama:
ollama create Qwen2-7B -f ./Modelfile
  • 1

Si successus apparet, successus est creatio.

  1. Curre, intra imperium
ollama run Qwen2-7B
  • 1

Cum alternis buxum apparet, loqui potes
Quaeso addere imaginem descriptionem

Si vis videre quae magna exempla in promptu sunt localiter: ollama list
Si vis hoc exemplum delere: ollama rm xxx
Si vis videre quae magna exemplaria currebant: ollama ps

Sed in DOS fabulamur semper idem sentit ac superiore saeculo fabulamur, ita ut sensum GPT inveniamus, eam in interretis efficere perseveremus.

3. Node.js

1.Node.js download et institutionem

  1. IntraNode rutrumDownload Node ac install it
  2. Verifica nodi versionem:
node -v
  • 1

Non est problema si v20 vel supra est

  1. downloadollama-webui code
  2. Ingrediatur folder ollama-webui et speculum domesticum fontem constituit ut acceleraretur;
npm config set registry http://mirrors.cloud.tencent.com/npm/
  • 1
  1. Node.js clientelas inaugurare:
npm install
  • 1

Si error nuntius dicit computum requiri, modo hoc ordine procedere;

npm audit
npm audit fix
  • 1
  • 2
  1. Satus interfaciei textus:
npm run dev
  • 1

ApertumPagina interreti, exemplar tuum elige ut colloquium incipias:
Quaeso addere imaginem descriptionem