Qwen-7B (Qwen-7B) ist ein 7-Milliarden-Parameter-Modell aus der Qwen-Reihe großer Modelle, die von Aliyun entwickelt wurden. Qwen-7B ist ein großes Sprachmodell auf der Grundlage von Transformer, das auf supergroßen Vortrainingsdaten trainiert wird. Die Pre-Trainingsdaten sind von verschiedenen Typen und decken ein breites Spektrum ab, einschließlich einer großen Anzahl von Webtexten, Fachbüchern, Codes usw. Die Pre-Trainingsdaten werden auch in Qwen-7B verwendet. Auf der Grundlage von Qwen-7B verwenden wir den Alignment-Mechanismus, um Qwen-7B-Chat zu erstellen, einen KI-Assistenten, der auf dem großen Sprachmodell basiert.Dieses Repository ist das Repository von Qwen-7B-Chat.
Wenn Sie mehr über das Open-Source-Modell Tongyi Qianqian-7B erfahren möchten, empfehlen wir Ihnen, das Github-Code-Repository zu besuchen. https://github.com/modelscope/modelscope
[Mehr lesen]