效率:本地部署模型意味着我们可以在单次 LLM 运行中解决任务(guidance 在程序执行时保持 LLM 状态) , 速度更快 , 成本更低 。当任何子步骤涉及调用其他 API 或函数(例如搜索、终端等)时尤其如此 , 这总是需要对 OpenAI API 进行新调用 。guidance 还通过不让模型生成输出结构标记来加速生成 , 这有时会产生很大的不同 。总的来说 , 该测试得出的结论是:MPT 还没有准备好在现实世界中使用 , 而 Vicuna 对于许多任务来说是 ChatGPT (3.5) 的可行替代品 。目前这些发现仅适用于该测试尝试的任务和输入(或 prompt 类型) , 该测试只是一个初步探索 , 而不是正式评估 。
更多结果参见 notebook:https://Github.com/microsoft/guidance/blob/main/notebooks/chatgpt_vs_open_source_on_harder_tasks.ipynb
【羊驼系列大模型和ChatGPT差多少?详细测评后,我沉默了】
推荐阅读
-
-
电视台方回应罗志祥回归|周扬青事件传得沸沸扬扬!电视台方回应罗志祥回归 形象跌入谷底
-
『』美女约南通一男子网聊“坦诚相见” 才看几十秒就要收费?
-
央视新闻|涉11项诉讼,美国地检署对布鲁克斯案执法警察发逮捕令
-
父亲找老伴儿女不同意怎么办,父亲找老伴儿女不同意 家庭不和睦-
-
网上车市|配置大幅提升,造型微调,保时捷新款帕拉梅拉发布!增混动新车型
-
【乐视网】暴跌99%!贾跃亭破产程序完成,又开始忽悠了?
-
小明叨叨叨|PC端无法比较,太新颖了!,梦幻西游:口袋版最赚钱的囤货模式
-
-
面霜|这4种老牌国货面霜,能保湿美白提亮肤色,很适合五六十岁的人用
-
-
『cnBeta.COM』三星推出易于分离的电视包装纸板 方便用户将其再利用
-
中山名雕高端家装|命悬一线,母亲:想留住孩子的命,2岁白血病男孩病情反复无常
-
永州新闻网|“男学生踹伤猥亵男”案提级由永州市公安局重新调查,责令撤销案件解除刑拘
-
包子妈妈育儿这4种零食又来“坑”娃,长高无望!家长要死死管住嘴,夏天来了
-
北欧31㎡北欧风单人公寓,一个人的生活更加精致优雅!
-
自贡市工商业联合会原主席、市总商会原会长但积忠 严重违法被开除公职
-
天赋异禀的小马|2020年,郭麒麟综艺接到手软,是自己够火还是老爸面子大,原创
-
北京日报客户端婉拒特朗普视察,口罩工厂担忧感染风险
-