Comments (11)
你好,感谢“你的感谢”。
可能我语文比较差,我得为HuatuoGPT打个抱不平,从这个例子中,我感觉她做地很棒,值得我为她鼓掌!我为HuatuoGPT做到这样感到骄傲!
您提到的“展示效果”,您能给我分享一下吗?
“没有连续对话能力”?你是认真说的?
Best,
Benyou
from huatuogpt.
- 关于“展示效果”:刚拜读文章,发现“机器之心”公众号的第一张图片(如上图)右侧回答并不是 HuatuoGPT 模型效果,而是人类医生效果。
- 关于“没有连续对话效果”:并非“没有连续对话能力”,而是误以为 HuatuoGPT 已经在类似“我肚子痛”的简单问题上初步具备了人类医生的连续问询效果。
from huatuogpt.
- 所以您确认,没有发现我们模型的展示效果,对吧?我们没有误导读者。就算我们展示医生的效果误导读者,也已经在论文题目里加了“towards”。
- 语言模型生成具有随机性,并不能保证每次都可以反问。模型本身回复可能就应该是参差多态,才是生活本色——我们是单一的模型,研究为主;不是产品,也离落地差很远对特定场景我们可以优化。不然我把温度调低,每次反问,没有多大意思。Anyway, 我愿意相信[HuatuoGPT 已经在类似“我肚子痛”的简单问题上初步具备了人类医生的连续问询效果。],但是她没有义务每次都反问!
from huatuogpt.
您的工作很有价值,您确实可以认为上述效果”感觉她做地很棒,值得我为她鼓掌,我为HuatuoGPT做到这样感到骄傲!”,然而客观来讲,演示结果也有进步空间。关于“温度调低,每次反问”的真实性、医疗模型“模型本身回复可能就应该是参差多态”等问题,真理会越辩越明。
HuatuoGPT 确实没有义务每次都反问,正如它没有义务回答正确。但是作为科研人员,或许有义务发现问题、提出问题、解决问题,我认为这是值得鼓励的,鄙见如此。
Keep calm and carry on
from huatuogpt.
from huatuogpt.
我可能语文差,您提到的“演示效果”到底是什么?您自己也承认,那是医生的回复,不是HuatuoGPT的回复!
您跟人聊天,对方每句都反问你?这是流畅的对话?您去医院,医生就只能反问,别的不能说?您就用一个例子就说我们模型不能反问? 这就是真理? --
你觉得我这样反问您,这个对话您听着很舒服。您希望我们HuatuoGPT这样,我不喜欢。您要是喜欢这样的100%反问GPT,您去开发。
- 关于“您就用一个例子就说我们模型不能反问? 这就是真理?”:从没有说模型不能反问,请不要混淆视听,这也当然不是真理.....具体解释请见上一条回复。如果您想系统评估反问对话能力,请便,期待您的工作!
- 关于“你觉得我这样反问您,这个对话您听着很舒服。您希望我们HuatuoGPT这样,我不喜欢。您要是喜欢这样的100%反问GPT,您去开发。”:无中生有。
真理是越辩越明,HuatuoGPT可能不站在整理这边,但是我们的技术报告全部是都是客观的,都是定量的和系统的。您的真理就一个例子,就说“与展示效果存在差距(无连续对话效果,回答不匹配) ”1. 您提到的“展示效果”不是我们模型的,是医生的 2. “无连续对话效果”,您解释说没有反问能力,我要是给您一个反问能力的例子,您的“真理”就破了。 3. “回答不匹配”,其他的例子不匹配就算了,您这个例子叫“不匹配”?
前两点请仔细阅读上述回复。关于第三点,参考公众号的第一张图的回复,“肚子疼”的问题和“胃疼”的回复为什么不能叫不匹配呢...
我没法平静,也没有义务。我们熬夜干活儿,开源技术方案,写技术报告,分享社区,宣传全部都是客观定量的。您一个例子就否定了,给了三个结论,没有一个结论让我能平静。
- “我们熬夜干活儿,开源技术方案,写技术报告,分享社区,宣传全部都是客观定量的。”:从未否定这份优秀的工作,向默默辛勤付出的同学表示敬意。我相信踏实工作的同学是希望收到反馈,让自己辛勤培育的项目慢慢变好的,而您作为 repo maintainer,提交了 4 个只有 README 的 commit,却在这里对着一条反馈 issue “不平静”的时候,是不是考虑一下多做点实际工作呢?
“您一个例子就否定了,给了三个结论,没有一个结论让我能平静”
从未否定/质疑工作价值,只针对模型效果礼貌地提出积极的反馈,不过你好像不太欢迎。
同学或老师,我建议你打开这个issue,别关掉。也惊醒一下我们开发HuatuoGPT的团队,以后多往真理的道路上靠一靠。
从未否定工作价值,会虚心学习这份工作。不过您个人能代表团队吗? 前述只是针对您个人的回复就事论事地讨论科研问题。我不是真理,我也没资格提醒。退一万步,即便需要提醒,也不需要提醒整个团队。
issue 的目的是:跟踪项目问题,协作处理问题和讨论改进。
您不欢迎出现问题,那就关闭。
不然留着干嘛呢?浪费所有人的时间吗?
祝好,
期待幕后工作的同学们让 HuatuoGPT 更优秀。
from huatuogpt.
不管如何,我不想让这个讨论变得攻击性太强。
如果您还有时间,避免我的语文成绩太差,我想请你披露您以您机构的名义或者代表您个人解释一下“与展示效果存在差距(无连续对话效果,回答不匹配)”的内涵。我的语文太差,解读的都和您的不符,对您也不友好。我将不会再回复您的内容,避免无意义的键盘行为升级。
请用无歧义的语言解释一下:
- “展示效果” 是什么? 具体指的是什么? 医生的?还是HuatuoGPT?
- “无连续对话效果”的意思到底是什么?
- “回答不匹配”意味着什么?
您这绝对不是“礼貌的反馈”! 至少作为项目维护者之一,我觉得它不是!我还没问项目组其他人,我也不想因为这个打扰大家。您自己说的礼貌,听的人可不是这么认为的,您又不是说给自己听的。您这样的反馈和标题,我作为开发者之一,不仅仅是不舒服,还觉得非常冒犯和生气,这个已经无法挽回。
您这么重要的issuse,我想它能够代表您的机构或者个人的批判精神,留在open 的issues里面。我们issues里面欢迎所有人提出负面的反馈。但是讨论了几遍都不知道您论点的反馈,以及一个例子就否定的例子,我非常愤怒。
我当然能代表团队!但是这条issue里面我代表的是我自己,不代表团队!
我做不做实际工作,不需要您的指导。我摸鱼用您家鱼塘了吗?
王本友
香港中文大学(深圳)数据科学学院
from huatuogpt.
这个讨论先告一段落,欢迎大家提issue,我们接受批评和负面的反馈。
from huatuogpt.
关于“没有连续对话效果”:并非“没有连续对话能力”,而是误以为 HuatuoGPT 已经在类似“我肚子痛”的简单问题上初步具备了人类医生的连续问询效果。
如下图,HuatuoGPT当然初步具备了人类医生的连续问询效果,只是它不会每次都连续问询。
from huatuogpt.
吃瓜的我,看完了,哎!
from huatuogpt.
from huatuogpt.
Related Issues (20)
- 求助 HOT 1
- 多轮对话evaluation HOT 1
- 加载7B模型的时候失败:ValueError: Unrecognized configuration class <class 'transformers_modules.HuatuoGPT-7B.configuration_baichuan.BaiChuanConfig'> to build an AutoTokenizer. HOT 2
- 关于基座模型的疑问 HOT 1
- 关于指令数据 HOT 1
- train error HOT 1
- 调用finetune.py发生错误 HOT 1
- How to use Reward Model? HOT 1
- 你好,请问能公开偏好数据集吗? HOT 1
- 怎么样在多GPU上运行 HOT 1
- 怎么输入换行? HOT 1
- 程序跑到 model.cuda()报错,是不是需要修改啥? HOT 1
- 请问你们数据集的训练集和测试集比例是多少? HOT 1
- 批量给模型喂数据 HOT 1
- 请问你们是怎么计算指标的? HOT 1
- 模型是怎么调出来的 HOT 1
- 请问你们在计算bleu,rouge等指标时,使用了数据集的所有数据吗,还是抽取了一定数量的样本去计算? HOT 2
- 华佗gpt
- 模型
- torch.cuda.OutOfMemoryError HOT 1
Recommend Projects
-
React
A declarative, efficient, and flexible JavaScript library for building user interfaces.
-
Vue.js
🖖 Vue.js is a progressive, incrementally-adoptable JavaScript framework for building UI on the web.
-
Typescript
TypeScript is a superset of JavaScript that compiles to clean JavaScript output.
-
TensorFlow
An Open Source Machine Learning Framework for Everyone
-
Django
The Web framework for perfectionists with deadlines.
-
Laravel
A PHP framework for web artisans
-
D3
Bring data to life with SVG, Canvas and HTML. 📊📈🎉
-
Recommend Topics
-
javascript
JavaScript (JS) is a lightweight interpreted programming language with first-class functions.
-
web
Some thing interesting about web. New door for the world.
-
server
A server is a program made to process requests and deliver data to clients.
-
Machine learning
Machine learning is a way of modeling and interpreting data that allows a piece of software to respond intelligently.
-
Visualization
Some thing interesting about visualization, use data art
-
Game
Some thing interesting about game, make everyone happy.
Recommend Org
-
Facebook
We are working to build community through open source technology. NB: members must have two-factor auth.
-
Microsoft
Open source projects and samples from Microsoft.
-
Google
Google ❤️ Open Source for everyone.
-
Alibaba
Alibaba Open Source for everyone
-
D3
Data-Driven Documents codes.
-
Tencent
China tencent open source team.
from huatuogpt.