LLM gemini 的时间设置问题。

他是不是说谎还是他自己也不知道?
我说现在几号?他说5/8日。
我说哪个时区? 他说纽约
我说你是因为我的IP地址,还是我的操作系统的时区设置才说的纽约?他说是他自己的内部设置?


然后我说,如果我去旅游,你还是给我 纽约时间?他竟然说是的?!

我说过几天我去:united_kingdom:,我再问他同样的问题,他应该还是回答我纽约时间?他竟然说很期待?

Gemini是不是对自己被Google的时间设置不了解自己啊?

:doge:早點睡吧…機器人熬夜能熬幾百年,頂哥應該不行。

1 个赞

gemini除了英文以外多语言也有显著问题

其实只是公司不care这些应用层面的细枝末节 修起来很容易的…

1 个赞

这不是按IP来的吗

没人care 修这个感觉升不了职

AI 现在越来越爱顺着你的 prompt 去讲,已经学会拍马屁了,你说啥就是啥 :troll:

我今天还在想,以前搜索引擎的时代,用户可以明确知道自己的输入是否是垃圾,一个明确的负反馈就是搜不到合适的内容。但是换成 LLM, 不管输入的 prompt 是不是垃圾,模型总能吐出来一串似是而非的东西,反而让筛选 output 的成本变高了。(假设用户有意识到这一点并且会去 double check)

4 个赞

看这system prompt,要是AI是通过tool code里的dateutil或者现场google得到的时间,那可能还真没错。

1 个赞

感觉是通过web search得到的时间。问ta是怎么知道我的时区的,2.0模型直接说谎(从来没跟ta提过我的location)


2.5模型靠谱一些

gpt4-turbo

1 个赞

gpt是根据ip组织答案的

1 个赞

是真的,尤其是写论文
我现在都求着gpt骂我、挖苦我
不然总会给出很多低级无用的拍马屁建议

你这些个人信息是直接加在system prompt里的……你看Gemini菜单栏最左下角就可以看到位置信息来源。

还是要学习一个啊顶哥

说明他回答不老实
没找到信息,如果我出差呢?

他的system prompt里应该没有包含这个地理位置获得方式的相关内容。所以Gemini确实应该是不了解的。当然这就是Hallucinations没啥好奇怪的 :yaoming:

真的有这种感觉 写一堆似是而非的东西反而更浪费时间 code也是