感觉小学术方向上用AI找general信息没什么用

今天用ChatGPT的深度搜索功能,交代了一下我的背景,贴了一点正在做的工作,列了一个院校list,让GPT老师给我找合适的做这个方向或者相近方向的博士生导师。

1小时之后回来,GPT做完搜索了,给了一个十几个人的list,最前面五个加粗,说这几个最适合我。

我一看,好么,原汤化原食,五个人里面两个人都是熟人,一个是我现在funding的coordinator,另一个是我现在的硕士导师 :yaoming:

仔细看了下完整名单,东部某校一个华人大佬GPT就没找到,反而推了一个该校另一个略微沾点边的教授。

感觉是不是进入这种非CS的细分学术领域之后,网络公开信息就不足了,让AI去搜索远不如我自己在这个领域混出来的浅薄认知 :troll:

1 个赞

震惊,通用大模型不敌领域专家

4 个赞

我很显然不能算expert :yaoming:目前满打满算在这个领域也就一年多点时间,之前完全没干过

所以感觉是通用大模型甚至不如领域小菜鸟,when 领域过于细分小众

is all you need

控制变量啊,你search付出的attention和大模型的attention量化了吗
现在nlp领域故事会现状就是高中没学物理实验造成的吧 :troll:

1 个赞

请用类cursor直接code爬虫

感谢思路,明天试一试

个人经验deep research确实找东西不太好用

一个小时太短了,按照AI的速度连paper都读不完三五篇,高质量大模型阅读比你至少慢10倍,我感觉一个小时都来不及读完几十个学校几百个教授的主页。要survey清楚怎么着都得读上百个教授的几百篇paper吧,跑两天两夜还差不多。结论还是得氪金

我写paper让gpt给我搜几个相关的高引paper,感觉很不智能,搜不出来

很正常。deep research只是比较唬人。毕竟就是一套算法+prompt,很难在专业领域面面俱到。我之前专门发过文章评估类似的任务,做起来非常非常痛苦。

好的收到,那可能是我的问题 :yaoming:只能用到一般的AI,甚至200刀的pro订阅都买不起

对于非码农类的知识,个人觉得日常那些通用AI胜在广度,深度上就真的让人无语了。
基本wiki上能找到的基本内容他都能很不错的summary。但是一旦需要深挖,那就是一本正经的胡说八道了。
应该还是需要专业训练出来的AI。斯坦福的那个storm写research summary就不错,至少勉强还能看了。

  • 试试gemini的deep research?
  • 市面上的类似产品基本就只搜一到两层,如果你有特定深层搜索需求,比如院校网站 - 实验室网站 - 实验室论文 - 相关论文等,要么自己写workflow,要么看能不能改deep research plan