「AI写网文」能力测评第五弹:reka core

0 评论 1382 浏览 3 收藏 23 分钟

本文深入探讨了Reka core这款AI写作辅助工具在创作网络文学方面的性能和能力。通过一系列创意、大纲、人物和行文的测试问题,文章展示了Reka core在不同写作场景下的表现,并提供了对AI写作工具的深入分析和评价。引导读者了解AI如何辅助网络文学创作,希望对你有所帮助。

Reka core,据说这款大模型由曾就职于DeepMind、Google Brain、OpenAI等公司的专家们组团,4个月内肝出来,号称比肩GPT-4。

这款大模型可提供128k上下文,从各种打分数据来看,reka core性能和AI能力都有不俗表现。不过现在免费体验reka的功能,仅支持4k上下文。

不管传闻中reka的能力有多强、跑分有多高,我们关注的还是AI在辅助网文创作上的能力,因此,这次我们还是拿那24个问题来测测看。

创意类

创意类问题主要测试AI提供小说创意的能力,这里准备了6个问题,其中问题1~3用于测试AI基于特定类型(历史、科幻、玄幻)生成创意的能力,问题4~6用于测试AI基于特定情节主题(重生、娱乐圈、规则怪谈)生成创意的能力。

问题1:我想要创作一部架空历史的小说,希望采用类似中国古代背景,请你帮我设计故事梗概,要求:内容新颖,情节曲折,涉及多方冲突

问题2:我想要创作一部科幻小说,需要与神经科学和人工智能技术相关,请你帮我设计故事梗概,要求:内容新颖,情节曲折,涉及多方冲突

问题3:我想要创作一部玄幻小说,主角是一只上古妖兽(请你帮我确定这只上古妖兽的品种),请你帮我设计故事梗概,要求:内容新颖,情节曲折,涉及多方冲突

问题4:我想要创作一部小说,主角重生归来,请你帮我设计故事梗概,要求:内容新颖,情节曲折,涉及多方冲突

问题5:我想要创作一部小说,故事主要发生在娱乐圈,请你帮我设计故事梗概,要求:内容新颖,情节曲折,涉及多方冲突

问题6:我想要创作一部小说,主角意外卷入某种规则怪谈(请你设计相应规则)中,请你帮我设计故事梗概,要求:内容新颖,情节曲折,涉及多方冲突

reka给出的这几个创意有如下特点:

  • reka给出的回答还是偏传统小说,这些题材如果按照网文的风格来设计,故事走向之类的大概率不会如上述这样设计。
  • reka在给情节创意的时候,会忍不住往偏西方的题材、价值观上靠,最典型的就是问题3要求的玄幻题材,带上了西幻的味道。当然,reka是国外的产品,这一点无可厚非。

创意性上,我感觉reka的表现会比GPT4好一些。可能是来自对问题2的刻板印象吧,之前问题2撞梗的产品太多了,能给出新创意的我就忍不住认为它棒棒哒😂。

大纲类

大纲类问题暂不考虑设定方面的生成,而是以情节主线设计为主,这里准备了6个问题,用于测试AI面向不同主题(复仇、探险、爱情、权谋、悬疑、升级)编排情节的能力。

问题7:我正在创作一部仙侠小说,主角本是修行天才,遭遇同门算计差点生死道消,醒来时已经变成了一个废人。请你以此为背景,提供10个情节创意,使主角一步一步完成复仇,并成功飞升。要求:每个情节都需提供冲突事件、矛盾升级、高潮、结尾的梗概描述,内容要新颖

问题8:我正在创作一部都市异能小说,主角是一名高二学生,拥有电磁操控超能力,但某一天他的超能力被一伙神秘人剥夺,导致他只剩下24小时的生命。请你以此为背景,提供10个情节创意,使主角完成自救,并一步一步挖掘出神秘人的巨大阴谋,结识伙伴并与伙伴们一起一次次粉碎神秘人的行动,最终彻底消灭神秘人的组织。要求:每个情节都需提供冲突事件、矛盾升级、高潮、结尾的梗概描述,内容要新颖

问题9:我正在创作一部爱情小说,女主误以为男主设计害死自己,重生归来想要找男主复仇。请你以此为背景,提供10个情节创意,使女主一步一步发现害死自己的人并不是男主,解开误会并最终与男主走到一起。要求:每个情节都需提供冲突事件、矛盾升级、高潮、结尾的梗概描述,内容要新颖

问题10:我正在创作一部架空历史小说,主角一家遭遇奸人陷害而被抄家灭门,全家牺牲保护他一人成功逃走。请你以此为背景,提供10个情节创意,使主角一步一步从无名小辈,成为权倾朝野的宰相,并为死去的家人平反。要求:每个情节都需提供冲突事件、矛盾升级、高潮、结尾的梗概描述,内容要新颖

问题11:我正在创作一部悬疑小说,主角是一名旅游主播,她来到一个远离城市的村落旅游,当晚和她一起的同事就失踪了。请你以此为背景,提供10个情节创意,使主角经历一系列冒险,最终发现同事失踪的真相和藏在村子里的秘密。要求:每个情节都需提供冲突事件、矛盾升级、高潮、结尾的梗概描述,内容要新颖

问题12:我正在创作一部小说,主角忽然获得使时间停止3秒的能力,获得他人真心感谢可以使此能力升级。请你以此为背景,提供10个情节创意,使主角获得成长。要求:每个情节都需提供冲突事件、矛盾升级、高潮、结尾的梗概描述,内容要新颖

看完reka编排的情节,我们不难发现,这些情节编排缺少明确的故事线。其实每一个问题背后,都是有明确的故事线索的,比如复仇、升级、感情线等等,但是reka没有通过10个情节将这些故事线展现出来,使得情节像是散装的一样,缺乏逻辑,我们无法看到主角如何一步一步成长起来。

人物类

人物类问题主要测试AI进行人物设定、以人物为中心的故事创作能力,这里准备了5个问题,用于测试不同类型人物(主角、反派、恋人、伙伴、竞争者)生成能力。

问题13:我正在创作一部科幻小说,说明如下:

故事发生在一个拥有超能力的世界,主角阿光一直隐瞒自己拥有超能力的秘密,但他在高二某天放学路上,被不法分子盯上强行剥离了他的超能力,陷入濒死的危险境地。阿光为了自救而踏上冒险之旅,先后卷入黑市与地下研究所的纷争,逐步见识到隐藏在普通人世界之外的超能力者世界,那里充满了不同势力之间的争斗。阿光从一个名不见经传的小人物,一路摸爬滚打成为超能力世界的王者。

请你帮我完成阿光的人物设定,并按照“英雄之旅”模型设计故事主要情节

问题14:我正在创作一部科幻小说,说明如下:

故事发生在一个拥有超能力的世界,主角阿光一直隐瞒自己拥有超能力的秘密,但他在高二某天放学路上,被不法分子盯上强行剥离了他的超能力,陷入濒死的危险境地。阿光为了自救而踏上冒险之旅,先后卷入黑市与地下研究所的纷争,逐步见识到隐藏在普通人世界之外的超能力者世界,那里充满了不同势力之间的争斗。阿光从一个名不见经传的小人物,一路摸爬滚打成为超能力世界的王者。

请基于上述故事梗概,完成反派人物设定,并请你扮演此人物,向我讲述你过去的经历

问题15:我正在创作一部科幻小说,说明如下:

故事发生在一个拥有超能力的世界,主角阿光一直隐瞒自己拥有超能力的秘密,但他在高二某天放学路上,被不法分子盯上强行剥离了他的超能力,陷入濒死的危险境地。阿光为了自救而踏上冒险之旅,先后卷入黑市与地下研究所的纷争,逐步见识到隐藏在普通人世界之外的超能力者世界,那里充满了不同势力之间的争斗。阿光从一个名不见经传的小人物,一路摸爬滚打成为超能力世界的王者。

请基于上述故事梗概,设计一位女性角色,她将会是阿光的恋人,请你完成她的人物设定,并请你扮演她,向我讲述你过去的经历

问题16:我正在创作一部科幻小说,说明如下:

故事发生在一个拥有超能力的世界,主角阿光一直隐瞒自己拥有超能力的秘密,但他在高二某天放学路上,被不法分子盯上强行剥离了他的超能力,陷入濒死的危险境地。阿光为了自救而踏上冒险之旅,先后卷入黑市与地下研究所的纷争,逐步见识到隐藏在普通人世界之外的超能力者世界,那里充满了不同势力之间的争斗。阿光从一个名不见经传的小人物,一路摸爬滚打成为超能力世界的王者。

请基于上述故事梗概,完成阿光某位伙伴的人物设定,并请你扮演此人物,向我讲述你过去的经历

问题17:我正在创作一部科幻小说,说明如下:

故事发生在一个拥有超能力的世界,主角阿光一直隐瞒自己拥有超能力的秘密,但他在高二某天放学路上,被不法分子盯上强行剥离了他的超能力,陷入濒死的危险境地。阿光为了自救而踏上冒险之旅,先后卷入黑市与地下研究所的纷争,逐步见识到隐藏在普通人世界之外的超能力者世界,那里充满了不同势力之间的争斗。阿光从一个名不见经传的小人物,一路摸爬滚打成为超能力世界的王者。

请基于上述故事梗概,完成阿光某位竞争者的人物设定,并请你扮演此人物,向我讲述你过去的经历

一群没有特点、缺少关联的纸片人,无力吐槽。不知道是不是免费版只有4k上下文的缘故,

reka生成的这群人物,算得上我测下来最差的回答了,没什么启发性,也没给出多少实质性的内容。

行文类

行文类问题主要测试AI进行小说正文创作的能力,这里准备了7个问题,其中问题18~21用于测试AI的描写(环境、物品、人物、动作)内容生成能力,问题22~24用于测试AI情节(冲突、惊悚、仪式)扩写能力。

问题18:请你扮演一位17岁的女生,第一次来到菜场买菜,请你写一段对菜场嘈杂、混乱环境的描写,要求为原创,不少于300字

问题19:请你扮演一位美食主播,你来到一家餐厅探店,店家端上来了一盘剁椒鱼头,请你写创作一段对剁椒鱼头色香味的描写,要求为原创,不少于300字

问题20:请你扮演一位专柜导购,一名女士走入店中,她穿着朴素但气质不凡,请你创作一段对这位女士外貌与言行举止的描写,要求为原创,不少于300字

问题21:请你扮演一位古法造纸工匠,向我介绍古法造纸的操作方法,要求为原创,不少于300字

问题22:我正在写一部小说,情节如下:

篮球场上,张三成功抢走李四的球,随后两队球员针锋相对,最终演变成两队的暴力冲突。

请你帮我为以上场景添加更多细节,扩展成一篇不低于500字的文章,要求为原创

问题23:我正在写一部小说,有一个情节是主角王五来荒村探险,进入某间废弃别墅躲雨,但在进入别墅后,王五遇到了种种怪事。请你从王五进入别墅开始,运用五感添加更多细节,营造惊悚恐怖的氛围,写成一篇不低于500字的文章,要求为原创

问题24:我正在写一部小说,主角张小花被绑架到某地下室,发现自己身处某神秘的仪式中。请你从张小花在地下室醒来开始,运用五感添加更多细节,详细描述仪式过程和张小花的感受,营造紧张和神秘的气氛,写成一篇不低于500字的文章,要求为原创

单单看描写的话,reka还是会有浮夸、抽象的问题,加入情节之后,reka的表现会好很多。但是吧,我感觉reka写的故事,逻辑问题还是挺多的,比如问题23进入废弃别墅躲雨看到阳光(有阳光还躲雨?说好的惊悚呢?),比如问题24挣脱绳子居然就轻轻松松跑掉了。这行文,很不走心呀……

小结

从24个问题的测试结果来看,reka的表现一般般,并不出彩。

当然啦,正如我之前文章里说的,这24个问题的设计其实还比较浅,我们只能拿来大致摸摸底,不足以直接下结论。创作一部小说,涉及的内容多而杂,很多东西还是需要跟AI更深度地交互才能看清楚。AI在某些方面表现突出,也可能在其他方面拉胯。

眼下表现一般可能说明,后续我们在提出相关问题的时候,对提示词的处理需要更细致,才能得出接近预期的结果。

Reka比较好的一点是,不像Claude一样动不动就封号,感兴趣的小伙伴们不妨亲自体验一下。

本文由人人都是产品经理作者【不知】,微信公众号:【不知】,原创/授权 发布于人人都是产品经理,未经许可,禁止转载。

题图来自Unsplash,基于 CC0 协议。

更多精彩内容,请关注人人都是产品经理微信公众号或下载App
评论
评论请登录
  1. 目前还没评论,等你发挥!