「AI寫網文」能力測評第五彈:reka core
本文深入探討了Reka core這款AI寫作輔助工具在創作網絡文學方面的性能和能力。通過一系列創意、大綱、人物和行文的測試問題,文章展示了Reka core在不同寫作場景下的表現,并提供了對AI寫作工具的深入分析和評價。引導讀者了解AI如何輔助網絡文學創作,希望對你有所幫助。
Reka core,據說這款大模型由曾就職于DeepMind、Google Brain、OpenAI等公司的專家們組團,4個月內肝出來,號稱比肩GPT-4。
這款大模型可提供128k上下文,從各種打分數據來看,reka core性能和AI能力都有不俗表現。不過現在免費體驗reka的功能,僅支持4k上下文。
不管傳聞中reka的能力有多強、跑分有多高,我們關注的還是AI在輔助網文創作上的能力,因此,這次我們還是拿那24個問題來測測看。
創意類
創意類問題主要測試AI提供小說創意的能力,這里準備了6個問題,其中問題1~3用于測試AI基于特定類型(歷史、科幻、玄幻)生成創意的能力,問題4~6用于測試AI基于特定情節主題(重生、娛樂圈、規則怪談)生成創意的能力。
問題1:我想要創作一部架空歷史的小說,希望采用類似中國古代背景,請你幫我設計故事梗概,要求:內容新穎,情節曲折,涉及多方沖突
問題2:我想要創作一部科幻小說,需要與神經科學和人工智能技術相關,請你幫我設計故事梗概,要求:內容新穎,情節曲折,涉及多方沖突
問題3:我想要創作一部玄幻小說,主角是一只上古妖獸(請你幫我確定這只上古妖獸的品種),請你幫我設計故事梗概,要求:內容新穎,情節曲折,涉及多方沖突
問題4:我想要創作一部小說,主角重生歸來,請你幫我設計故事梗概,要求:內容新穎,情節曲折,涉及多方沖突
問題5:我想要創作一部小說,故事主要發生在娛樂圈,請你幫我設計故事梗概,要求:內容新穎,情節曲折,涉及多方沖突
問題6:我想要創作一部小說,主角意外卷入某種規則怪談(請你設計相應規則)中,請你幫我設計故事梗概,要求:內容新穎,情節曲折,涉及多方沖突
reka給出的這幾個創意有如下特點:
- reka給出的回答還是偏傳統小說,這些題材如果按照網文的風格來設計,故事走向之類的大概率不會如上述這樣設計。
- reka在給情節創意的時候,會忍不住往偏西方的題材、價值觀上靠,最典型的就是問題3要求的玄幻題材,帶上了西幻的味道。當然,reka是國外的產品,這一點無可厚非。
創意性上,我感覺reka的表現會比GPT4好一些??赡苁莵碜詫栴}2的刻板印象吧,之前問題2撞梗的產品太多了,能給出新創意的我就忍不住認為它棒棒噠??。
大綱類
大綱類問題暫不考慮設定方面的生成,而是以情節主線設計為主,這里準備了6個問題,用于測試AI面向不同主題(復仇、探險、愛情、權謀、懸疑、升級)編排情節的能力。
問題7:我正在創作一部仙俠小說,主角本是修行天才,遭遇同門算計差點生死道消,醒來時已經變成了一個廢人。請你以此為背景,提供10個情節創意,使主角一步一步完成復仇,并成功飛升。要求:每個情節都需提供沖突事件、矛盾升級、高潮、結尾的梗概描述,內容要新穎
問題8:我正在創作一部都市異能小說,主角是一名高二學生,擁有電磁操控超能力,但某一天他的超能力被一伙神秘人剝奪,導致他只剩下24小時的生命。請你以此為背景,提供10個情節創意,使主角完成自救,并一步一步挖掘出神秘人的巨大陰謀,結識伙伴并與伙伴們一起一次次粉碎神秘人的行動,最終徹底消滅神秘人的組織。要求:每個情節都需提供沖突事件、矛盾升級、高潮、結尾的梗概描述,內容要新穎
問題9:我正在創作一部愛情小說,女主誤以為男主設計害死自己,重生歸來想要找男主復仇。請你以此為背景,提供10個情節創意,使女主一步一步發現害死自己的人并不是男主,解開誤會并最終與男主走到一起。要求:每個情節都需提供沖突事件、矛盾升級、高潮、結尾的梗概描述,內容要新穎
問題10:我正在創作一部架空歷史小說,主角一家遭遇奸人陷害而被抄家滅門,全家犧牲保護他一人成功逃走。請你以此為背景,提供10個情節創意,使主角一步一步從無名小輩,成為權傾朝野的宰相,并為死去的家人平反。要求:每個情節都需提供沖突事件、矛盾升級、高潮、結尾的梗概描述,內容要新穎
問題11:我正在創作一部懸疑小說,主角是一名旅游主播,她來到一個遠離城市的村落旅游,當晚和她一起的同事就失蹤了。請你以此為背景,提供10個情節創意,使主角經歷一系列冒險,最終發現同事失蹤的真相和藏在村子里的秘密。要求:每個情節都需提供沖突事件、矛盾升級、高潮、結尾的梗概描述,內容要新穎
問題12:我正在創作一部小說,主角忽然獲得使時間停止3秒的能力,獲得他人真心感謝可以使此能力升級。請你以此為背景,提供10個情節創意,使主角獲得成長。要求:每個情節都需提供沖突事件、矛盾升級、高潮、結尾的梗概描述,內容要新穎
看完reka編排的情節,我們不難發現,這些情節編排缺少明確的故事線。其實每一個問題背后,都是有明確的故事線索的,比如復仇、升級、感情線等等,但是reka沒有通過10個情節將這些故事線展現出來,使得情節像是散裝的一樣,缺乏邏輯,我們無法看到主角如何一步一步成長起來。
人物類
人物類問題主要測試AI進行人物設定、以人物為中心的故事創作能力,這里準備了5個問題,用于測試不同類型人物(主角、反派、戀人、伙伴、競爭者)生成能力。
問題13:我正在創作一部科幻小說,說明如下:
故事發生在一個擁有超能力的世界,主角阿光一直隱瞞自己擁有超能力的秘密,但他在高二某天放學路上,被不法分子盯上強行剝離了他的超能力,陷入瀕死的危險境地。阿光為了自救而踏上冒險之旅,先后卷入黑市與地下研究所的紛爭,逐步見識到隱藏在普通人世界之外的超能力者世界,那里充滿了不同勢力之間的爭斗。阿光從一個名不見經傳的小人物,一路摸爬滾打成為超能力世界的王者。
請你幫我完成阿光的人物設定,并按照“英雄之旅”模型設計故事主要情節
問題14:我正在創作一部科幻小說,說明如下:
故事發生在一個擁有超能力的世界,主角阿光一直隱瞞自己擁有超能力的秘密,但他在高二某天放學路上,被不法分子盯上強行剝離了他的超能力,陷入瀕死的危險境地。阿光為了自救而踏上冒險之旅,先后卷入黑市與地下研究所的紛爭,逐步見識到隱藏在普通人世界之外的超能力者世界,那里充滿了不同勢力之間的爭斗。阿光從一個名不見經傳的小人物,一路摸爬滾打成為超能力世界的王者。
請基于上述故事梗概,完成反派人物設定,并請你扮演此人物,向我講述你過去的經歷
問題15:我正在創作一部科幻小說,說明如下:
故事發生在一個擁有超能力的世界,主角阿光一直隱瞞自己擁有超能力的秘密,但他在高二某天放學路上,被不法分子盯上強行剝離了他的超能力,陷入瀕死的危險境地。阿光為了自救而踏上冒險之旅,先后卷入黑市與地下研究所的紛爭,逐步見識到隱藏在普通人世界之外的超能力者世界,那里充滿了不同勢力之間的爭斗。阿光從一個名不見經傳的小人物,一路摸爬滾打成為超能力世界的王者。
請基于上述故事梗概,設計一位女性角色,她將會是阿光的戀人,請你完成她的人物設定,并請你扮演她,向我講述你過去的經歷
問題16:我正在創作一部科幻小說,說明如下:
故事發生在一個擁有超能力的世界,主角阿光一直隱瞞自己擁有超能力的秘密,但他在高二某天放學路上,被不法分子盯上強行剝離了他的超能力,陷入瀕死的危險境地。阿光為了自救而踏上冒險之旅,先后卷入黑市與地下研究所的紛爭,逐步見識到隱藏在普通人世界之外的超能力者世界,那里充滿了不同勢力之間的爭斗。阿光從一個名不見經傳的小人物,一路摸爬滾打成為超能力世界的王者。
請基于上述故事梗概,完成阿光某位伙伴的人物設定,并請你扮演此人物,向我講述你過去的經歷
問題17:我正在創作一部科幻小說,說明如下:
故事發生在一個擁有超能力的世界,主角阿光一直隱瞞自己擁有超能力的秘密,但他在高二某天放學路上,被不法分子盯上強行剝離了他的超能力,陷入瀕死的危險境地。阿光為了自救而踏上冒險之旅,先后卷入黑市與地下研究所的紛爭,逐步見識到隱藏在普通人世界之外的超能力者世界,那里充滿了不同勢力之間的爭斗。阿光從一個名不見經傳的小人物,一路摸爬滾打成為超能力世界的王者。
請基于上述故事梗概,完成阿光某位競爭者的人物設定,并請你扮演此人物,向我講述你過去的經歷
一群沒有特點、缺少關聯的紙片人,無力吐槽。不知道是不是免費版只有4k上下文的緣故,
reka生成的這群人物,算得上我測下來最差的回答了,沒什么啟發性,也沒給出多少實質性的內容。
行文類
行文類問題主要測試AI進行小說正文創作的能力,這里準備了7個問題,其中問題18~21用于測試AI的描寫(環境、物品、人物、動作)內容生成能力,問題22~24用于測試AI情節(沖突、驚悚、儀式)擴寫能力。
問題18:請你扮演一位17歲的女生,第一次來到菜場買菜,請你寫一段對菜場嘈雜、混亂環境的描寫,要求為原創,不少于300字
問題19:請你扮演一位美食主播,你來到一家餐廳探店,店家端上來了一盤剁椒魚頭,請你寫創作一段對剁椒魚頭色香味的描寫,要求為原創,不少于300字
問題20:請你扮演一位專柜導購,一名女士走入店中,她穿著樸素但氣質不凡,請你創作一段對這位女士外貌與言行舉止的描寫,要求為原創,不少于300字
問題21:請你扮演一位古法造紙工匠,向我介紹古法造紙的操作方法,要求為原創,不少于300字
問題22:我正在寫一部小說,情節如下:
籃球場上,張三成功搶走李四的球,隨后兩隊球員針鋒相對,最終演變成兩隊的暴力沖突。
請你幫我為以上場景添加更多細節,擴展成一篇不低于500字的文章,要求為原創
問題23:我正在寫一部小說,有一個情節是主角王五來荒村探險,進入某間廢棄別墅躲雨,但在進入別墅后,王五遇到了種種怪事。請你從王五進入別墅開始,運用五感添加更多細節,營造驚悚恐怖的氛圍,寫成一篇不低于500字的文章,要求為原創
問題24:我正在寫一部小說,主角張小花被綁架到某地下室,發現自己身處某神秘的儀式中。請你從張小花在地下室醒來開始,運用五感添加更多細節,詳細描述儀式過程和張小花的感受,營造緊張和神秘的氣氛,寫成一篇不低于500字的文章,要求為原創
單單看描寫的話,reka還是會有浮夸、抽象的問題,加入情節之后,reka的表現會好很多。但是吧,我感覺reka寫的故事,邏輯問題還是挺多的,比如問題23進入廢棄別墅躲雨看到陽光(有陽光還躲雨?說好的驚悚呢?),比如問題24掙脫繩子居然就輕輕松松跑掉了。這行文,很不走心呀……
小結
從24個問題的測試結果來看,reka的表現一般般,并不出彩。
當然啦,正如我之前文章里說的,這24個問題的設計其實還比較淺,我們只能拿來大致摸摸底,不足以直接下結論。創作一部小說,涉及的內容多而雜,很多東西還是需要跟AI更深度地交互才能看清楚。AI在某些方面表現突出,也可能在其他方面拉胯。
眼下表現一般可能說明,后續我們在提出相關問題的時候,對提示詞的處理需要更細致,才能得出接近預期的結果。
Reka比較好的一點是,不像Claude一樣動不動就封號,感興趣的小伙伴們不妨親自體驗一下。
本文由人人都是產品經理作者【不知】,微信公眾號:【不知】,原創/授權 發布于人人都是產品經理,未經許可,禁止轉載。
題圖來自Unsplash,基于 CC0 協議。
- 目前還沒評論,等你發揮!