实测:GPT-4能否通过AI 内容检测工具的检测

根据Authority Hacker对3,812名数字营销人员的调查报告,85.1%的营销人员正在使用AI 撰写文章。这无疑说明我们都处于AI创造的热潮中。

但是,所有用AI撰写文章的SEO人可能都会好奇:Google以及AI内容检测工具能发现我的文章是用AI写的吗?

针对这个问题,我在网上找了10款AI内容检测工具,分别对Chatgpt-4创作的内容、Chatgpt-4改写的内容以及人类原创的内容进行测试。

内容样本 – 1个人类原创+1个GPT-4编写+1个GPT-4改写

我随机针对话题“What Is Content Marketing?”产生的内容进行测试,其中人类原创的内容摘自Backlinko的文章,其余由GPT-4生成或改写。其中,GP4-4改写的内容是根据人类原创的内容进行改写的。在AI创作生成和改写中我均开启了新的对话,以免AI受前期对话的影响。

现在,我先列出进行测试的样本内容。

1. 人类原创的内容

Content marketing is a type of marketing that consists of strategically creating, publishing, and promoting content (including blog posts, emails, videos and podcasts). Content marketing is typically used to increase brand awareness and engagement, attract visitors or users, generate sales leads, or drive purchases and revenue.

2. Chatgpt-4创作的内容

Content marketing is a strategic marketing approach focused on creating and distributing valuable, relevant, and consistent content to attract and retain a clearly defined audience, ultimately, to drive profitable customer action.

Instead of pitching your products or services, content marketing allows you to provide truly relevant and useful content to your prospects and customers to help them solve their issues. This marketing technique involves creating and sharing materials online (like blogs, videos, and social media posts) that stimulate interest in a brand’s products or services.

Some key points of content marketing include:

  1. Audience Relevance: Content must be relevant and valuable to the target audience. This requires a good understanding of the audience’s needs and wants.
  2. Consistency: Regularly publishing and sharing content keeps the audience engaged and helps to maintain a relationship with them.
  3. Value: The content shared should provide value to the audience, either by educating them, offering solutions to problems they may have, or entertaining them.
  4. Conversion: The ultimate goal of content marketing is to drive the audience to take a profitable action. This could be purchasing a product, subscribing to a service, or any other action beneficial to the business.

Examples of content marketing include blog posts, videos, podcasts, infographics, email newsletters, whitepapers, eBooks, and so much more. It’s used by businesses of all sizes to achieve various results, such as increasing brand awareness, boosting sales, engaging with the audience, or retaining customers.

3. Chatgpt-4改写的内容

Content marketing refers to a marketing strategy that involves the intentional creation, distribution, and promotion of various types of content such as blog articles, emails, videos, and podcasts. Its main aim is to enhance brand recognition and interaction, draw in visitors or users, cultivate potential sales leads, and stimulate purchases, ultimately leading to increased revenue.

实验结果 – AI内容检测工具看起来不是很靠谱

网上都说AI内容检测工具可以轻易识别AI创作的内容,但当我看到10款AI检测工具测出的结果时,我比较怀疑 —— 我根本无法找出一款完美检测工具,我觉得大部分AI内容检测工具都在胡说八道

我们这就来看看测试结果统计图:

(1)在10款检测工具中,没有任何一款工具对三个版本的内容是否为人类或AI创作的都作出精准判断(可能性判断超过50%时视为准确判断)

(2)针对人类原创内容进行了检测的8款工具中,有3款工具认为内容为人类创作(人类写作可能性超过50%);3款工具中的其中有2款工具认为AI创作的2个版本也是人类创作,因此这2款工具的可信度也很低。

(3)针对GP4-4创作的内容,有6款工具认为其是AI创作;但在这6款工具中,也有4款认为人类创作的内容是AI写的,同样可信度很低。

(4)针对GP4-4改写的内容,有3款工具认为其是AI创作的,另有6款工具认为其是人类写的;其中认为其是AI写的3款工具也认为人类原创的也是AI写的,因此完全没有可信度。

备注:有些工具给出人类写作的可能性指数,有些工具给出AI撰写的指数。为统一数据对比标准,对所有给出AI撰写指数的工具,我进行了简单的加减法将其转换为人类写作的可能性指数。例如,如果一款AI内容检测工具认为某段内容是AI撰写的可能性是60%,那么我将它换算为人类撰写的指数为40%。

Google如何评价AI 内容?

据谷歌称,他们使用 RankBrain 和 BERT 等人工智能算法来评估搜索查询的相关性,并为用户返回最准确的结果。然而,当涉及到机器生成的文本(例如 GPT-4 生成的内容)时,谷歌并未明确说明他们对它们的排名是否与人工编写的内容不同。

Google搜索关于 AI 生成内容的指南Google明确表示他们奖励优质内容(无论其制作方式为何)。以下是Google对 AI 内容的看法概述:

  • Google 的排名系统会奖励展示专业知识、经验、权威性和可信度 (EEAT) 的原创、高质量内容,无论其制作方式如何。
  • 使用自动化或 AI 生成主要目的是操纵搜索排名的内容违反了Google 的网络垃圾政策。
  • 长期以来,自动化功能一直用于生成实用内容,例如体育赛事比分、天气预报和转录内容。AI 能够助力表达能力和创造力再上新台阶,并且是帮助用户为网页创作精彩内容的重要工具。
  • 无论内容的制作方式为何,要想在 Google 搜索上取得理想成效,应致力于创作原创、优质、以用户为中心的内容,并展示出 E-E-A-T 的特性。

结语

从我本人的实验结果来看,市面上的绝大部分AI内容检测工具仍不能非常准确地判断哪些是人类原创内容,哪些是AI创作的内容。但整体上,这些工具对AI创作的内容识别率比较高,对AI改写的内容与原创内容的判断趋于一致。因此,我建议大家在使用AI创作时,更多地用AI进行改写,而不要直接用AI生成整篇内容。

最后,市面上的AI内容检测工具无法准确判断内容是否是AI创作,不代表Google也不能。理论上,Google的技术积累要远胜于这些工具,Google更有可能作出精准的判断。

Leave a Comment

您的电子邮箱地址不会被公开。 必填项已用*标注

error: Content is protected !!