MarketMuse NLG Teknolojisi vs. GPT-3

Son zamanlarda GPT-3'e olan tüm ilgiyle, GPT-2'yi değerlendirirken alınan sürece benzer şekilde MarketMuse NLG Teknolojisi ile nasıl karşılaştırıldığına bir göz atmaya karar verdik.

Örneklere dalmadan önce, MarketMuse NLG Teknolojisinin farklılaştırıcı faktörlerine hızlı bir genel bakış.

• GPT-3'ün aksine, bir konu verildiğinde, bir içerik özetini 'omurga' olarak kullanarak parça parça bir makale oluşturuyoruz.
• Bir konu verildiğinde, alt başlıklar ve ilgili başlıklar halinde yapılandırılmış bir içerik özeti oluşturuyoruz, bunu bir rehber olarak kullanıyoruz.
• Her kısa bölüm için ilgili konuları ve alt başlığı bilgi istemi olarak kullanırız ve kalite filtrelerimizden geçen çıktılar elde edene kadar üretmeye devam ederiz.
• Filtrelerimiz, elbette, çıktıda görmeyi umduğumuz ilgili konuların içerik puanını ve varlığını içerir, ancak aynı zamanda dilbilgisi hataları, sözcük çeşitliliği, intihal ve diğer okunabilirlik ölçütlerini de kontrol ederiz.

Üç İçerik Örneği

GPT-3, öncekinden daha büyük ve sözde daha iyi, ancak İnternet'i ele geçirmesi pek mümkün değil. OpenAI, dil modelleriyle ilgili ayrıntılı bir makale (PDF) yayınladı. Amaçlarımız için, doğal dil üretiminin arkasındaki bilimi incelemekle ilgilenmiyoruz. Bunun yerine, ampirik bir yaklaşım izliyoruz.

Aşağıda, MarketMuse NLG Technology, GPT-3 ve MarketMuse NLG Technology'nin yardımıyla bir insan tarafından yazılmış, Twitter'da olmanın önemi hakkında üç alıntı bulacaksınız. Hangisinin hangisi olduğunu söyleyebilir misin?

Versiyon 1

Versiyon 2

Sürüm 3

Hangi İçerik Bir İnsan Tarafından Oluşturuldu?

İlk olarak, "sniff" testini geçip geçmediğine bakalım. Bu yazılar sanki bir insan tarafından yazılmış gibi mi görünüyor?

Sadece biri vardı. Hangisi olduğunu tahmin edebilir misin?

İlki GPT-3, ikincisi bir insan ve üçüncüsü MarketMuse NLG Technology tarafından yazılmıştır.

Bilgi Aktarmada Ne Kadar İyiler?

İçerik Puanı, Yazar Puanı ve Not Düzeyine göre her üç yaklaşımın çıktısını inceleyelim.

MarketMuse İçerik Puanı, parçanın konuyu konu modeline kıyasla ne kadar iyi kapsadığını değerlendirir. Daha yüksek daha iyidir ve bu makale için Önerilen İçerik Puanı 42'dir, ancak mükemmel puan diye bir şey yoktur.

Writer Skoru, Writer.com tarafından atanan bir puandır ve imla ve dilbilgisi, terimler, stil, açıklık, kapsayıcılık ve dağıtıma dayalıdır - ne kadar yüksekse o kadar iyidir. Sınıf düzeyi, içeriği anlamak için gereken beklenen eğitim düzeyini belirtir. Yazınızın not düzeyi genellikle hedef kitlenizinkiyle eşleşmelidir.

MarketMuse NLG Teknolojisi

Beklendiği gibi, MarketMuse NLG Technology, modeldeki konuları ele alma konusunda en iyisini yaptı. Kelime sayısı ve İçerik Puanı olmak üzere iki önemli KPI'yı karşıladığından emin olmak için tasarlanmıştır.

MarketMuse NLG Teknolojisi, Yazar Puanı konusunda şaşırtıcı derecede başarılı oldu. Yazım ve dil bilgisi, terim kullanımı, stil ve netlikle ilgili birkaç sorun vardı. Not Düzeyi, bu makalenin hedeflenen hedef kitlesinin aralığındadır.

GPT-3

GPT-3 çok konuşan ama çok az konuşan bir insan gibidir.

İçerik Puanı 4 için gerçekten basit bir açıklama var. Makale, bir uzmanın Twitter'da olmanın önemini tartışırken yaptığı önemli sorunları ele almıyor. Gönderi sevimli ve eğlenceli olabilir, ancak herhangi bir madde içermez.

Makale, Twitter hakkında yaklaşık 2.400 kelimeden bir kez bile bahsetmedi veya aşağıdakilerle ilgili herhangi bir şeyi açıklamadı:

• sosyal medya
• tweetler
• Twitter takipçileri
• Twitter pazarlaması
• trend olan hashtag'ler

MarketMuse konu modelinde bulacağınız diğer 45 konudan bahsetmiyorum bile. Sorun, makalenin yapısından ve içsel anlamdan yoksun olmasıdır.

Bir insan bu makaleyi gönderseydi ne yapardınız?

Gönderi, Twitter'da olmanın önemi hakkında anlayışlı hiçbir şey söylemiyor. Sonuç olarak, bu taslağı düzenlemek ve değerli bir yayınlanabilir içerik parçasına dönüştürmek çok daha zordur. GPT-2'yi değerlendirirken keşfettiğimiz sorunun aynısı.

Bu tür bir makale için bir kelime var. Buna "kabartmak" denir.

Aynı zamanda en düşük Yazar Puanından da zarar gördü. Bu, açıklık, kapsayıcılık ve üslup içeren diğerleriyle birlikte çok sayıda yazım ve dil bilgisi sorununun sonucudur.

4. Sınıfta yazmak burada bir endişe kaynağıdır. Kitlenizin seviyesinde yazmak her zaman en iyisidir. Yazınız çok karmaşık veya çok basitse, onları kaybetme riskiniz vardır. Bu durumda, GPT-3, bir iş kitlesi için çok temel bir düzeyde yazıyor.

İnsan

Kendi adıma söylemem gerekirse, insan, sizinki gerçekten de oldukça iyi iş çıkardı. Makale, İçerik Puanı 45 ile hedefin üzerinde rahatça oturuyor. 99'daki Yazar Puanı, olması gerektiği gibi neredeyse mükemmel. Writer for Chrome eklentisini kullanıyorum, böylece hataları önceden yakalarım. 8. Sınıf Düzeyi, hala bir iş kitlesinin menzili içindedir.

MarketMuse NLG Teknoloji Avantajı

GPT-3, bir uygulama arayışında bir çözümdür. API'ye erişmenin tek yolu, kullanım durumunuzun açıklandığı bir bekleme listesine katılmaktır. Erişime sahip olsanız bile, Uygulama Programlama Arayüzü aracılığıyla sağlananları kullanma konusunda sınırlı olacaksınız.

MarketMuse NLG Teknolojisi, özellikle içerik pazarlamacıları için uzun biçimli SEO kalitesinde makaleler üreterek belirli bir kullanım durumunu çözmek için oluşturuldu. İşte sunduğu avantajlar.

1. Tutarlılık ve Yapı – MarketMuse NL Teknoloji çıktısı, MarketMuse İçerik Özetleri tarafından belirlenir, bu nedenle taslaklar kutudan çıkar çıkmaz tutarlı ve yapılandırılmıştır. GPT-3, komut istemi metinle başlar, ancak korkuluklardan yoksundur, bu da SEO kalitesinde içerik için uygun olmayan yapılandırılmamış çıktılara yol açar.
2. Kontrol – Kullanıcılar bir taslak sipariş etmeden önce kendi MarketMuse İçerik Özetlerini oluşturabilir. Makalenin değinmesi gereken konuları, cevaplaması gereken soruları ve makalenin bölümlerini belirtin. GPT-3, nesillerin hangi konulardan bahsettiği ve içeriğin hangi soruları yanıtladığı konusunda çok az kontrol sunar.
3. Yayına Hazır – MarketMuse NLG Teknoloji çıktısı 1-2 saat içinde yayına hazır içerik olarak düzenlenebilir. GPT-3 çıktısının yayına hazır içerik olarak düzenlenmesi birkaç saat sürer.
4. Bozulma, İntihal, Tekrar – MarketMuse NLG Teknolojisi, uzunlukta bozulma, intihal ve tekrarlama içermeyen metinler üretir. GPT-3 çıktısı bozulma, intihal veya tekrarı kontrol etmez.
5. Eğitim – MarketMuse NLG Teknolojisi, nesillerin sonucunu iyileştirmek için küratörlüğünde bir veri setinden (cinsiyetçi, ırkçı ve yetişkinlere yönelik içeriği hariç tutan) makaleler üzerinde eğitilmiştir. GPT-3, düşük kaliteli, müstehcen ve nefret dolu içerik de dahil olmak üzere tüm web'de eğitilir ve düşük kaliteli nesillere yol açar.
6. Yapılandırma – MarketMuse NLG Teknolojisi, zaman içinde yeni kelimeler öğrenmenin yanı sıra kendi stilinize veya öykünmek istediğiniz birine yazacak şekilde yapılandırılabilir. GPT-3, çok az veya hiç yapılandırılabilirlik olmadan, yalnızca modelin parametrelerine dayalı metin oluşturabilir.
7. Makale Uzunluğu – MarketMuse NLG Teknolojisi, MarketMuse İçerik Özetinin uzunluğuna bağlı olarak 5.000 kelimeye kadar makaleler oluşturabilir. GPT-3 yalnızca ~1200 kelimeye kadar üretebilir.

Götürmek

Maliyetlerinizi ve baş ağrılarınızı ölçeklendirmeden içerik oluşturma işleminizi ölçeklendirin. MarketMuse NLG Teknolojisi, MarketMuse İçerik Özetlerine dayalı eksiksiz makale taslakları oluşturmak için yapay zekayı kullanarak içerik oluşturmayı hızlandırır. Güçlü bir başlangıç ​​taslağı oluşturma işini yapay zekanın yapmasına izin vererek içerik maliyetlerinizi tahmin edilebilir ve kalitenizi tutarlı tutun.