Cannot extract full article from link | CyberSEO Pro | Support Forum

Thanks, it now works.

I see that it uses gpt3.5-16k, but in the advanced settings I can only specify “Content Spinner: OpenAI”.

How to configure which model should it use? I’d be fine with the 3.5-4k which is half as expensive.

The rewritten articles by GPT turn out in english instead of the original article language, is there a way to fix this? I currently have the setting as “Do not translate.”

Haven’t seen any prompt to edit or setting to change to prevent GPT from rewriting it in english.

I used 3.5-4k before to rewrite articles and it worked great, is there no chance at all to make a change in the plugin to allow it to work with any language? I’m down to make the changes to my .php file only just to customize it. It doesn’t have to be english only.

The solution you proposed is to use this code with the bold text added I guess:

Thanks for looking into it.

I’d be down to collapse all the paragraphs into one chunk of text and then feed that to GPT to rewrite in the same language. All the articles I’ll take are very short (less than 1k words) so there should be no issues with them.

Let me know as soon as you have updates.

Kind regards

You can easily do that using the following article assignment on the “AI article generation” tab:

Riscrivete questo testo con uno stile informativo:
%post_content_notags%

  

I’m trying to use this solution at this moment, but it doesn’t seem to work well.

Here’s the log:

[09-09-23 08:42:01] Checking for duplicate by link
[09-09-23 08:42:01] Trying to extract full text article
[09-09-23 08:42:01] Tag specified:

[09-09-23 08:42:01] Attributes specified: {“class”: “single–container ga_id–article-start”}
[09-09-23 08:42:02] Done
[09-09-23 08:42:02] Apply post filtering.
[09-09-23 08:42:02] Done.
[09-09-23 08:42:02] Generating OpenAI GPT (gpt-3.5-turbo-16k) content for: Riscrivi questo titolo in italiano con uno stile informativo: Comphet, i danni dell’eterosessualità imposta e obbligatoria | RDD
[09-09-23 08:42:03] Success
[09-09-23 08:42:03] Generating OpenAI GPT (gpt-3.5-turbo-16k) content for: Riscrivi questo articolo in italiano con uno stile informativo: Comphet: che cosa significa?Eterosessualità obbligatoria: come si manifesta?Conseguenze, problemi e rischiFidanzarsi, sposarsi, avere figli. Il tutto rigorosamente con una persona del sesso opposto, perché così ci è stato detto e inculcato fin dall’infanzia da genitori, media e società. Perché, semplicemente, è così che deve essere.
Si chiama “eterosessualità obbligatoria” (abbreviata “comphet”, dalla crasi dei termini inglesi) e si riferisce alla convinzione in base alla quale essere eterosessuali, appunto, sia la norma: l’unica alternativa accettabile quando si tratta di relazioni amorose, sessuali e matrimoniali.

Una convinzione così radicata a livello sociale e culturale che, spesso, non ci si rende nemmeno conto di esserne influenzati, e ci si ritrova a ricercare rapporti con persone dell’altro sesso solo perché ciò costituisce la “normalità”, senza interrogarsi a fondo su quello che si desidera – soprattutto quando si pensa di appartenere alla comunità LGBTQ+.
Quali sono le caratteristiche della comphet e come si manifesta nelle nostre vite? Scopriamolo insieme.

Vi raccomandiamo…

Cosa significano eteronormatività e cisnormatività: perché bisogna riconoscerle

Una società fondata sulla cisnormatività porta a considerare normale solo ciò che rientra nel binarismo di genere, ma questo provoca serie conse…

Comphet: che cosa significa?
L’espressione “comphet“, come accennato, deriva dal connubio delle parole “compulsory” (“obbligatorio”) ed “heterosexuality” (“eterosessualità”) ed è stata coniata dalla poetessa e femminista statunitense Adrienne Rich nel 1980, all’interno del saggio intitolato proprio Compulsory Heterosexuality and Lesbian Existence.
La riflessione di Rich muove dalla situazione svantaggiata delle donne e, nello specifico, dalla condizione di subalternità che deriva dall’eterosessualità obbligatoria. Come spiega Cirus Rinaldi nel suo Sesso, sé e società. Per una sociologia della sessualità:
[Adrienne Rich sviluppa il concetto di sessualità obbligatoria] sostenendo che diventare donne (e uomini) rispettabili significa essere eterosessuali, ossia essere subordinati a un sistema egemone che rappresenta l’eterosessualità come naturale, come caratteristica irrinunciabile e originaria. L’eterosessualità obbligatoria è uno degli strumenti maschili per dominare le donne.
In questo senso, quindi, dichiararsi lesbica diviene un vero e proprio atto politico, utile per affrancarsi dalla dominazione maschile e dall’imposizione di un unico, legittimo, orientamento sessuale.
Naturalmente, la teoria comphet non si limita alle donne, ma concerne anche tutte le persone che non si riconoscono nel binarismo di genere e che posseggono orientamenti sessuali e romantici “diversi” dalla cosiddetta “norma” e da ciò che è ritenuto socialmente e culturalmente accettabile.
 
Eterosessualità obbligatoria: come si manifesta?
L’eterosessualità obbligatoria, dunque, è uno dei lasciti più evidenti e pericolosi della società patriarcale ed eteronormativa che domina tuttora la nostra contemporaneità, e conduce le persone – soprattutto omosessuali – a credere che l’unione con il sesso opposto sia l’unica via idonea per esperire l’amore, l’erotismo e le relazioni.

Patriarcato: per combatterlo dobbiamo rivoluzionare il concetto di famiglia

Soffocante e discriminatorio, il patriarcato vige ancora fiero nelle nostre società, ghettizzando uomini e donne in ruoli e stereotipi di genere c…

I segnali che potrebbero palesare un’introiezione profonda dell’eterosessualità obbligatoria sarebbero, secondo Health News, i seguenti:

non si è mai presa in considerazione l’idea di essere altro che eterosessuale;
ci si è sentiti costretti a stare sempre con qualcuno del sesso opposto, come se non ci fosse un’altra opzione;
l’idea di avere una relazione risponde maggiormente a esigenze di natura pratica, piuttosto che essere diretta al soddisfacimento dei propri reali desideri (per esempio, una donna che sente il bisogno di stare con un uomo in modo tale da poter avere figli e avere un supporto finanziario, anziché essere attratta romanticamente e sessualmente da lui);
se e quando sono sorte domande circa la propria sessualità, ci si è ritrovati “costretti” a respingerle per vergogna o senso di colpa.

 Conseguenze, problemi e rischi
La comphet, perciò, rafforza gli stereotipi di genere di cui siamo intrisi fin dalla più tenera età, e delinea un’imposizione più o meno esplicita verso la predilezione nei confronti di rapporti esclusivamente eterosessuali.
Con delle ricadute emotive, fisiche e psicologiche pericolosissime per gli individui che ne subiscono gli effetti. L’eterosessualità obbligatoria, infatti, ingabbia – in modo spesso subdolo e pervasivo – tutti coloro che desiderano (o sono portati a farlo, per problemi familiari, lavorativi, economici e simili) allinearsi al volere del contesto socio-culturale in cui sono immersi, non fornendo loro alcuna via di scampo se non quella della comphet.
Il risultato risiede, così, non solo in un calcificarsi dei ruoli e del binarismo di genere, ma anche in un consolidarsi e acuirsi delle discriminazioni nei confronti delle persone che non hanno interiorizzato “a dovere” l’eterosessualità obbligatoria, e “osano” deragliare dai binari stessi per affermare la propria identità e il proprio orientamento romantico e sessuale tentando di essere libere e rispettate per tale ragione.
[09-09-23 08:42:13] Success
[09-09-23 08:42:13] Processing post templates
[09-09-23 08:42:13] Generating OpenAI GPT (gpt-3.5-turbo-16k) content for: Write a meta description for the following article to rank it in Google: Gli effetti negativi dell’imposizione e dell’obbligatorietà dell’eterosessualità: una panoramica su Comphet | RDD.
[09-09-23 08:42:15] Success
[09-09-23 08:42:15] Trying to spin the post with OpenAI GPT
[09-09-23 08:42:22] Done. Rewrite ratio: 50%
[09-09-23 08:42:22] Generating OpenAI GPT (gpt-3.5-turbo-16k) content for: Analyze the article below and generate 3 concrete, comma-delimited English keywords that represent the main topic(s) or visually significant elements in the text. The keywords should be appropriate for use as search prompts on Pixabay to find relevant images. Please note that the generated keywords should not contain abstract concepts, proper nouns (including names and brands), or numbers:
“Compulsory heterosexuality”, also known as “comphet” (a combination of English terms), is a deeply ingrained belief in society that asserts heterosexuality as the norm and the only acceptable option for romantic, sexual, and marital relationships. This belief is so deeply rooted that individuals often don’t even realize they are being influenced by it and end up pursuing relationships with opposite-sex partners simply because it is deemed “normal,” without questioning their true desires, especially for those who identify as part of the LGBTQ+ community.”The term “comphet” was coined by American poet and feminist Adrienne Rich in 1980, in her essay titled “Compulsory Heterosexuality and Lesbian Existence.” Rich argued that compulsory heterosexuality was a tool of male domination over women and that declaring oneself as a lesbian was a political act to free oneself from this domination.”L’eterosessualità obbligatoria non riguarda solo le donne, ma coinvolge tutte le persone che non si riconoscono nel binarismo di genere e hanno orientamenti sessuali e romantici diversi dalla norma socialmente accettata.The signals that can indicate a proper internalization of compulsory heterosexuality are as follows: never having considered the idea of being anything other than heterosexual, feeling compelled to only be with people of the opposite sex without considering other options, seeking relationships for practical reasons rather than romantic or sexual desire, rejecting questions about one’s sexuality out of shame or guilt.La comphet rafforza gli stereotipi di genere e impone in modo più o meno esplicito la preferenza per relazioni esclusivamente eterosessuali. Questo ha conseguenze emotive, fisiche e psicologiche pericolose per chi ne è influenzato. L’eterosessualità obbligatoria intrappola le persone che desiderano o sono costrette a conformarsi alle aspettative sociali, senza offrire loro alcuna via di scampo. Ciò porta non solo alla cristallizzazione dei ruoli di genere, ma anche a un aumento delle discriminazioni verso chi non si adegua all’eterosessualità obbligatoria e cerca di vivere liberamente la propria identità e orientamento romantico e sessuale…
[09-09-23 08:42:22] Success
[09-09-23 08:42:22] Searching on Google Images for “compulsory heterosexuality, comphet, LGBTQ+ community”
[09-09-23 08:42:23] Done
[09-09-23 08:42:23] Trying to generate post thumbnail from the first post image
[09-09-23 08:42:24] Trying to save image “https://upload.wikimedia.org/wikipedia/commons/d/d5/Heteropoa_venatoria_%28Linnaeus%2C_1767%29_female_Domestic_Hunting_Spider_%2816289066016%29.jpg”
[09-09-23 08:42:24] JPEG format detected
[09-09-23 08:42:24] Done. The local image URL: Login to see this link
[09-09-23 08:42:24] Apply Spintax
[09-09-23 08:42:24] Inserting a new post into the WordPress database
[09-09-23 08:42:24] Done
[09-09-23 08:42:25] The post thumbnail has been successfully generated and saved to the host
[09-09-23 08:42:25] New post title: Gli effetti negativi dell’imposizione e dell’obbligatorietà dell’eterosessualità: una panoramica su Comphet | RDD
[09-09-23 08:42:25] New post ID: 5055
[09-09-23 08:42:25] 1 post was added

Login to see this link

So I think the issue is in the highlighted red steps, when it rewrites the article.

If I copy the text after the command I highlighted in blue (so my prompt + the article text) and feed it to chatgpt (or via 3.5turbo 16k api) I get the correct response which is the article rewritten in perfect italian (link: Login to see this link)

But when the plugin does the rewriting, for some reason it comes out 50% english and 50% italian, even tho the original article is in italian and the rewrite should be in italian. Is there some prompt baked in that is overriding my prompt?

We’re almost there, it’s almost working perfectly.

Ok my bad, I thought the respinner and the AI generator were the same thing.

I disabled the respinner and it outputted a perfect article in the correct language.

Everything seems good so far, I’ll try different feeds now. Thanks!

CyberSEO said
UPDATE: Since version 10.110 it is recommended to use GPT-3.5 Turbo Instruct as base model in the CyberSEO Pro GPT Content Spinner settings for better results.  

I only use the AI Generator, not the Content Spinner.

I’m getting a new kind of issue at the moment, where it’s not getting the full article to rewrite:

[27-09-23 01:46:46] Processing a new post: Login to see this link
[27-09-23 01:46:46] Checking for duplicate by link and title
[27-09-23 01:46:46] Trying to extract full text article
[27-09-23 01:46:46] Tag specified: <div>
[27-09-23 01:46:46] Attributes specified: {“class”: “fp_single-article__content”}
[27-09-23 01:46:47] Done
[27-09-23 01:46:47] Generating OpenAI GPT (gpt-3.5-turbo-16k) content for: Rewrite this title in Italian in 20 words or less: Testo, traduzione e significato di El Jefe, Shakira e la tata che ha scoperto il tradimento di Pique
[27-09-23 01:46:49] Success

The plugin only extracts the intro abstract from the URL above, instead of the full article. So the “generated article” is really short and 100% identical, there has been no rewrite at all: Login to see this link dot com/2023/09/27/el-jefe-shakira-e-la-tata-che-ha-scoperto-il-tradimento-di-pique-testo-traduzione-e-significato/

CyberSEO said
You can use GPT-3.5 Turbo Instruct for the AI article generator as well as in your HTML post templates.

Your feed already contains full-text articles, so you don’t need to extract them with container tag. The article can also be extracted using the Full-Text RSS script.

The feed doesn’t contain the full article (Login to see this link) but I extract it as you can see from the logs above and repeated here:

[27-09-23 01:46:46] Attributes specified: {“class”: “fp_single-article__content”}

So it extracts the full column with the full article, but only rewrites the abstract. In the logs, it sometimes stops whenever it encounter the taboola script tag:

[27-09-23 04:40:02] Processing a new post: Login to see this link
[27-09-23 04:40:02] Apply post filtering.
[27-09-23 04:40:02] Done.
[27-09-23 04:40:02] Checking for duplicate by link and title
[27-09-23 04:40:02] Trying to extract full text article
[27-09-23 04:40:02] Tag specified: <div>
[27-09-23 04:40:02] Attributes specified: {“class”: “fp_single-article__content”}
[27-09-23 04:40:02] Done
[27-09-23 04:40:02] Generating OpenAI GPT (gpt-3.5-turbo-16k) content for: Rewrite this title in Italian in 20 words or less: Federica Nargi, il compleanno della figlia Sofia è a tema Barbie
[27-09-23 04:40:03] Success
[27-09-23 04:40:03] Generating OpenAI GPT (gpt-3.5-turbo-16k) content for: Sei il giornalista di un giornale web. Ti hanno passato la seguente notizia scritta di getto. Riscrivi il seguente articolo in italiano, inclusi i tag h1 e h2, se necessario e formatta il testo (grassetto e corsivo), senza aggiungere nulla, rimuovendo tutti i riferimenti al sito originale da cui è stata tratta la notizia: 27 Settembre 2023

17:17

Federica Nargi, il compleanno della figlia Sofia è a tema Barbie

Per i sette anni della figlia, Federica Nargi ha organizzato un compleanno tutto rosa, sulla scia del trend Barbiecore che ha animato tutta l’estate.

<script type=”text/javascript”>
window._taboola = window._taboola || [];
var windowWidth = window.innerWidth || document.documentElement.clientWidth || document.body.clientWidth;

if(windowWidth >= 0 && windowWidth

= 0 && windowWidth

[27-09-23 04:40:15] Success

So in this case it didn’t extract the full text. Check the website and the tag fp_single-article__content and you’ll see that it contains the full article. Is this fixable? Sometimes it happens sometimes it doesn’t, not sure why or if it’s being loaded only on some articles.

As mentioned above, GPT-3.5 is not so smart to rewrite HTML content. GPT-4 can do it easily, but not GPT-3.5 yet.

You can always test your GPT assignments (prompts) with any of OpenAI’s GPT models here: Login to see this link

Simply select the appropriate model, write your prompt, and copy your source article in HTML format. This way you can evaluate the capabilities of each GPT model and see how it works with your content. If it works there, it will work the same way with CyberSEO Pro.  

The rewriting seems to work fine when it gets the full article, it fails to rewrite when it’s less than 100/200 words. In the playground and in chatGPT it works kinda differently from the API/plugin, even for the same prompts, but there’s nothing we can do about it. As long as I get the full article I’m fine.

Also I need to remove (whenever it’s there) a string that gets copied from the original article similar to “Click here to read more”. Is there a filter for that (which searches for a specific string and removes it), or the only fix is via editing the prompt?

Also, if I may request a new feature, a “clone feed” button so it keeps all the same settings but lets me put a new url would be cool, otherwise it’s a lot of repeating the same settings manually.