Necə etmək olar ?

[Mustafa]

Xəbər saytında rss ilə avtomatik xəbər çəkmək istəyirəm digər xəbər saytından rss yaxud feed əlavə edirəm xəbərin başlığı şəkili açıqlaması düşür ancaq xəbər mətni düşmür digər sayta yönəltmək yazır yönəltməni bağlasam da yazı tam düşmür

 

[Mustafa]

Ps: xəbər saytları tam mətn verrmurmirş hansı xəbər saytından tam mətn əldə etmək olar ? Məlumat var kimdəsə

 

[xson]

Gərək bir bir gəzəsən. Grab üçün normal bot yazasan

 

[Mustafa]

Gərək bir bir gəzəsən. Grab üçün normal bot yazasan

Qrab hazırlamıram hazır skirptdi RSS ilə avtomatik xəbər əlavə etmək

 

[(By)_Ceza]

Yadımda deyil baxıb deyərəm mən istifadə etmişəm

 

[SoxulcanPRO]

Bəzi saytlar RSS-də tam məqaləni vermir, sadəcə başlıq, şəkil və qısa bir açıqlama olur. Tam məqalə üçün sayta yönləndirir. Əgər yönləndirməni bağlasan da məqalə tam düşmürsə, deməli, RSS sadəcə xülasəni təqdim edir.


Bunun həlli üçün bir neçə variant var:

1. Tam məqalə verən RSS tapmaq – Bəzi saytların full RSS versiyası olur, URL-nin sonunda ?fulltext=1 və ya ?mode=full kimi parametrlər əlavə edərək yoxlamaq olar.
2. Saytdan birbaşa mətni çəkmək Scraping RSS-dən xəbərin linkini götürüb həmin səhifəni açaraq məqaləni avtomatik çıxarmaq olar. Bunu PHP-də cURL və DOMDocument ilə və ya Node.js-də cheerio və puppeteer ilə etmək mümkündür.
3. "Readability API" və ya "Mercury Parser" istifadə etmək – Bunlar xəbərin əsas hissəsini analiz edib təmiz mətni çıxarmağa kömək edir.
4. Başqa xidmətlərdən istifadə – Full-Text RSS FiveFilters.org kimi xidmətlər RSS-dən tam məqalə çəkməyə kömək edə bilər.

Əgər istəyirsənsə, bunun üçün bir kod nümunəsi yaza bilərəm.