Files
RSSHub/lib/routes/gov/fmprc/utils.js
T
nicolaszf a8b85ca3ba feat: add 外交部发言人表态 (#2616)
* add fmprc

* change back config.js
2019-07-15 11:46:22 +08:00

55 lines
1.5 KiB
JavaScript

const got = require('@/utils/got');
const cheerio = require('cheerio');
const url = require('url');
// 加载文章页
async function load(link) {
const response = await got.get(link);
const $ = cheerio.load(response.data);
const date = new Date(
$('#News_Body_Time')
.text()
.match(/\d{4}-\d{2}-\d{2}/)
);
const pubDate = new Date(date.getTime()).toUTCString();
// 提取内容
const description = $('#News_Body_Txt_A').html();
return { description, pubDate };
}
const ProcessFeed = async (list, caches) => {
const host = 'https://www.fmprc.gov.cn/web/wjdt_674879/fyrbt_674889/';
return await Promise.all(
list.map(async (item) => {
const $ = cheerio.load(item);
const $title = $('a');
// 还原相对链接为绝对链接
const itemUrl = url.resolve(host, $title.attr('href'));
// 列表上提取到的信息
const single = {
title: $.text(),
link: itemUrl,
guid: itemUrl,
};
// 使用tryGet方法从缓存获取内容。
// 当缓存中无法获取到链接内容的时候,则使用load方法加载文章内容。
const other = await caches.tryGet(itemUrl, async () => await load(itemUrl));
// 合并解析后的结果集作为该篇文章最终的输出结果
return Promise.resolve(Object.assign({}, single, other));
})
);
};
module.exports = {
ProcessFeed,
};