基于Cloudflare Workers 免费搭建维基百科镜像

laiczhang
laiczhang
laiczhang
67
文章
0
评论
2020年4月1日14:18:32 评论 51 3608字阅读12分1秒

Cloudflare Workers 这个用于搭建无服务器应用程序的平台上, 用户可以无需购买服务器或配置 Web 服务器 (例如 Nginx 或 Apache) 而搭建反向代理.

此外, 关键性能, 例如延迟或可用性, 将会被优化, 因为无服务器应用将会被部署在 Cloudflare 的全球网络上. 该网络由 位于 90 个国家的 200 个城市中的数据中心组成.

通过配置地区和 IP 过滤器, 你可以根据法律规定在部分国家和地区停用反向代理服务. 借助移动端跳转工具, 你可以根据用户的设备来分发不同的网站.

1.注册cloudflare账号

官网:cloudflare.com

访问可能比较慢,请耐心等待。

建议使用Gmail注册,否则可能收不到邮件。

2.创建workers

基于Cloudflare Workers 免费搭建维基百科镜像

创建workers,

基于Cloudflare Workers 免费搭建维基百科镜像

代码:

// 你想镜像的站点
const upstream = 'zh.wikipedia.org'

// 针对移动端适配站点,没有就和保持和上面一致
const upstream_mobile = 'zh.wikipedia.org'

// 禁止某些地区访问
const blocked_region = []

// 禁止自访问
const blocked_ip_address = ['0.0.0.0', '127.0.0.1']

// 你想镜像的站点
const replace_dict = {
    '$upstream': '$custom_domain',
    '//zh.wikipedia.org': ''
}

// 剩下的就不用管了
addEventListener('fetch', event => {
    event.respondWith(fetchAndApply(event.request));
})

async function fetchAndApply(request) {

    const region = request.headers.get('cf-ipcountry').toUpperCase();
    const ip_address = request.headers.get('cf-connecting-ip');
    const user_agent = request.headers.get('user-agent');

    let response = null;
    let url = new URL(request.url);
    let url_host = url.host;

    if (url.protocol == 'http:') {
        url.protocol = 'https:'
        response = Response.redirect(url.href);
        return response;
    }

    if (await device_status(user_agent)) {
        upstream_domain = upstream
    } else {
        upstream_domain = upstream_mobile
    }

    url.host = upstream_domain;

    if (blocked_region.includes(region)) {
        response = new Response('Access denied: WorkersProxy is not available in your region yet.', {
            status: 403
        });
    } else if(blocked_ip_address.includes(ip_address)){
        response = new Response('Access denied: Your IP address is blocked by WorkersProxy.', {
            status: 403
        });
    } else{
        let method = request.method;
        let request_headers = request.headers;
        let new_request_headers = new Headers(request_headers);

        new_request_headers.set('Host', upstream_domain);
        new_request_headers.set('Referer', url.href);

        let original_response = await fetch(url.href, {
            method: method,
            headers: new_request_headers
        })

        let original_response_clone = original_response.clone();
        let original_text = null;
        let response_headers = original_response.headers;
        let new_response_headers = new Headers(response_headers);
        let status = original_response.status;

        new_response_headers.set('access-control-allow-origin', '*');
        new_response_headers.set('access-control-allow-credentials', true);
        new_response_headers.delete('content-security-policy');
        new_response_headers.delete('content-security-policy-report-only');
        new_response_headers.delete('clear-site-data');

        const content_type = new_response_headers.get('content-type');
        if (content_type.includes('text/html') && content_type.includes('UTF-8')) {
            original_text = await replace_response_text(original_response_clone, upstream_domain, url_host);
        } else {
            original_text = original_response_clone.body
        }

        response = new Response(original_text, {
            status,
            headers: new_response_headers
        })
    }
    return response;
}

async function replace_response_text(response, upstream_domain, host_name) {
    let text = await response.text()

    var i, j;
    for (i in replace_dict) {
        j = replace_dict[i]
        if (i == '$upstream') {
            i = upstream_domain
        } else if (i == '$custom_domain') {
            i = host_name
        }

        if (j == '$upstream') {
            j = upstream_domain
        } else if (j == '$custom_domain') {
            j = host_name
        }

        let re = new RegExp(i, 'g')
        text = text.replace(re, j);
    }
    return text;
}

async function device_status (user_agent_info) {
    var agents = ["Android", "iPhone", "SymbianOS", "Windows Phone", "iPad", "iPod"];
    var flag = true;
    for (var v = 0; v < agents.length; v++) {
        if (user_agent_info.indexOf(agents[v]) > 0) {
            flag = false;
            break;
        }
    }
    return flag;
}

然后点击 Save and Delploy 保存修改并部署。

自定义域名

就算你不执行这一步,你的镜像站也成功部署在 WorkerName.xxx.workers.dev (比如我的https://wiki.laic.workers.dev/ )上了。但是这个域名有点长,不方便记忆和分享。

我们绑定一个自己的域名更方便使用。

进入你希望使用的域名管理处,点击「Workers => Add router」。Route 填 https://yyy.domain.com/* ,然后 Worker 选择你刚刚新建的那个配置。

之后在域名 DNS 配置里新建一个 CNAME 记录指向 WorkerName.xxx.workers.dev 。

待配置生效后就可以访问了!

参考

https://blog.ichr.me/post/cloudflare-worker-build-mirror-website/
https://github.com/Siujoeng-Lau/Workers-Proxy

继续阅读
laiczhang
腾讯云轻量香港云服务器内测上线 网站建设

腾讯云轻量香港云服务器内测上线

腾讯也上线了轻量云服务器,有港澳台地区,目前正在内测 1核1G 30M 流量包1T,24元/月, 1核2G 30M 流量包2T,34元/月, 目前内测,有机会白票测试,估计也快公测上线了 中国港澳台地...
计划将博客搬到Netlify 网站建设

计划将博客搬到Netlify

我说的是另外一个博客 Laic Zhang の Blog 搞了 Github 和 Coding 双线部署,Coding page 这个东西总是不稳定啊,那家伙,总是访问失败,有些时候想看看自己博客都打...