mycpen

Mycpen

记录学习历程与受益知识
github
telegram
bilibili

01_PHP-CentOS8.2 編譯安裝 PHP8.1.10

一。前言#

https://www.jsdelivr.com/ 失效,博主打算將 GitHub 托管的圖床備份到其他平台。

網上看到 蘭空圖床 萌生了自建圖床的念頭,搭建環境要求 PHP >= 8.0.2,於是打算編譯安裝 PHP。

最終因伺服器配置太低(1 核 2G)編譯失敗而放棄。轉而投身之前已經搭建好環境的又拍雲平台。

博文內容:PHP-CentOS8.2 編譯安裝 PHP8.1.10 + 編寫GitHub圖床遷移至又拍雲的腳本(ftp) + 編寫批量修改文章內容的腳本

二。正文#

2.1❤ CentOS8.2 編譯安裝 PHP8.1.10#

2.1.1 PHP8 和 oniguruma 源碼下載並上傳至伺服器 /mnt 目錄

https://www.php.net/distributions/php-8.1.10.tar.gz

https://codeload.github.com/kkos/oniguruma/tar.gz/refs/tags/v6.9.4

# 解壓
tar xzf oniguruma-6.9.4.tar.gz
tar xzf php-8.1.10.tar.gz

2.1.2 安裝 PHP8 依賴包

# 2 安裝 PHP8 依賴包
yum -y install autoconf freetype gd libpng libpng-devel libjpeg libxml2 libxml2-devel zlib curl curl-devel net-snmp-devel libjpeg-devel php-ldap openldap-devel openldap-clients freetype-devel gmp-devel libzip libzip-devel sqlite-devel automake libtool

2.1.3 編譯 PHP8 依賴包 oniguruma

# 3.1 生成 configure
cd /mnt/oniguruma-6.9.4
./autogen.sh

# 3.2 生成編譯配置文件
./configure --prefix=/usr

# 3.3 編譯並安裝
make && make install

2.1.4 編譯 PHP8 主包

# 4.1 生成編譯配置文件
cd /mnt/php-8.1.10
./configure --prefix=/usr/local/php --with-config-file-path=/usr/local/php/etc --enable-fpm --with-fpm-user=nginx --with-fpm-group=nginx --enable-mysqlnd --with-mysqli --with-pdo-mysql --enable-opcache --with-pcre-jit --enable-gd --with-jpeg --with-freetype --with-gettext --with-curl --with-openssl --enable-sockets --enable-mbstring --enable-xml --with-zip --with-zlib --with-snmp --with-mhash --enable-ftp --enable-bcmath --enable-soap --enable-shmop --enable-sysvsem --enable-pcntl --with-gmp

# 4.2 編譯並安裝
make && make install

因為配置過低,編譯失敗。

2.1.5 編譯安裝後目錄

/usr/local/php

參考

https://www.bilibili.com/read/cv9248283/

2.2 基於 FTP 將 GitHub 圖床遷移至又拍雲#

參考

官方視頻教程 - 創建存儲服務和使用 FTP 上傳 可以得到用戶名和密碼

默認已經完成了又拍雲雲存儲服務的申請 + 綁定自定義域名 https://help.upyun.com/knowledge-base/quick_start/

2.2.1 編寫 Python 腳本 實現批量

源碼來自 http://blog.csdn.net/ouyang_peng/article/details/79271113

#!/usr/bin/python
# -*- coding: UTF-8 -*-


from cmath import log
from ftplib import FTP
import os
import sys
import time
import socket
import subprocess

class MyFTP:
    """
        ftp自動下載、自動上傳腳本,可以遞歸目錄操作
        作者:歐陽鵬
        博客地址:http://blog.csdn.net/ouyang_peng/article/details/79271113
    """

    def __init__(self, host, port=21):
        """ 初始化 FTP 客戶端
        參數:
                 host:ip地址

                 port:端口號
        """
        # print("__init__()---> host = %s ,port = %s" % (host, port))

        self.host = host
        self.port = port
        self.ftp = FTP()
        # 重新設置下編碼方式
        #self.ftp.encoding = 'gbk'
        self.ftp.encoding = 'utf8'
        # 獲取腳本路徑
        path = os.path.dirname(os.path.realpath(__file__))
        self.log_file = open(path + "/log.txt", "a", encoding='utf-8')
        self.file_list = []

    def login(self, username, password):
        """ 初始化 FTP 客戶端
            參數:
                  username: 用戶名

                 password: 密碼
            """
        try:
            timeout = 60
            socket.setdefaulttimeout(timeout)
            # 0主動模式 1 #被動模式
            self.ftp.set_pasv(True)
            # 打開調試級別2,顯示詳細信息
            # self.ftp.set_debuglevel(2)

            self.debug_print('開始嘗試連接到 %s' % self.host)
            self.ftp.connect(self.host, self.port)
            self.debug_print('成功連接到 %s' % self.host)

            self.debug_print('開始嘗試登錄到 %s' % self.host)
            self.ftp.login(username, password)
            self.debug_print('成功登錄到 %s' % self.host)

            self.debug_print(self.ftp.welcome)
        except Exception as err:
            self.deal_error("FTP 連接或登錄失敗 ,錯誤描述為:%s" % err)
            pass

    def is_same_size(self, local_file, remote_file):
        """判斷遠程文件和本地文件大小是否一致

           參數:
             local_file: 本地文件

             remote_file: 遠程文件
        """
        try:
            remote_file_size = self.ftp.size(remote_file)
        except Exception as err:
            # self.debug_print("is_same_size() 錯誤描述為:%s" % err)
            remote_file_size = -1

        try:
            local_file_size = os.path.getsize(local_file)
        except Exception as err:
            # self.debug_print("is_same_size() 錯誤描述為:%s" % err)
            local_file_size = -1

        self.debug_print('local_file_size:%d  , remote_file_size:%d' % (local_file_size, remote_file_size))
        if remote_file_size == local_file_size:
            return 1
        else:
            return 0

    def download_file(self, local_file, remote_file):
        """從ftp下載文件
            參數:
                local_file: 本地文件

                remote_file: 遠程文件
        """
        self.debug_print("download_file()---> local_path = %s ,remote_path = %s" % (local_file, remote_file))

        if self.is_same_size(local_file, remote_file):
            self.debug_print('%s 文件大小相同,無需下載' % local_file)
            return
        else:
            try:
                self.debug_print('>>>>>>>>>>>>下載文件 %s ... ...' % local_file)
                buf_size = 1024
                file_handler = open(local_file, 'wb')
                self.ftp.retrbinary('RETR %s' % remote_file, file_handler.write, buf_size)
                file_handler.close()
            except Exception as err:
                self.debug_print('下載文件出錯,出現異常:%s ' % err)
                return

    def download_file_tree(self, local_path, remote_path):
        """從遠程目錄下載多個文件到本地目錄
                       參數:
                         local_path: 本地路徑

                         remote_path: 遠程路徑
                """
        print("download_file_tree()--->  local_path = %s ,remote_path = %s" % (local_path, remote_path))
        try:
            self.ftp.cwd(remote_path)
        except Exception as err:
            self.debug_print('遠程目錄%s不存在,繼續...' % remote_path + " ,具體錯誤描述為:%s" % err)
            return

        if not os.path.isdir(local_path):
            self.debug_print('本地目錄%s不存在,先創建本地目錄' % local_path)
            os.makedirs(local_path)

        self.debug_print('切換至目錄: %s' % self.ftp.pwd())

        self.file_list = []
        # 方法回調
        self.ftp.dir(self.get_file_list)

        remote_names = self.file_list
        self.debug_print('遠程目錄 列表: %s' % remote_names)
        for item in remote_names:
            file_type = item[0]
            file_name = item[1]
            local = os.path.join(local_path, file_name)
            if file_type == 'd':
                print("download_file_tree()---> 下載目錄: %s" % file_name)
                self.download_file_tree(local, file_name)
            elif file_type == '-':
                print("download_file()---> 下載文件: %s" % file_name)
                self.download_file(local, file_name)
        self.ftp.cwd("..")
        self.debug_print('返回上層目錄 %s' % self.ftp.pwd())
        return True

    def upload_file(self, local_file, remote_file):
        """從本地上傳文件到ftp

           參數:
             local_path: 本地文件

             remote_path: 遠程文件
        """
        if not os.path.isfile(local_file):
            self.debug_print('%s 不存在' % local_file)
            return

        if self.is_same_size(local_file, remote_file):
            self.debug_print('跳過相等的文件: %s' % local_file)
            return

        buf_size = 1024
        file_handler = open(local_file, 'rb')
        self.ftp.storbinary('STOR %s' % remote_file, file_handler, buf_size)
        file_handler.close()
        self.debug_print('上傳: %s' % local_file + "成功!")

    def upload_file_tree(self, local_path, remote_path):
        """從本地上傳目錄下多個文件到ftp
           參數:

             local_path: 本地路徑

             remote_path: 遠程路徑
        """
        if not os.path.isdir(local_path):
            self.debug_print('本地目錄 %s 不存在' % local_path)
            return

        self.ftp.cwd(remote_path)
        self.debug_print('切換至遠程目錄: %s' % self.ftp.pwd())

        local_name_list = os.listdir(local_path)
        for local_name in local_name_list:
            src = os.path.join(local_path, local_name)
            if os.path.isdir(src):
                try:
                    self.ftp.mkd(local_name)
                except Exception as err:
                    self.debug_print("目錄已存在 %s ,具體錯誤描述為:%s" % (local_name, err))
                self.debug_print("upload_file_tree()---> 上傳目錄: %s" % local_name)
                self.upload_file_tree(src, local_name)
            else:
                self.debug_print("upload_file_tree()---> 上傳文件: %s" % local_name)
                self.upload_file(src, local_name)
        self.ftp.cwd("..")

    def close(self):
        """ 退出ftp
        """
        self.debug_print("close()---> FTP退出")
        self.ftp.quit()
        self.log_file.close()

    def debug_print(self, s):
        """ 打印日誌
        """
        self.write_log(s)

    def deal_error(self, e):
        """ 處理錯誤異常
            參數:
                e:異常
        """
        log_str = '發生錯誤: %s' % e
        self.write_log(log_str)
        sys.exit()

    def write_log(self, log_str):
        """ 記錄日誌
            參數:
                log_str:日誌
        """
        time_now = time.localtime()
        date_now = time.strftime('%Y-%m-%d', time_now)
        format_log_str = "%s ---> %s \n " % (date_now, log_str)
        print(format_log_str)
        self.log_file.write(format_log_str)

    def get_file_list(self, line):
        """ 獲取文件列表
            參數:
                line:
        """
        file_arr = self.get_file_name(line)
        # 去除  . 和  ..
        if file_arr[1] not in ['.', '..']:
            self.file_list.append(file_arr)

    def get_file_name(self, line):
        """ 獲取文件名
            參數:
                line:
        """
        pos = line.rfind(':')
        while (line[pos] != ' '):
            pos += 1
        while (line[pos] == ' '):
            pos += 1
        file_arr = [line[0], line[pos:]]
        return file_arr


if __name__ == "__main__":
    # 清除日誌
    path = os.path.dirname(os.path.realpath(__file__))      # 腳本路徑
    if os.path.exists(path + '/log.txt'):
        log_file = path + '/log.txt 'if os.sep == "/" else path + '\\' + 'log.txt'
        subprocess.Popen(f'rm -rf {log_file}', shell=True)
        time.sleep(1)

    my_ftp = MyFTP("xxx.ftp.upyun.com")
    my_ftp.login("xxx/xxx", "xxx")


    # 下載單個文件
    # my_ftp.download_file("E:/code_zone/image_bed/image/wallpaper/1.jpg", "/image/wallpaper/1.jpg")

    # 上傳單個文件
    # my_ftp.upload_file("G:/ftp_test/Release/XTCLauncher.apk", "/App/AutoUpload/ouyangpeng/I12/Release/XTCLauncher.apk")

    # 下載目錄
    # image.cpen.top/image/ → 本地 E:/code_zone/image_bed/image/    (本地圖床目錄, 又拍雲路徑)
    if os.sep == "\\":
        my_ftp.download_file_tree("E:/code_zone/image_bed/image/", "/image/")
    elif os.sep == "/":     # aliyun
        my_ftp.download_file_tree("/root/code_zone/image_bed/image/", "/image/")

    # 上傳目錄
    # 本地 E:/code_zone/image_bed/image/ → image.cpen.top/image/    (本地圖床目錄, 又拍雲路徑)
    if os.sep == "\\":      # Windows
        my_ftp.upload_file_tree("E:/code_zone/image_bed/image/", "/image/")    
        my_ftp.close()
    elif os.sep == "/":     # aliyun
        my_ftp.upload_file_tree("/root/code_zone/image_bed/image/", "/image/")  
        my_ftp.close()


# 命令
# python E:/code_zone/tools/python-ftp/ftp.py
# python3 /root/code_zone/tools/python-ftp/ftp.py

2.2.2 說明

my_ftp.login("用戶名xxx/xxx", "密碼xxx") 參考 https://techs.upyun.com/videos/cdnpage/creating_storage.html

後期又將腳本傳到雲伺服器上,通過計劃任務,每 15 分鐘同步,保持 GitHub 與又拍雲圖床一致

# root @ CentOS in ~ [18:05:59]
$ crontab -l
*/15 * * * *  cd /root/code_zone/image_bed/; git pull; python3 /root/code_zone/tools/python-ftp/ftp.py; bash git.sh

遷移好圖床後,博客中調用圖片資源時 瀏覽器自動 http 跳 https,因為沒有證書導致圖片失效,於是又申請了 ssl 證書,上傳至又拍雲。

image-20220910180219146

2.3 編寫批量修改文章內容的腳本#

源碼參考 https://blog.csdn.net/qq_38150250/article/details/118026219

#!/usr/bin/python
# -*- coding: UTF-8 -*-

# 源碼參考  https://blog.csdn.net/qq_38150250/article/details/118026219

import os
import re

# 文件查找 find . -name file_name -type f
# 查找函數:search_path 查找根路徑 

# 獲取文章路徑
def search(search_path, search_result):
    # 獲取當前路徑下地所有文件
    all_file = os.listdir(search_path)
    # 對於每一個文件
    for each_file in all_file:
        # 若文件為一個文件夾
        if os.path.isdir(search_path + each_file):
            # 遞歸查找
            search(search_path + each_file + '/', search_result)
        # 如果是需要被查找的文件
        else:
            if re.findall('.*\.md$', each_file) == [each_file]:
            # 輸出路徑
                search_result.append(search_path + each_file)


# 替換 sed -i 's/old_str/new_str/'
# 文本替換 replace_file_name 需要替換的文件路徑,replace_old_str 要替換的字符,replace_new_str 替換的字符
def replace(replace_file_name, replace_old_str, replace_new_str):
    with open(replace_file_name, "r", encoding = "UTF-8") as f1: 
        content = f1.read()
        f1.close()
        t = content.replace(replace_old_str, replace_new_str)
    with open(replace_file_name, "w", encoding = "UTF-8") as f2:
        f2.write(t)
    f2.close()


# 需要改的地方
#path = 'E:/code_zone/.history/20220831_blog/source/_posts/'
path_list = [
    'E:/code_zone/hexo-source/source/_posts/',
    'E:/code_zone/hexo-source-butterfly/source/_posts/',
    'E:/code_zone/hexo-source-diary/source/_posts/',
]
old_str = 'https://image.cpen.top/image/'
new_str = 'https://image.cpen.top/image/'
search_result = []

if __name__ == '__main__':
    result = []                 # 存放文件路徑
    # 默認當前目錄
    # path = os.getcwd()
    for path in path_list:
        search(path, result)    # 獲取文章路徑
    count = 0
    for file_name in result:
        replace(file_name, old_str, new_str)
        count += 1
        print("{} done  {}".format(file_name, count))

# 命令
# python E:/code_zone/tools/python-replace/replace.py

2.3.1 說明

search 函數指定文件類型為 .md,可獲得文章的完整路徑;

path_list 列表存放需要修改的文章父目錄路徑,可以遞歸查詢子目錄;

old_str 需要替換的內容

new_str 新內容

載入中......
此文章數據所有權由區塊鏈加密技術和智能合約保障僅歸創作者所有。