import os
import pandas
import chardet
from datetime import datetime

def detect_encoding(file_path):
    with open(file_path, 'rb') as file:
        result = chardet.detect(file.read())
    return result['encoding']

def merge_csv_files(root_folder, output_folder):
    # 出力フォルダが存在しない場合は新規作成
    if not os.path.exists(output_folder):
        os.makedirs(output_folder)
        print(f"'{output_folder}'ディレクトリを新規作成しました。")
    
    all_files = []
    
    # 再帰的にフォルダを探索し、CSVファイルのリストを作成
    for root, dirs, files in os.walk(root_folder):
        for file in files:
            if file.endswith('.csv'):
                all_files.append(os.path.join(root, file))
    
    # CSVファイルを読み込み、データフレームに結合
    dataframes = []
    for file in all_files:
        encoding = detect_encoding(file)
        df = pandas.read_csv(file, encoding=encoding)
        dataframes.append(df)
    
    merged_df = pandas.concat(dataframes, ignore_index=True)
    
    # 現在日時を取得し、ファイル名に追加
    now = datetime.now()
    timestamp = now.strftime("%Y%m%d_%H%M%S")
    output_file = os.path.join(output_folder, f"{timestamp}_merge.csv")
    
    # 結合したデータフレームを新しいCSVファイルにUTF-8エンコーディングで保存
    merged_df.to_csv(output_file, index=False, encoding='utf-8-sig')

# CSV格納ディレクトリ
root_folder = './target_csv_files'
# 結合ファイル保存先ディレクトリ
output_folder = './merged'
merge_csv_files(root_folder, output_folder)