Excel から出力した UTF-16LE のタブ区切りテキストを UTF-8 の CSV ファイルにするスクリプト、と、それをさらに JSON にするスクリプトと Makefile

csv_to_json.php

<?php
main($argv[1]);

function main($src) {
    $fh = fopen($src, 'r');
	$rows = array();
	while ($row = fgetcsv($fh, 0)) {
		$rows[] = $row;
	}
	fclose($fh);

	$header = array_shift($rows);
	$assoc = array();
	foreach ($rows as $cols) {
		$arow = array();
		foreach ($cols as $i => $val) {
			if (isset($header[$i])) {
				$key = $header[$i];
				if ($val !== '') {
					$arow[$key] = $val;
				}
			}
		}
		$assoc[] = $arow;
	}

	echo json_encode($assoc);
}

Makefile

SRC_DIR = src
TMP_DIR = utf8
DEST_DIR = json

CSVS = $(wildcard $(addsuffix /*.csv,$(SRC_DIR)))
JSONS = $(subst $(SRC_DIR)/,$(DEST_DIR)/,$(CSVS:.csv=.json))

.PHONY: all
all: $(JSONS)

$(TMP_DIR)/%.csv: $(SRC_DIR)/%.csv
    php tsv_utf16le_to_csv_utf8.php $< > $@

$(DEST_DIR)/%.json: $(TMP_DIR)/%.csv
    php csv_to_json.php $< > $@

tsv_utf16le_to_csv_utf8.php

<?php
main($argv[1]);

function main($src) {
    $doc = file_get_contents($src);
	if (preg_match('/^(?:\xff\xfe|\xfe\xff)/', $doc)) {
		$doc = substr($doc, 2); // BOM を削除
	}
	$doc = mb_convert_encoding($doc, 'UTF-8', 'UTF-16LE');
	
	$rows = explode(PHP_EOL, $doc);
	foreach ($rows as &$row) {
		$row = preg_replace('/[ 　]{10,}/u', "\n", $row);
		$cols = explode("\t", $row);
		$row = implode(",", $cols);
	} unset($row);

	echo implode("\n", $rows);
}

13行目くらいでスペースの連続を改行に直しているのは、セル内で改行する方法が分からなくてスペースをやたらと入れている人がいたため。