システムから作成したPDFがそのまま使用できず、
対応にお困りの方
- 目次 -
はじめに
求められる処理と対応する方法
① テキストの抽出
② テキストの照合
③ テキストの並び替え
④ テキストの追加
⑤ ファイルの合一化
⑥ バーコードの追加
⑦ PDF の分割
⑧ PDF の結合
外部委託という方法
作業実績(ACHIEVEMENT)
お問い合わせ
システムから作成したPDFが使えない。
そんな話をよく聞きます。
その理由としては、元々の設計が甘かったという場合もありますが、多くは運用ルールが変更された事に起因する様です。勿論、それはシステムを改修すれば解決するのですが、予算や日程という問題があり、簡単に行えるものではありません。
ユーザー目線からは簡単な修正内容であっても、システム内部的にも簡単とは限らず、予想外の費用や日程を要する場合も多いからです。
では、市販アプリケーションでPDFを修正できないか、と考えると、それも難しい。
市販アプリケーションが対応するのは個別の処理であって、「PDFが使えない」理由は全体の問題であるからです。
残る方法としては、自作プログラムで対応するか、外部委託する方法が考えられます。
本ページでは、Pythonプログラミングを通じて、どの様に処理を行うかのヒントを提示して参ります
① テキストの抽出
PDFを加工するにあたり、その為のデータはどこにあるかと言えば、PDF内部になります
勿論、PDFとは別にテキストなりExcelなりでデータが存在すれば、その方が良いのですが、残念ながらそうした場合は非常に少ないです。
従って、PDF内部よりテキスト情報を取得する必要があります。
対応するライブラリはいろいろありますが、ここではPDFMiner.sixを使用します。
1 from pdfminer.high_level import extract_text 2 print(extract_text(’test.pdf ’))
これだけで、指定したPDF ファイルのテキストが全て取得できます。また、PDFMiner.six は、文字の座標も取得できます。
1 from pdfminer.pdfparser import PDFParser 2 from pdfminer.pdfdocument import PDFDocument 3 from pdfminer.pdfpage import PDFPage 4 from pdfminer.pdfpage import PDFTextExtractionNotAllowed 5 from pdfminer.pdfinterp import PDFResourceManager 6 from pdfminer.pdfinterp import PDFPageInterpreter 7 from pdfminer.converter import PDFPageAggregator 8 from pdfminer.layout import LAParams 9 from pdfminer.layout import LTContainer 10 from pdfminer.layout import LTTextLine 11 12 def get_objs(layout, results): 13 if not isinstance(layout, LTContainer): 14 return 15 for obj in layout: 16 if isinstance(obj, LTTextLine): 17 results.append({’位置’: obj.bbox, ‘文字’: obj.get_text()}) 18 get_objs(obj, results) 19 20 def main(path): 21 with open(path, “rb”) as f: 22 parser = PDFParser(f) 23 document = PDFDocument(parser) 24 if not document.is_extractable: 25 raise PDFTextExtractionNotAllowed 26 laparams = LAParams(all_texts=True) 27 rsrcmgr = PDFResourceManager() 28 device = PDFPageAggregator(rsrcmgr, laparams=laparams) 29 interpreter = PDFPageInterpreter(rsrcmgr, device) 30 for page in PDFPage.create_pages(document): 31 interpreter.process_page(page) 32 layout = device.get_result() 33 results = [] 34 print(’位置情報とテキスト-------------------------------------’) 35 get_objs(layout, results) 36 for r in results: 37 print(r) 38 39 main(’test.pdf ’)
【実行結果】
1 位置情報とテキスト------------------------------------- 2 {’位置’: (162.575, 793.32915, 466.2150000003, 806.2815), ‘文字’: 3 ‘文字読み取りテスト\n’} 4 {’位置’: (423.0264, 772.3949, 456.6264, 786.3949), ‘文字’: ‘test\n’} 5 ###以下略###
この結果を応用すれば、PDFの指定位置にあるテキストをページ毎に取得するなどの事が実現でき、様々な編集を行う条件として活用が可能になります。
②テキストの照合
①の作業で、テキストの抽出が行えました。1つのファイル内で処理が完結するなら、そのデータを加工していけば良いのですが、複数ファイルに跨がった処理の場合は、各ファイルのテキストの照合を行う必要がでてきます。
1 #2つのファイルから、ページ番号とテキストを取得して配列へ格納 2 pdf1 = [ 3 [1, ”0000105”], 4 [2, ”0001092”], 5 [3, ”0000647”], 6 [4, ”1000663”] 7 ] 8 pdf2 = [ 9 [1, ”0000646”], 10 [2, ”0000105”], 11 [3, ”9901308”], 12 [4, ”0001092”] 13 ] 14 15 #2つのファイルを比較し、テキストが一致するページを取得 16 print(”2つのファイルの比較結果--------------------” 17 for i in range(len(pdf1)): 18 for j in range(len(pdf2)): 19 if pdf1[i][1] == pdf2[j][1]: 20 txt1 = “pdf1: ” + str(pdf1[i][0]) + “p” 21 txt2 = “pdf2: ” + str(pdf2[j][0]) + “p” 22 print(”・” + txt1 + “と” + txt2 + “の内容一致”
【実行結果】
1 2つのファイルの比較結果-------------------- 2 ・pdf1: 1pとpdf2: 2pの内容一致 3 ・pdf1: 2pとpdf2: 4pの内容一致
という流れで、照合できます。
照合が完了すれば、そのデータを抜き出すなり並び順を一致させるなり、といった加工を実施できる様になります。
③テキストの並び替え
PDFファイルの並び替えは、比較的需要の多い加工処理です。処理としては、PDFからテキストを抽出し、そのテキストを並び替え、その並び順に沿ってPDFを並び替えるという処理になります。
ここでは、その中のテキストの並び替え処理を見てみましょう。
1 # ①の処理で取得したテキスト例(ページ番号と郵便番号) 2 list = [ [1, “105-0002”], [2, “110-0012”], [3, “100-0001”] ] 3 4 # 郵便番号でソート 5 sortResult = sorted(list, reverse=False, key=lambda x:x[1]) 6 7 # 結果の出力 8 for r in sortResult: 9 print(r)
【実行結果】
1 [3, “100-0001”] 2 [1, “105-0002”] 3 [2, “110-0012”]
という流れで、簡単に並び替えを実行できます。
ただし、単純な昇順、降順でない場合は、一工夫する必要があります。
④テキストの追加
PDFファイルにテキストを書き込む事もできます。これもいろいなライブラリがありますが、ここではpyMuPDFを使用します。
1 import fitz 2 3 targetF = “test1.pdf ” 4 resultF = “test2.pdf ” 5 addText = “addText” 6 writer = fitz.open(targetF) 7 page = writer.load_page(0) 8 9 #文字を追加する位置をポイントで指定 10 pos = fitz.Point(3.52778, 3.52778) 11 rc = page.insert_text(page, addText, fontname=“helv”, fontsize=12) 12 writer.save(resultF)
という流れで、テキストの追加が実行できます。
①で読み込んだテキストと併用し、内容に応じて追加するテキストを変更するなどの事も可能です。
⑤ファイルの合成
Acrobatの背景を追加する機能の様に2つのPDFファイルを合成する事を求められる事があります。
合成するファイルが1種類であれば、それこそAcrobatの背景追加処理を実行すれば良いのですが、合成すべきファイルが複数種類あると、それを判断して差し替えを行う必要があります。
PDFの合成処理は、pypdfを使用します
1 from pypdf import PdfWriter, PdfReader 2 with open(“test1.pdf ”, “rb”) as f1: 3 with open(“test2.pdf ”, “rb”) as f2: 4 with open(“test3.pdf ”, “wb”) as f3: 5 mergePage = PdfReader(f1).pages[0] 6 mergePage.merge_page(PdfReader(f2).pages[0]) 7 outFile = PdfWriter() 8 outFile.add_page(margePage) 9 outFile.write(f3)
という流れで、1ページのPDFの合成が実行できます。
複数ページの結合は、ページを取得する処理をループ化する事で実現可能です。
また、合成ファイルの差し替えは、①で読み込んだテキストを判定したif処理などで実行します。
⑥バーコードの追加
PDFファイルにテキストではなく、バーコードを追加する場合もあります。
追加するバーコードをQRコードとした場合、pyqrcodeとpyMuPDFを使用して下記の様に実行します。
1 import io 2 import qrcode 3 import .tz 4 5 #QRコードの生成 6 qr = qrcode.QRCode( 7 version=3, 8 error_correction=qrcode.constants.ERROR_CORRECT_L, 9 box_size=4, 10 border=4 11 ) 12 qr.add_data(”https://www.dataline.co.jp/”) 13 qr.make() 14 img = qr.make_image(.ll_color=”black”, back_color=”#FFFFFF”) 15 img_bytes = io.BytesIO() 16 img.save(img_bytes) 17 img_bytes = img_bytes.getvalue() 18 19 #PDFへバーコードの追加 20 with fitz.open(”test1.pdf ”) as base: 21 page = base.load_page(0) 22 pos = fitz.Rect(10, 10, 60, 60) 23 page.insert_image(pos, stream=img_bytes) 24 base.save(”insertBarcode.pdf ”)
という流れで、バーコードの追加が実行できます。
このサンプルでは固定テキストをバーコード化していますが、①で読み取りしたテキストを使用するなど、様々な応用をする事が考えられます。
⑦PDFの分割
1つのPDFファイルを複数ファイルに分割する場合があります。そうした場合は、例えばpypdfを使用して分割を行う事ができます。
1 from pypdf import PdfWriter, PdfReader 2 baseFile = PdfReader(”page.pdf ”) 3 for pageNum in range(len(baseFile.pages)): 4 page = baseFile.pages[pageNum] 5 writer = PdfWriter() 6 fName = f ”page_{pageNum + 1}.pdf ” 7 with open(fName, “wb”) as outputF: 8 writer.write(outputF)
上記サンプルでは1ページずつに分割していますが、PDFから取得したテキストと組み合わせ、同一テキストの場合は同じファイルとして分割するなどの工夫をする事も可能です。
⑧PDFの結合
⑦とは逆に、複数のPDFファイルを1ファイルに結合する場合があります。この場合も、pypdfで処理することができます。
ファイル単位の単純な結合なら次の様な処理になります。
1 import pypdf 2 with pypdf.PdfMerger() as mergeF: 3 mergeF.append(”test1.pdf ”) 4 mergeF.append(”test2.pdf ”) 5 mergeF.write(”mergeResult.pdf ”)
もう少し複雑で、複数ファイルを指定のページ順番で結合する場合は、次の様な方法で実行する事ができます
1 from pypdf import PdfReader, PdfWriter 2 #結合順番の指定例(ファイル名、ページ番号) 3 list = [ 4 [”test1.pdf ”, 3], 5 [”test2.pdf ”, 1], 6 [”test1.pdf ”, 2], 7 [”test1.pdf ”, 1], 8 [”test2.pdf ”, 2], 9 [”test2.pdf ”, 3], 10 ] 11 writer = PdfWriter() 12 for i in range(len(list)): 13 writer.add_page(PdfReader(list[i][0]).pages[list[i][1] - 1]) 14 with open(”mergeResult.pdf ”, “wb”) as mergeF: 15 writer.write(mergeF)
ここまで、pythonでPDFを加工する方法を説明してきました。
いろいろなライブラリがあるので、それ程難しくはないのですが、データ内容や求められる加工内容によって様々な手順をとらなくてはならず、簡単とまでは言えないと思っています。
日々の業務にプラスしてそうした作業を行うのは非常に大変である事を思えば、外部委託するという選択肢も検討の余地があるでしょう。
当社では、PDF加工の様々な実績を持っております。まずは一度お問い合わせ頂ければ幸いです。
後作業に合わせて並べ替え
とある役所の納税通知書での事例です。
1人あたり1~17枚の不規則な枚数を発行し、納税通知書は1人分を封筒に入れて投函する案件で、システムからは住民番号順でPDFが作成されました。 データにはタイミングマークもなく、目視で人の区切りを見分けるほか無く、ミスを誘発する様な危険な状態でした。
当社は、お客様より相談を受け、発行枚数毎に纏まる様に並び順を変更し、結果、ミス無く封入作業が完了しました。
2種類のPDFを照合
とある役所の検診通知での事例です。
特定検診用の受診券とがん検診受診券の発行を行う案件で、従来はそれぞれ投函していましたが、両方共の受診券を発行される方が多く、同封して投函する事でコストの削減を検討されていました。
当社では2種類のデータを照合し、両方に存在する方と片方にしか存在しない方を分割、また、両方に存在する方は同じ並び順に変える事で、役所の要望を満たすPDFファイルに変換する事に成功しました。
バーコードの追加
とあるお客様ですが、システムから作成したPDFを出力して投函されていました。多くの数量を投函されているのに、作成されたPDFにはカスタマーバーコードが付加されておらず、投函時の割引を受けていらっしゃいませんでした。
当社よりお客様にカスタマーバーコードの付加処理をご提案し、その結果、お客様は当社作業費を差し引いても十分なコスト削減する事ができました。
A4請求書を圧着はがきへ
とあるお客様より、システムから作成されるA4請求書を圧着はがきに変更したい旨のご相談を頂きました。
お話を伺うと、1社あたり1~8枚あたりの請求書を発行しており、従来は封書で投函していたが、経費削減の為、データをそのまま利用してはがきで投函したいとの事。幸い、文字サイズは十分大きかったので、A4請求書をはがきサイズに縮小しても文字の可読性に問題はありませんでした。
当社では、面付けの仕組みを応用し、無事データの変換に成功し、お客様のご要望通りのデータを生成いたしました。
擬似的な帳票の複写処理
とあるお客様が特殊な事情により、1つの請求書データから、手書きの複写伝票の様に納品書他のデータを生成して出力しなくてはいけない事態に陥りました。
当社では、出力情報を一部隠したり、文字を差し替えたりしたデータを別途生成の上、それを丁合処理したデータを生成する作業を実施いたしました。
お問い合わせフォーム