【Django × LSTM】文章校正(誤字検知)API を実装する完全ガイド｜ディープラーニング言語モデル + Web 化

import urllib.request

import urllib.parse

import json

import requests



API = "https://api.a3rt.recruit-tech.co.jp/proofreading/v2/typo"

KEY ="<APIキーを指定>"



quoted_text ="私の得意分野は画像処利と自然言語処理です。"





values = {

'apikey': KEY,

'sentence':quoted_text,

'sensitivity':"medium",

}

# パラメータをURLエンコードする

params = urllib.parse.urlencode(values)

# リクエスト用のURLを生成

url = API + "?" + params



#リクエストを投げて結果を取得

r = requests.get(url)

#辞書型に変換

data = json.loads(r.text)

>>> data

{'resultID': '5818bde37bf5', 'status': 1, 'message': 'pointed out', 'inputSentence': 

'私の得意分野は画像処利と自然言語処理です。', 'normalizedSentence': '私の得意分野は画像処利と

自然言語処理です。', 'checkedSentence': '私の得意分野は画像処 <<利>> と自然言語処理です。', 

'alerts': [{'pos': 10, 'word': '利', 'score': 0.8740427199300843, 'suggestions':

 ['理', '分', '方']}]}

>>>

>>> data['alerts']

[{'pos': 10, 'word': '利', 'score': 0.8740427199300843, 'suggestions': ['理', '分', '方']}]

pip install django

pip install django-bootstrap4

pip install django-widgets-improved

pip install requests

INSTALLED_APPS = [

    'django.contrib.admin',

    'django.contrib.auth',

    'django.contrib.contenttypes',

    'django.contrib.sessions',

    'django.contrib.messages',

    'django.contrib.staticfiles',

    'bootstrap4',      #追加

    'widget_tweaks',   #追加

    'app',             #追加

]

TEMPLATES = [

    {

        'BACKEND': 'django.template.backends.django.DjangoTemplates',

        'DIRS': [os.path.join(BASE_DIR,'templates')],  #変更

        'APP_DIRS': True,

        'OPTIONS': {

            'context_processors': [

                'django.template.context_processors.debug',

                'django.template.context_processors.request',

                'django.contrib.auth.context_processors.auth',

                'django.contrib.messages.context_processors.messages',

            ],

        },

    },

]

LANGUAGE_CODE = 'ja'

TIME_ZONE = 'Asia/Tokyo'

from django.contrib import admin

from django.urls import path,include



urlpatterns = [

    path('admin/', admin.site.urls),

    path('app/', include('app.urls')),   #追加

]

from django.urls import path

from . import views



urlpatterns = [

    path('demo/',views.demo,name='demo'),

]

from django import forms



CHOICES = (('low', '低',), ('medium', '中',), ('high', '高',))





class UserForm(forms.Form):

     textone = forms.CharField(label='入力文章',max_length=500,

     min_length=1,widget=forms.Textarea(attrs=

     {'id': 'textone','placeholder':'ここにチェックしたい文章を入力してください\n(500文字まで）'}))

     sensitivity = forms.ChoiceField(label='チェックの厳密さ', widget=forms.Select, choices=CHOICES

     )

import requests

import json

import re



class Api:

    def __init__(self):

        self.key = '<APIキーをここに指定する>'

        self.api = 'https://api.a3rt.recruit-tech.co.jp/proofreading/v2/typo'



    def get(self,inputtext,sensitivity):

        url = self.api

        quoted_text = inputtext

        r = requests.post(url,{'apikey':self.key,'sentence':quoted_text,'sensitivity':sensitivity})

        data = json.loads(r.text)

        rets = []

        suggestions = []

        if data['status'] == 1:

            rets = '<font color="red">疑わしい部分と判定された箇所あります。</br>ハイライトされた箇所を確認してください。</font></br><hr>'

            text = data['checkedSentence']

            rets = rets + self.__trans_word(text)

            #指摘単語に対するSuggestionを取得    

            for i in range(len(data['alerts'])):

                suggestions.append([data['alerts'][i]['word'], data['alerts'][i]['suggestions']])



        elif data['status'] == 0:

            rets = "この文章に誤字脱字はありません。</br>指摘すべき修正を見つけられませんでした。"

        else:

            rets = "エラーがありました。</br>応答コードは" + data['status'] + "です。"

        return rets, suggestions



    def __trans_word(self,inputtext):

        replacements = {'<<':'<span class="mark font-weight-bold text-danger" style="background-color:yellow">','>>':'</span>'}

        return re.sub('({})'.format('|'.join(map(re.escape, replacements.keys()))), lambda m: replacements[m.group()], inputtext)

from django.http.response import HttpResponse

from django.shortcuts import render, render_to_response

from . import forms

from django.template.context_processors import csrf

from . import utils





message = '''■誤字脱字の定義<br>

        <b>Proofreading APIで指摘されるもの。</b><br>

        漢字変換間違い：読みは正しいが漢字が違う。<br>

        助詞間違い：助詞の用法が違う、または、不要な助詞が入っている。<br>

        文法間違い： 漢字・助詞間違いに該当しないもの。脱字。助詞以外の不自然な文字が挿入されているもの。<br>

        その他、１〜数文字が間違っている文章。<br>

        <b>Proofreading APIで指摘されないもの。</b><br>

        ◆敬語の使い方間違い。<br>

        ◆体言どめを止めたほうがいいケース。<br>

        ◆ひらがなより漢字のほうが適切なケース。<br>

        ◆句点を追加した方がいいケース。<br>

        ◆意味は通じるがより美しい日本語が有るようなケース。<br>

        ◆そもそも文が日本語として破綻しており、誤字脱字のレベルでないもの。'''



def demo(request):

    api = utils.Api()

    if request.method == 'POST':

        # テキストボックスに入力されたメッセージ

        textone = request.POST["textone"]

        sensitivity = request.POST["sensitivity"]

        # APIリクエストを投げてからの応答を取得

        rets,suggestions = api.get(textone,sensitivity)

        form = forms.UserForm(initial={'textone' : textone})

        

        c = {

             'form': form,

             'textone':textone,

             'message':message,

             'rets':rets,

             'suggestions':suggestions

        }

    else:

        # 初期表示の時にセッションもクリアする

        request.session.clear()

        # フォームの初期化

        form = forms.UserForm(label_suffix='：')



        c = {'form': form,

             'message':message

        }

    c.update(csrf(request))

    return render(request,'app/demo.html',c)

api = utils.Api()

textone = request.POST["textone"]

sensitivity = request.POST["sensitivity"]

<!doctype html>

<html lang="jp">

  <head>

    <!-- Required meta tags -->

    <meta charset="utf-8">

    <meta name="viewport" content="width=device-width, initial-scale=1, shrink-to-fit=no">

    <!-- Bootstrap CSS -->

    <link rel="stylesheet" href="https://stackpath.bootstrapcdn.com/bootstrap/4.2.1/css/bootstrap.min.css" integrity="sha384-GJzZqFGwb1QTTN6wy59ffF1BuGJpLSa9DkKMp0DgiMDm4iYMj70gZWKYbI706tWS" crossorigin="anonymous">

    <script src="https://code.jquery.com/jquery-3.3.1.slim.min.js" integrity="sha384-q8i/X+965DzO0rT7abK41JStQIAqVgRVzpbzo5smXKp4YfRvH+8abtTE1Pi6jizo" crossorigin="anonymous"></script>



	{% block header %}

	{% endblock %}

    <title>{% block title %}デモ用テンプレート{% endblock %}</title>

  </head>

  <body>

	{% block content %}

	{% endblock %}

    <!-- Optional JavaScript -->

    <!-- jQuery first, then Popper.js, then Bootstrap JS -->

    <script src="https://cdnjs.cloudflare.com/ajax/libs/popper.js/1.14.6/umd/popper.min.js" integrity="sha384-wHAiFfRlMFy6i5SRaxvfOCifBUQy1xHdJ/yoi7FRNXMRBu5WHdZYu1hA6ZOblgut" crossorigin="anonymous"></script>

    <script src="https://stackpath.bootstrapcdn.com/bootstrap/4.2.1/js/bootstrap.min.js" integrity="sha384-B0UglyR+jN6CkvvICOB2joaf5I4l3gm9GU6Hc1og6Ls7i6U/mkkaduKaBhlAXv9k" crossorigin="anonymous"></script>

  </body>

</html>

{% extends '../base.html' %}

{% load bootstrap4 %}

{% load widget_tweaks %}



{% block title %}

  文章チェック機能

{% endblock %}



{% block content %}

<div class="container">



    <form action="" method="post">{% csrf_token %}

        <h1>文章チェック機能</h1>

        <div class="form-group row my-4">         

            <label class="col-lg-2 col-form-label"><h4>{{form.textone.label}}</h4></label><br>

    		<div class="col-lg-6">       

                {{form.textone|add_class:"form-control"}}



    		</div>

            <div class="col-lg-2">

                    {{form.sensitivity.label}}       

                    {{form.sensitivity|add_class:"form-control"}}

         </div> 

         <div class="col-lg-2">       

                <a href = "http://localhost:8000/app/demo/">入力文クリア</a>

               </div>

        </div>

        <div class="col-lg-2">       

                <button type="submit" class="btn btn-primary">実行</button>

            </div>

     </form>

     <hr>

     <div id="resultarea">





<div class="card border-dark mb-3 text-success">



<div class="card-body">

{{ message|safe }}

</div></div>

{% if rets %}

<h4>解析結果</h4><br>  

<div class="card mb-3">

 <div class="card-header">

 <div class="card-text">

                      

{{ rets|safe }}



<hr>

<b>＜指摘文字に対する改善候補＞</b><br>

{% for item in suggestions %}

<div class="card-text bg-primary text-white">

{{item.0}} ＞＞{{item.1}}<br>

{% endfor %}

</div>

</div>

</div>

</div> 

{% endif %}



</div>

 </div>  

{% endblock %}

{% extends '../base.html' %}

{% load bootstrap4 %}

{% load widget_tweaks %}

{{form.textone.label}}

 {{form.textone|add_class:"form-control"}}

{{ message|safe }}

{% for item in suggestions %}

<div class="card-text bg-primary text-white">

{{item.0}} ＞＞{{item.1}}<br>

{% endfor %}