１．はじめに 開放特許DBのバルクデータがダウンロードできる ようになっていたので、どんなものがあるのか見てみました。 結構いろんな分野にまんべんなく出てるのですね。 ２．処理の流れ ・csvデータをよみこみ。加工。 import pandas as pd df =...

１．はじめに LLM＋APIで特許調査をしてもらうシリーズのプログラム編です。前回は概念で説明しただけだったので、プログラムに落とし込みます。。 が、さっそく躓いて２日間ほど苦しんだので、供養のつもりで書きます。 ２．習字するもエラーが発生...

１．はじめに google vertex aiのtextembedding-gecko-multilingualを使って、各国特許の要約のベクトル表現を作成して検索しました。 ２．ベクトルデータベース作りと検索 検索をする際にキーワードではなく、文章からベクトルデータを使っ...

１．はじめに EDINET API ver.2が公開されました！ 今までのxbrlとの格闘がなくなればいいなと思います。 ２．経緯 現状、（上場）企業の財務情報や「研究開発活動」の部分のテキストを取ろうとすると、xbrlというファイル形式と格闘しないといけません。（buff...

１．はじめに 昔GuidedLDAというのを使って特許文章を分類しようとして、うまくライブラリが動かずに終わったことがありました。 その後、文章分類等はBERTを使って行っており、言葉の共起情報をもとにしたTopicModelingはあまり使ってませんでした。...

１．はじめに chatGPTなどの大規模言語モデル（LLM）とAPIの組み合わせで特許調査を行う検討をしました。 ２．経緯 以前Auto-GPTで特許調査を行う検討をしましたが、Goal（とSTEP）を説明するだけではなかなか思うようにLLMが動いてくれないことがわかりまし...

１．はじめに 特許データべースは通常SQLで検索します。 ex:キヤノン株式会社の特許件数を調べる。 SELECT COUNT(*) FROM {データベース} WHERE applicant_name = "キヤノン株式会社"...

１．はじめに LangChianとGPT3.5を使い企業のウェブサイトから、技術情報を抽出しました。 特許出願されていなくても、その企業の技術情報を把握できるので便利です。 LangChainがすごく便利！ ２．経緯 GPT-3.5がAPI経由で自由に使えるので、これを使っ...

特許発明者ネットワーク関連の論文まとめ 1.社会的ネットワーク分析 ・社会的ネットワーク分析は結構古くから色んな論文が出てるようですが、特許出願に記載の共同発明者のネットワークを分析したものはどのくらいあるんだろうかと思い集めてみました。 ・「inventor...