WRIOインターネットOS。 アーキテクチャ：リンクされたデータとJSON-LD

「 WRIOインターネットOSの調査によると。 はじめに 」、これは技術的な詳細を明らかにするために設計されたシリーズの最初の投稿です。 情報は、プロジェクトで次のテクノロジーを使用したい開発者の関心を引くことができます：JSON-LD、ブロックチェーン、Node.js、React。 投稿の最後には、次のトピックがhabro-communityにとって有用で興味深いものであるかどうかを調査できる調査があります。

プロジェクトに関する紹介ビデオ：
www.youtube.com/watch?v=JUiMijJ6tEgロシア語版
www.youtube.com/watch?v=DxA6t2kax_kロシア語版

今日のトピック：リンクされたデータとJSON-LD。 例として私たちの経験を使用して、このフォーマットが興味深い理由とそれが提供する利点を説明します。

リンクされたデータ、JSON-LD

Linked DataとJSON-LDとは何ですか？ habrでこの質問は複数回議論されましたが、その応用のいくつかの追加の詳細と方法を提供しようとします。

ウィキペディアは次のように語っています。

リンクされたデータは、World Wide Web上の相互接続されたデータセットのコレクションです。 この用語は、関連する構造化データを公開する方法の説明としても理解できます。 これらのメソッドはWeb標準（HTTP、RDF、およびURI）に基づいており、マシンで読み取り可能な形式で情報を配布できます。 これにより、クエリの作成など、さまざまなソースからのデータを操作できます。

クエリビルディングは、別の機能-データの一貫性-への道を切り開きます。

ティモシー・ジョン・バーナーズ・リーirの記事「 設計の問題：リンクされたデータ」で、リンクされたデータの 4つの基本原則を概説しています。

1. URIを使用してエンティティを定義する
2. これらのエンティティを参照できるようにHTTP URIを使用し、個人とソフトウェアクライアントがそれらを見つけることができるようにします
3. RDFやSPARQLなどの標準を使用してURIが逆参照されている場合、エンティティに関する有用な情報を提供します
4. Web上でデータを公開する場合、これらのエンティティのURIを使用して、他のエンティティ（関係がある場合）へのリンクを説明に含めます
   
   Webにより、関連ドキュメントをリンクできます。 同様に、関連データをリンクできます。 リンクデータという用語は、Web上で構造化データを公開および接続するための一連のベストプラクティスを指します。 Linked Dataをサポートする主要なテクノロジーは、URI（世界のエンティティまたは概念を識別する一般的な手段）、HTTP（リソース、またはリソースの説明を取得するためのシンプルでありながら普遍的なメカニズム）、およびRDF（一般的なグラフベースのデータモデル世界の物事を記述するデータを構造化し、リンクします）。
   貢献者：トム・ヒース、 バイザー、ヒース、バーナーズ・リーの抜粋を含む（2009） （PDF）

彼の考えは1つの文にまとめることができます。リンクされたデータは単なる個別のファイルではなく、単一のセマンティックネットワークに接続されたページのセットです。

Web開発者の場合、データとそのプレゼンテーションが混在しているため、サードパーティのサイトからの情報を処理する必要がある場合は、APIを調べるか、パーサーを開発する必要があることに、おそらく複数回気づいているでしょう。 また、今日のWebページは人間にとっては読みやすいが、車やGoogleのような検索サービスにとっては読みにくい。 したがって、彼らはページを分解し、受け取った情報を分析する必要があります。 検索結果でより高い地位を獲得するために、一部のサービスはデータを個別に準備し、理解可能な形式で検索ロボットにデータを提供します。 通常はJSONであり、この場合、解析は不要です。 ただし、このアプローチでは、サイトを開発および保守する際に追加の労力と経済的コストが必要になります。 WRIO OSの考え方は、ユーザーとマシンの両方に適した同じサイト構造を持つことです。 その結果、データをクリーンな状態に保ちます：HTMLマークアップを最小限に抑え、ページのレンダリングとユーザーへの表示に必要な通常の追加要素なし-この機能は、WRIO OSトピックを使用して個別に実装されます。以下を参照してください。

検索ボットがJSON-LDページをどのように「見る」かを理解するために、JSON-LDコンテンツビジュアライザーを使用した例を用意しました。
https://wrioos.com/jsonld-vis/view/?https://webrunes.com
https://wrioos.com/jsonld-vis/view/?https://aa.wr.io/ru/

そのような各ページ-アトミックデータ-は、人、組織、本、映画、歌など、単一の不可分なエンティティに関するデータセット全体です。 JSON-LD形式のスキームのいずれかに従って構築されます。 JSONに似たシンプルで多くの点でテキスト形式は、ページの無料の分散処理/読み取りを提供し、関連データのパブリックプールを使用してあらゆる種類のサービスを作成するのに最適です。 つまり、サードパーティのサーバーにあるファイルを自分のものであるかのように簡単に読み取って使用できます（オープンデータ、以下を参照）。

さらに、データベースの代わりに静的JSON-LDファイルを使用すると、他にも多くの利点があります。

• データベースをインストールおよび保守する必要はありません。 ファイルはメンションの形式のリンクを介してリンクされます
• コンテンツの一貫性（以下を参照）
• データのみを含むため、最小サイズになります。 さらに、JSON-LDはテキストであるため、完全に圧縮されているため、トラフィックがさらに減少します
• テキスト形式=セキュリティ。 実行中のノードスクリプトを除くすべてのスクリプトを無視できます（「実際の動作」セクションを参照）
• エンドツーエンドの暗号化は簡単に暗号化できます。つまり、盗聴やスヌーピングから保護します。
• テキスト形式により、P2Pインターネットを作成し、DHT経由でファイルを転送できます
• ブラウザのキャッシュ。 システムは最初にオフラインで作業できます
• 地方分権。 新しいファイルを追加して既存のファイルにリンクするだけで、誰でもJSON-LDプール拡張機能に参加できます
• 静的データのサポートと配布は単純で、安価で、信頼性が高い-障害が発生した場合、このサーバーにあるデータの一部のみが失われる可能性がある
• データは検索エンジンによってよく理解され、ページの位置が増加し、リッチスニペットの形式で検索結果に表示できます。
• そして主な機能- セマンティックWebへの扉を開きます 。 これ以上のSEOは必要ありません
• セマンティクスにより、新しいタイプのサービスの作成、推奨システム、パーソナライズされた広告などの新しい機会の提供が可能になります。

この欠点は、プロジェクトの1つであるTaglangによって解消されます。Taglangは、データベースに固有のJSON-LDを操作するための追加機能を提供します。 habrasocietyに興味がある場合は、それについて個別に説明します。 このプロジェクトはブロックチェーンに基づいて開発されており、タグとメタデータを使用したJSON-LDへのリンクの公開アクセス可能な分散型データベースです。

Linked Dataの論理的な継続はオープンデータ（英語のオープンデータ）です。これは、著作権、特許、その他の制御メカニズム（ Wikipedia 、En）の制限なしに、機械可読な使用とさらなる公開のためにデータに自由にアクセスできるという考えを反映した概念です。 同様に、オープンデータはオープンコンテンツ （En）の概念と密接に関連しており、時代遅れの著作権の枠組みの外にある自由社会の発展に必要な要素です。 新たなパラダイムへの道を開くOpen Copyright-もう1つのプロジェクトで、やがてストーリーの転換点に到達します。

オープンデータが重要な理由 Tim Berners-Leeはこの質問に次のように回答しました。

問題は、1つの検索エンジン、1つの大きなソーシャルネットワーク、1つのマイクロブログ用のTwitterの優位性です。 技術的な問題はなく、社会的な問題もあります。」問題はグーグルでもアマゾンでもフェイスブックでもありません。 問題は、オンラインユーザーが勝者勝ちの配布に従うことです。 サービスの種類に依存しない構造分布です。 新しいサービスを作成しても、それは変わりません。

無料翻訳：問題は、1つの検索エンジン、1つのソーシャルネットワーク、1つのマイクロブログ用のTwitterの優位性です。 問題は技術的なものではなく、社会的なものであり、Google、Amazon、またはFacebookとは関係ありません。 問題は、集中サービスにデータを提供するユーザーが、「勝者がすべてを手に入れる」という大量の効果を驚かせるということです。 これはデータ配信の構造的な問題であり、別のサービスを作成しても状況は保存されません。

言い換えると、解決策は無料のデータプールを作成することです。これは1つのサービスによって所有されていませんが、一般的にすべてにアクセス可能であり、分散された方法で保存されます。これにより、相互接続されたファイルがJSON-LD形式でウェブ全体に散らばることが保証されます。

一貫性の問題に戻りましょう。 記事の冒頭で、クエリ作成のコンテキストで説明したことを覚えていますか？ ユーザー側の関心がある場合、現時点では、データの一貫性（またはコンテンツの一貫性）が解決する問題についてのみ説明します。

現在、あるページから別のページにテキストを追加する場合、ほとんどの場合、コピー/貼り付けでのみこれを行うことができます。 当然、オリジナルが変更された場合、挿入は使用されなくなります。これは、作成時にソースとは別に生活を始めるテキストの一部であるためです。 また、テキストの単純なコピーの場合、永遠に不幸な法的搾取者の著作権が侵害される可能性があります。 データの一貫性は、コピー/貼り付けが元のファイルに関連付けられているかどうかにかかわらず、最初の問題を解決します-目的のファイルから引用の開始と終了の境界を指定するだけで、テストのコピーの代わりに、元のファイルから必要なテストの部分が表示されます これは、次のようにグラフィカルに表示できます。

挿入には引用されたJSON-LDを完全にダウンロードする必要がありますが、大きな記事であっても数十kbしかなく、これは重大な問題とはほとんど言えません。
結論 ：データの一貫性は、あるソースから別のソースに情報を挿入するという問題を解決します。これは、著者の努力なしで一種のグローバルOEmbed （En）です。

先ほど説明したオープンコンテンツは著作権の問題を解決します。この場合、著者は寄付の一部を受け取るため、他のページでテキストを使用することに興味があります。 オープン著作権についての投稿で詳細を説明しますが、今日ではそれがなくても、多くの人々は、ウィキペディアの経験を裏付ける自由に利用可能な情報を作成することに力、知識、時間を投資する準備ができています。

上記のすべてを要約します。機密情報を含む個々のサイトの代わりに、誰でも参加できる開発、補充、および処理のデータの共通プールを取得します。 また、APIを必要とせずにコマンドラインでクエリを作成できるため、相互接続された新しいタイプのサービスを作成する有望な可能性が広がります。 プレゼンテーションにはデータが混在していませんが、それら自体は、保存、処理、暗号化、および送信が容易な、オープンで構造化された広範なテキスト形式になっています。

リンクデータとJSON-LDについて詳しく知りたい場合は、特別に選択されたリンク（En）があります。
http://json-ld.org/データは乱雑で、切断されています。 JSON-LDはそれを整理して接続し、より良いWebを作成します。
http://linkeddata.org/およびhttp://linkeddata.org/guides-and-tutorials
https://developers.google.com/search/docs/guides/intro-structured-data
https://www.youtube.com/watch?v=4x_xzT5eF5Qリンクデータとは
https://www.youtube.com/watch?v=vioCbTo3C-4 JSON-LDとは何ですか？
https://developers.google.com/structured-data/testing-tool/ JSON-LD検証
http://www.markus-lanthaler.com/research/on-using-json-ld-to-create-evolvable-restful-services.pdf
SEO：
http://www.seoskeptic.com/json-ld-google-knowledge-graph-schema-org-seo/
http://manu.sporny.org/2013/json-ld-google-search/
https://ignitevisibility.com/everything-to-know-about-json-ld-for-seo/

実際の仕組み

JSON-LD形式でページを作成するには、 当社のサービス （開発中は、時々基本的な機能のみをオフラインにすることができます）または任意のテキストエディターを使用できます。 私たちのページにはまだ多くの空のフィールドが含まれていますが、これはGoogleテストサービスによってエラーとして扱われますが、今後修正されます。 それにもかかわらず、今日はハブとしてhttps://webrunes.com/enを例として使用できます。 彼のリポジトリはhttps://github.com/webRunes/webrunes.com-WRIO-Hubにあります 。 編集したJSON-LDは、Github、Dropbox、Google Driveなどの任意のサーバーに保存でき、独自のハブを取得できます。

1. 内部にJSON-LDを含むHTML。 黒い矢印は、サードパーティのサーバー上にあることが多い他のページにつながるリンクを指します
2. 各ファイル（1）には、フォームのリンク（2）が含まれています
   

   <body><script type="text/javascript" src="https://wrioos.com/start.js"></script></body> 

   WRIO OSノードの1つにつながります（誰でも独自のノードを作成できます）。 このリンクは新しいユーザーにのみ必要です。他の場合は無視され、ユーザーが選択したノードが使用されます
3. start.jsはJSON-LDを処理し、選択したテーマに基づいてページ（3）を動的に生成します-これまでのところ、 https：//github.com/webRunes/Default-WRIO-Themeは1つしかありません
4. これに加えて、スクリプトは、個々のNode.jsアプリケーション（マイクロサービス）に基づいて構築された追加の機能（承認、コメント、支払いなど）を追加します。 そのような各アプリケーションは、プラグインと見なすことができます。 ユーザーは、独自のアプリケーションセットを構築できます。

ご質問がある場合は、コメントに残していただくか、 info @ webrunes.comまでご連絡ください。回答させていただきます。

ご清聴ありがとうございました。