• ホームページ
  • 記事
  • 全般的
  • Javaの場合HttpURLConnection + ConvertStreamToString（）ユーティリティを使用してGitHubファイルの内容を読み取る方法

Javaの場合HttpURLConnection + ConvertStreamToString（）ユーティリティを使用してGitHubファイルの内容を読み取る方法

公開: 2017-12-30

HttpURLConnectionを使用してGithubURLコンテンツをロードする

このJavaチュートリアルでは、HttpURLConnectionを使用してGitHubURLコンテンツを取得する手順について説明します。 言い換えると、以下はGitHubからファイルコンテンツを取得するためのJavaAPIです。

各HttpURLConnectionインスタンスは、単一のリクエストを行うために使用されますが、HTTPサーバーへの基盤となるネットワーク接続は、他のインスタンスによって透過的に共有される場合があります。 getHeaderFields()ヘッダーフィールドの変更不可能なマップを返します。 マップキーは、応答ヘッダーフィールド名を表す文字列です。 各マップ値は、対応するフィールド値を表す変更不可能な文字列のリストです。

それでは始めましょう：

  1. クラスCrunchifyLoadGithubContent.java作成します
  2. コンテンツをダウンロードします：https：//raw.githubusercontent.com/Crunchify/wp-super-cache/master/wp-cache.php（プラグインから：WP Super Cache Github Repo）
  3. getHeaderFields（）APIを使用してすべてのヘッダーフィールドを取得します。 上記のURLまたは他のURLがリダイレクトされているかどうかを確認するためにこれが必要ですか？ 注：これは完全にオプションです。 HTTP301およびHTTP302リダイレクトの場合、これが役立ちます。
  4. API crunchifyGetStringFromStream( InputStream crunchifyStream)を作成して、ストリームを文字列に変換します。
  5. 同じ出力をコンソールに出力します。

注： HTTPステータス301は、リソース（ページ）が永続的に新しい場所に移動されることを意味します。 302は、リソースが一時的に別のURIの下にあることを要求したことです。 ほとんどの場合、301と302は、検索エンジンでのインデックス作成にとって重要です。これは、クローラーがこれを考慮し、301を使用するときにページランクを転送するためです。

また、– GitHubURLはパブリックである必要があるという前提があります。

CrunchifyLoadGithubContent.java
Java
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
package crunchify . com . tutorial ;
 
import java . io . BufferedReader ;
import java . io . IOException ;
import java . io . InputStream ;
import java . io . InputStreamReader ;
import java . io . Reader ;
import java . io . StringWriter ;
import java . io . Writer ;
import java . net . HttpURLConnection ;
import java . net . URL ;
import java . util . List ;
import java . util . Map ;
 
/**
* @author Crunchify.com
*
*/
 
public class CrunchifyLoadGithubContent {
 
public static void main ( String [ ] args ) throws Throwable {
String link = "https://raw.githubusercontent.com/Crunchify/All-in-One-Webmaster/master/all-in-one-webmaster-premium.php" ;
URL crunchifyUrl = new URL ( link ) ;
HttpURLConnection crunchifyHttp = ( HttpURLConnection ) crunchifyUrl . openConnection ( ) ;
Map < String , List <String> > crunchifyHeader = crunchifyHttp . getHeaderFields ( ) ;
 
// If URL is getting 301 and 302 redirection HTTP code then get new URL link.
// This below for loop is totally optional if you are sure that your URL is not getting redirected to anywhere
for ( String header : crunchifyHeader . get ( null ) ) {
if ( header . contains ( " 302 " ) | | header . contains ( " 301 " ) ) {
link = crunchifyHeader . get ( "Location" ) . get ( 0 ) ;
crunchifyUrl = new URL ( link ) ;
crunchifyHttp = ( HttpURLConnection ) crunchifyUrl . openConnection ( ) ;
crunchifyHeader = crunchifyHttp . getHeaderFields ( ) ;
}
}
InputStream crunchifyStream = crunchifyHttp . getInputStream ( ) ;
String crunchifyResponse = crunchifyGetStringFromStream ( crunchifyStream ) ;
System . out . println ( crunchifyResponse ) ;
}
 
         // ConvertStreamToString() Utility - we name it as crunchifyGetStringFromStream()
private static String crunchifyGetStringFromStream ( InputStream crunchifyStream ) throws IOException {
if ( crunchifyStream ! = null ) {
Writer crunchifyWriter = new StringWriter ( ) ;
 
char [ ] crunchifyBuffer = new char [ 2048 ] ;
try {
Reader crunchifyReader = new BufferedReader ( new InputStreamReader ( crunchifyStream , "UTF-8" ) ) ;
int counter ;
while ( ( counter = crunchifyReader . read ( crunchifyBuffer ) ) ! = - 1 ) {
crunchifyWriter . write ( crunchifyBuffer , 0 , counter ) ;
}
} finally {
crunchifyStream . close ( ) ;
}
return crunchifyWriter . toString ( ) ;
} else {
return "No Contents" ;
}
}
}

デバッグ中に、これをcrunchifyHeader値の一部として取得しました。 また、このチュートリアルはBitbucketパブリックリポジトリにも適用されます。

crunchifyHeader = crunchifyHttp.getHeaderFields(); DEBUG value
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
{
     null = [
         HTTP / 1.1200OK    // this is what we are checking in above for loop. If 301 or 302 then get new URL.
     ] ,
     X - Cache - Hits = [
         1
     ] ,
     ETag = [
         "94a3eb8b3b5505f746aa8530667969673a8e182d"
     ] ,
     Content - Length = [
         24436
     ] ,
     X - XSS - Protection = [
         1 ; mode = block
     ] ,
     Expires = [
         Mon ,
         27Oct201420 : 00 : 31GMT
     ] ,
     X - Served - By = [
         cache - dfw1825 - DFW
     ] ,
     Source - Age = [
         14
     ] ,
     Connection = [
         Keep - Alive
     ] ,
     Server = [
         Apache
     ] ,
     X - Cache = [
         HIT
     ] ,
     Cache - Control = [
         max - age = 300
     ] ,
     X - Content - Type - Options = [
         nosniff
     ] ,
     X - Frame - Options = [
         deny
     ] ,
     Strict - Transport - Security = [
         max - age = 31536000
     ] ,
     Vary = [
         Authorization ,
         Accept - Encoding
     ] ,
     Access - Control - Allow - Origin = [
         https : //render.githubusercontent.com
     ] ,
     Date = [
         Mon ,
         27Oct201419 : 55 : 31GMT
     ] ,
     Via = [
         1.1varnish
     ] ,
     Keep - Alive = [
         timeout = 10 ,
         max = 50
     ] ,
     Accept - Ranges = [
         bytes
     ] ,
     Content - Type = [
         text / plain ; charset = utf - 8
     ] ,
     Content - Security - Policy = [
         default - src 'none'
     ]
}

JavaでGithubコンテンツを取得する