Engineers' Blog

APIを用いてAlibaba Cloudリソースを自動構築する④ - SLB編

はじめに こんにちは、エンジニアの佐藤です。 APIを用いてAlibaba Cloudリソースを自動構築するシリーズ第4回目となります。 前回の記事では、Auto Scalingを作成し、ECSサーバを起動しました。 今回は負荷分散装置であるServer Load Balancer(SLB)を作成…

Rancher🐮でKubernetes (ACK) を管理しよう❗️ - 検証編 -

こんにちは。 ソリューションアーキテクト松田(@MatYoshr)です。 昨年、多くのパブリッククラウドにてKubernetesサービスが正式に提供開始されたこともあり、Kubernetesというキーワードを聞くことがかなり多くなってきたように感じます 下記のGoogle Trends…

APIを用いてAlibaba Cloudリソースを自動構築する③ - Auto Scaling編

はじめに こんにちは、エンジニアの佐藤です。 APIを用いてAlibaba Cloudリソースを自動構築するシリーズ第3回目となります。 前回の記事では、 シリーズを通して作成するAlibaba Cloud環境の構成図を紹介し、さらに各コンポーネントの土台となるVPCおよびVS…

【初めてのNoSQL】 ApsaraDB for MongoDBを触って見た

こんにちは!SBクラウドSAのよしい(@yoshiichannel)です。 長かったゴールデンウィークが終わり、皆さんお仕事復帰されてお疲れかと思いますが、いかがお過ごしでしょうか。 今回は、先月新たにリリースされたApsaraDB for MongoDBを触ってみたので、簡単に…

APIを用いてAlibaba Cloudリソースを自動構築する② - VPC編

はじめに こんにちは、エンジニアの佐藤です。 APIを用いてAlibaba Cloudリソースを自動構築するシリーズ第2回目となります。 前回の記事では、Alibaba Java SDKの開発環境を整備する手順を紹介しました。 今回からは、本格的にAPIを用いてAlibaba Cloud上に…

APIを用いてAlibaba Cloudリソースを自動構築する① - 環境準備編

はじめに はじめまして、エンジニアの佐藤です。 突然ですが、みなさんはどのようにAlibaba Cloudリソースを構築・管理していますでしょうか? おそらく、ほとんどの方がコンソール画面から操作を行っていると思います。 コンソール画面からのGUI操作は、操…

知っていました ? Server Load Balancer 実はスケールするんです

こんにちは。 ソリューションアーキテクト松田(@MatYoshr)です。 本日はAlibaba Cloud のロードバランサーサービスであるServer Load Balancer(SLB)に関する、ある誤解を解いていきたいと思います。 Alibaba Cloudのロードバランサーはインスタンスタイプ…

Alibaba Cloud NAS のご紹介(サービスアップデート)

はじめてまして。 1月入社のソリューションアーキテクト松田(@MatYoshr)です。 半年ほど前に本テックブログでも紹介されておりますが、 この半年の間にアップデート情報もありますので改めてAlibaba Cloud NASをご紹介させて頂きます Service Update ⤴️ その…

Slackを利用して、ChatOps on Alibaba Cloudをやってみました !

皆さん、こんにちは。Alibaba Cloud ソリューションアーキテクトのQ(@joe_qiubinbin)です。 ChatOpsでECSインスタンスの起動や停止をすこし楽にしたいので、SlackからSlash CommandsでECSインスタンスを操作できるようにしてみました。

Apache FlumeとSpark Streamingの統合について

まいど、Kouです。 Web Serverのアクセスログをリアルタイムストリーミング分析するというのはよくある利用シーンだと想定されます。今回の記事は、Apache Flumeと呼ばれるログ収集基盤とE-MapReduceクラスターのSpark Streaming分析基盤の統合手法について…

Sqoopを用いてE-MapReduceにデータを取り込む

こんにちは、Kouです。 既存のSQLテーブルに蓄積された情報をHadoopにインポートするため、Sqoopと呼ばれるツールがよく使われています。今回の記事は、E-MapReduceのHadoopクラスターとRDSまたはオンプレミスDBの間のデータインポートについて、ご説明させ…

E-MapReduceでHiveの動的パーティションについて

こんにちは、Kouです E-MapReduceを利用し、HiveQLでのSELECT文の実行は、テーブルに含まれる全データをスキャンします。WHERE句を指定し、特定の条件に合致するデータを抽出する場合、大量のデータを読み込んだにも関わらず、ごく一部のデータしか利用しな…

【番外編】Google Apps Script(GAS)のAPIでスプレッドシートにデータを書き込む

皆さんこんにちは。 去年から花粉症が発症し、憂鬱な時期を過ごしているSHUです。 今回は番外編となります。 たまたま業務でGoogle Apps Scriptを勉強する機会があったため、 社内でのGAS活用方法をご紹介したいと思います。 なお、Alibaba Cloudは関係しな…

MaxComputeでJSONデータの扱い方

こんにちは、Kouです。 まだご存じの方が少ないかと思いますが、DataWorks 2.0には、JSONデータへのサポートが強化され、JSONドキュメントの処理及び分析が楽となります。IoTやWebアプリケーションなど、さまざまなデータソースから出力するログの形式がJSON…

E-MapReduceでMapReduceジョブを実行する

こんにちは、Kouです。 みなさま、先日E-MapReduceのMetaServiceをご紹介致しましたが、今回引き続きMetaServiceを利用しつつ、E-MapReduceでMapReduceジョブの実行方法をご紹介させて頂きたいと思います。

Kubeflow on Alibaba Cloud 第一回~JupyterHub環境を立ち上げる

CJNANです。 最近、主にDeep LearningをベースとしたAI技術が理論研究フェーズからビジネス業界への展開スピードがどんどん早くなるのを感じています。NAS(Neural Networks Search)のようなハイパパラメタの最適化を商用化したGCPのAutoMLやENAS(Effect N…

RAMのパスワード再入力回数を設定して、アカウントロックを試してみる

皆さん、こんにちは。ソリューションアーキテクトのQ(@joe_qiubinbin)です。 今まで、下記運用小ネタをご紹介させていただきました。 ① [運用小ネタ] RAMとECSのTag機能でECSインスタンスを保護する ② [運用子ネタ]「もう勘弁してよ、このECSインスタンを作…

AnalyticDBのアーキテクチャ紹介

Hello,everyone, はくです。 AnalyticDBは、Alibabaによって独自に開発され、超大規模かつ中核事業によって検証されたPBレベルのリアルタイムデータウェアハウスです。2012年に初めてグループで適用されて以来、Eコマース、広告、娯楽など数多くのビジネスの…

Alibaba Cloudの香港リージョンと中国本土の接続性の話

こんにちは。技術部の吉村です。 今日のテーマは「中国本土向けWEBサイトを作る時に香港リージョンでWEBサイトをホスティングすると良い」という話です。 これは地理的な距離が近いこともありますが、Alibaba Cloud の強みであるバックボーンネットワークが…

E-MapReduceのMetaServiceについて

こんにちは、Kouです。 今回の記事はアリババクラウドのビッグデータ処理サービスE-MapReduceについて、触れさせていただきたいと思います。 E-MapReduceは2.1.0 versionから、MetaServiceと呼ばれる機能をサポートするようになりましたが、業務上まだ利用さ…

MARS – 大規模科学技術計算ライブラリ

CJNANです。 最近、アリババクラウドで、大規模科学技術計算処理するためのライブラリMARSをGithubで公開しました。ここで、MARSについて皆さんにご紹介します。 本記事では、データ処理に関連する内容であり、クラウド製品のご紹介はございません。

CENとVPN-Gatewayを組み合わせて日中間のグローバルLAN環境を作ってみる!

皆さんはじめてまして。 昨年7月にSBクラウドへジョインしたSHUです。 人生初のテックブログ投稿です。 今回はネットワークプロダクトのCEN(Cloud Enterprise Network)とVPN-Gatewayを組み合わせた構成をご紹介します。 日々提案活動をしている中で、有り…

Log Serviceのメール通知機能で、RAMアカウントがパスワードクラッキングされた時に検知・通知してみる

皆さん、こんにちは。ソリューションアーキテクトのQ(@joe_qiubinbin)です。 先日、Log Serviceのメール通知機能がリリースされました。Log Serviceでアラームを設定して、ユーザーが設定した条件で関心のあるイベントが発生した時にはそのイベントを検知し…

Image Searchが新料金体系になり試しやすくなりました!

こんにちはSBクラウドLeoです。個人的には本年初投稿になります。今年もよろしくお願いいたします。 さてさて、みなさんImage Search(イメージサーチ)を使っていらっしゃいますか?もしかすると「月50万はちょっと高額…」と思って手を出していない方が多か…

Alibaba Cloudが試せるオンラインハンズオンサイトLabExのご紹介

こんにちちは。ソリューションアーキテクトの森(@mosuke5)です。 目まぐるしく進化、変化するクラウド業界のキャッチアップ大変ですよね。 みなさんに少しでもわかりやすく、簡単に理解できるように日々努めているわけですが、今日はAlibaba Cloudもオンラ…

ECSのNetwork帯域の変更とそのタイミングについて

こんにちは。森(@mosuke5)です。 フォルダを漁っていたら過去のまとめがでてきたので、せっかくなので公開してみました。 ECSはネットワーク帯域(EIP帯域)をオンラインで変更できます(※Pay As You Goかつrunningまたはstopステータス)。この機能の操作…

分類とクラスタリングの区別

Hello,everyone, はくです。 データマイニングの初心者です。 データマイニングの知識不足で痛感があったため、データマイニングの学習をはじめました。 始まったばかりで、まだ体系的ご紹介できませんが、気になった点をメモ程度で共有します。 今回は分類…

Alibaba CloudのCloud Shellでは何ができるか

あけましておめでとうございます。森(@mosuke5)です。 今年もたくさんの情報を発信していくことがんばりますのでよろしくおねがいします。 新年1発目は、ゆるい話題ですが、Alibaba CloudにはCloudShellについてです。 Alibaba CloudにはCloudShellと呼ばれ…

Alibaba Cloudが2018 DAWNBenchでダブルチャンピオンを獲得

皆さん、新年明けましておめでとうございます。CJNANです。 年末年始にノンビリしながら、懐旧の気持ちになって、昔集めたNIPS論文を巡ったりしていた中で、偶然DAWNBenchコンペの最新ランキングを見たら、なんとこれを発見! Submitは確かに2018年12月25日…

Wide&Deep Learning for Recommender Systems using TensorFlow

CJNANです。 この間、お客様から「深層学習でレコメンドエンジンできるの」って聞かれましたので、ちょうど研究室時代にやってたWide&Deep Learningと言う推薦アルゴリズムを軽く紹介します。 NOTICE:本編は機械学習やTensorFlowの紹介であり、クラウド技術…

MarketplaceからECSを購入できるようになりました!!

こんにちは、SBクラウドのKSです。 少し前にpiyohiko先輩のブログで紹介のあった、Marketplaceについて簡単にご紹介します。 まだまだ日本未対応の部分はありますが、よろしければご一読ください。

【ご紹介】お手軽です、ECSディスク暗号化。

連投気味で失礼します。piyohikoです。 Alibaba Cloud Advent Calendar 2018も、もう22日目です。 Alibaba Cloudの基本プロダクトである、OSS、RDS、SLBは暗号化対応していましたが、実はECSは暗号化機能がありませんでした。それがついに暗号化機能が搭載さ…

MaxCompute SQLでデータ更新と削除する方法

Kouです。 既にご存じの方もいらっしゃると思いますが、MaxCompute SQLでは、データ更新(Update)と削除(Delete)をサポートしません。ただ、実際の業務の中で必要なケースも存在しています。そのケースに遭遇した場合にどうすればいいのでしょうか。本記事で…

GMO ホスコン 大忘年会に行ってきた。ngx_mruby / mod_mrubyすごい

こんにちは、寺尾です。 GMOホスコン 大忘年会 に行ってきました。 GMOホスコンは何度も行きたいと思っていたんですが、出張やら別のイベントやらが被って行けずに、今回ようやく初参加です。各サービスのLTが聞けると言うことで行ってきました。 ConoHa シ…

ECSのスケールアップをしよう

こんにちは!SBクラウド ソリューションアーキテクトのLeoです。みなさん仮想サーバーのスケールアウトと言えばAuto Scalingですよね!ではスケールアップといえば…?実は日本でも数ヶ月前から、購入済みのECS(仮想サーバー)をGUIでスケールアップできるよ…

RAMユーザーログイン画面変更とECS購入時のポイント

Alibaba Cloud Advent Calendar 2018 13日目の投稿です。 久しぶりに投稿させていただきます。piyohikoです。 今年ももうあと半月ですね。なんとなく、ソワソワしてしまいます。 一年を振り返るとAlibaba Cloudも大分変わりました。ということで、今回のお題…

Apsara Video Liveでライブ配信してみた

皆さん、初めまして!今年度新人のYuriと申します。人生初のブログ投稿です。 最近、プロジェクトでApsara Video Liveというプロダクトを検証したので、ご紹介いたします。実際に、明日のAliEatersでもライブ放送を試みる予定です。

クラウド上でのMicrosoft Officeのインストールと利用について

ソリューションアーキテクト 森(@mosuke5)です。 クラウド上にMicrosoft Officeをインストールしたくなることありませんか?この間ありました。その際に、Alibaba Cloudにどうやって持ち込めるのか確認したので共有します。

Global Traffic Managerが日本リージョンでリリースされたので、何が新しいか比較して見た

初めてブログを書かせて貰います。 SBクラウド11月入社のソリューションアーキテクトTERAOです。これから、よろしくお願いします! さて、2018年11月29日 Global Traffic Manager (GTM) が、日本リージョンでベータリリースされました。6か月の間は無料でご…

Alibaba CloudでのKubernetesの脆弱性に対する対策 (CVE-2018-1002105)

SAの森(@mosuke5)です。先日、レポートされたCVE-2018-1002105のKubernetesの脆弱性に対する対策について簡単にご連絡いたします。

API を利用したECS サブスクリプションインスタンスの購入について

こんにちは。ソリューションアーキテクト森(@mosuke5) です。 12/4~5はJapanContainerDaysに参加する予定で非常に楽しみにしていたのですが、大人の事情で4日の前半だけしかいくことができなくなり悲しい気持ちで満ち溢れています笑 さてアドベントカレンダ…

CircleCI、Postmanを使って、Alibaba Cloud上のリソース一括削除

皆さん、こんにちは。ソリューションアーキテクトのQ(@joe_qiubinbin)です。 私が所属している部署では、Alibaba Cloud利用を検討されているお客様にトレーニングを実施しております。 トレーニング終了後、利用されていたリソースの削除は基本的に講師側が…

DataVマップウィジェットに自作のGeoJsonを反映させる

こんにちは!SBクラウドソリューションアーキテクトのLeoです。すでに何回か記事でご紹介しているDataVですが、最近日本地図の表現について聞かれることが多くなってきました。 お使いいただける方々が増えているということで大変嬉しいです!ということで本…

VPN経由でS3からOSSへのマイグレーション

こんにちは、SBクラウドのKSです。 最近はあまり新しいプロダクトのリリースがなかったので、過去に投稿した記事について少し追加のお話です。 以前ご紹介した「VPNや専用線経由でオブジェクトストレージへアクセスする方法」はAWSのEC2からVPN経由でのOSSの…

日中間動画配信サーバーの構築

〜Express Connect VS Internetを題材に〜 こんにちは!SBクラウドソリューションアーキテクトのLeoです。当ブログでは我々のサービスであるExpress Connectに関する記事をいくつか掲載してきました。本日もその1つなのですが、日中間動画配信をテーマにして…

「勘弁してよ、このECSインスタンを作ったのはだれ ?」と悩んでいる方へ

皆さん、こんにちは。ソリューションアーキテクトのQ(@joe_qiubinbin)です。 先日弊社が入っているビルにクリスマスツリーが飾られ、すっかりクリスマス気分になりました。12月12日には Alibaba Cloud Developers Meetup (AliEaters) #9兼プチ忘年会を開催さ…

QuickBI紹介及びOLAPアーキテクチャ説明

CJNANです。 最近データ分析の案件を対応していまして、ビックデータ基盤のMaxComputeや機械学習関連のPAI、GPUマシン、可視化ツールのDataVなどに関するノウハウをブログして共有しました。ご興味ある方はテックブログから製品名(例:PAI)を検索して、ご…

AlibabaCloudへのマイグレーション -ストレージ編-

こんにちは!SBクラウドソリューションアーキテクトLeoです。現在マイグレーションをテーマにした投稿をしております。当記事はその第2段!オブジェクトストレージ編です。 アプリのバックアップ等で用いているストレージをAlibaba Cloud OSS(Object Storage…

AlibabaCloudへのマイグレーション -サーバー編-

こんにちは!SBクラウドソリューションアーキテクトLeoです。最近中国で運用しているシステムをAlibaba Cloudへ乗せてみたいとのお声をいただく機会が多くなってきました。ありがとうございます! ということで、本記事ではサーバー(WebやAppなど)をAlibab…

DataV 4.0のアップグレード内容について

肺炎も治って、通常運転にもどりつつある森(@mosuke5)です。 しかし、体力が凄まじく落ちていて週5日働くのが精一杯です(笑) 今日は、少し前に行われたDataV 4.0のアップグレード内容について、めぼしいところをピックアップしてお伝えいたします。 本内…