タグ検索の該当結果が少ないため、タイトル検索結果を表示しています。
大規模システムでの Linux のメモリ管理
(This post is also available in English.) この記事は Linux memory management at scale を 著者の Chris Down さんの許可 を得て Hiroaki Nakamura が日本語に翻訳したものです。 原文のライセンス は CC BY-SA 4.0 であり、翻訳のライセンスも同じく CC BY 4.0 とします。 cgroup2 プロジェクトでの私の仕事の一部として Linux システムのリソース管理についてエンジニアと話すことに多くの時間をかけてきました。 これらの会話を通じてどんどん明らかになってきた 1 つの事実は多くのエンジニアは、シニア SRE たちでさえも、 Linux のメモリ管理についていくつかのよくある誤解を持っていて、そしてそれが彼らがサポートするサービスやシステムが本来確実に稼働したり効率的
Software Design連載 2021年8月号 Python製のレガシー＆大規模システムをどうリファクタリングするか - MonotaRO Tech Blog
Software Design連載開始 ※ (2021/09/02 08:55) 「Pythonを用いて開発を始めたのが2003年」を「Pythonを用いて開発を始めたのが2002年」に修正 こんにちは。金谷です。 このたび、モノタロウにおけるPython大規模開発に関する取り組みを、技術評論社様で発刊されている Software Design に連載させていただくことになりました。 モノタロウがPythonを用いて開発を始めたのが2002年。2021年の現在もPythonを用いた開発が続けられています。 事業の成長に伴い、関連するシステムやエンジニアの数も増え続けていくなかで、いかに安定的に価値を提供し続けられるのか。 モノタロウにおける取り組みを、開発や運用周りを通してご紹介していきます。 本記事の初出は、 Software Design2021年8月号「Pythonモダン化計画（第1
全国銀行資金決済ネットワーク（全銀ネット）は2023年10月10日午前、銀行間送金を担う「全国銀行データ通信システム（全銀システム）」で他行宛ての振り込みができないトラブルが発生したと発表した。計画停止を除き、全銀システムで顧客に影響が出るシステム障害が発生したのは、1973年の稼働以来、初めて。2027年の稼働を見込む次期全銀システムの開発にも影響を与えそうだ。
大規模システムにおける5つのログ転送パターン
成功者がどのようにNew Relicを使用してKubernetesのパフォーマンスを4倍に向上させ、拡張性とスループットを改善したかをご覧ください。
Deep Dive 大規模システムアーキテクチャ／開発組織エンジニアリング / Deep Dive Large-Scale System Architecture, Development Organization Engineering
学生向けのイベント技育祭2024にて、大規模システムにおけるアーキテクチャの触りをお話したものです。 ビギナー向けなのでそれほど深いお話はしておりません。 【アブストラクト】 本トークでは大規模システムアーキテクチャで考慮すべき事柄とそれを実現する技術スタックや運用システムを深堀りし、それらを実現するための組織の構築をアーキテクト視点でお話します。大規模システムならでは難解な課題とそれを乗り越えるエンジニアリングの力の片鱗をキャッチアップしましょう。 詳細は以下をどうぞ。 https://talent.supporterz.jp/geeksai/2024spring/ # URL YouTube: https://www.youtube.com/c/narusemi HomePage: https://nrslib.com Twitter: https://twitter.com/nrsl
大規模システムのリプレイスを2度経験したPMが語るシステム移行プロジェクトで重要なこと - JMDC TECH BLOG
JMDCの開発本部データ基盤開発部の新倉です。JMDCには大型案件に自由度高く取り組める環境があります。今回は私が実際に経験したDWHシステムの2度のリプレイスの事例をお伝えします。1度目はPL（プロジェクトリーダー）、2度目はPM（プロジェクトマネージャー）としてプロジェクトに参画。その経験からシステム移行プロジェクトを成功に導くポイントを解説します。 ＜プロフィール＞※執筆当時 新倉 裕一郎（にいくら ゆういちろう）データウェアハウス開発部 データレイクグループ グループリーダー 新卒でソフトウェア会社に入社。大手ベンダー企業の介護パッケージソフト製造などの開発業務に従事。その後、SaaS型CRMサービスを展開するベンチャー企業に転職し、2015年5月に日本医療データセンター（現JMDC）入社。レセプトDWHシステムを担当し、2度のリプレイスを経験。現在はレセプトDWHシステムの保守開
モノリシックなプロジェクトにおいて、トップレベルのディレクトリ構成が異なる 2 つのディレクトリ構成を考え、それらの違いは何で、どちらが優れているか？という問いについて考えた。そして、「複雑な概念をトップレベルのディレクトリ構成にした方が良いのでは？」という結論に落ち着いた話をする。 はじまり ちょっとしたシナリオを想像してみよう。 プロジェクト立ち上げ期 「最近のトレンドはレイヤードアーキテクチャだ！」 そう言って、プロジェクトはスタートした。 . ├── application │ ├── xxx_usecase.go │ ├── xxx_repository.go │ ├── yyy_usecase.go │ └── yyy_repository.go ├── domain │ ├── xxx.go │ └── yyy.go ├── infrastructure │ └── xxx_
【ニューヨーク=白岩ひおな】8日に起きた米fastly（ファストリー）による世界的な大規模システム障害で、ウェブサイトの閲覧不能や取引の一時停止に見舞われた企業や政府機関のサイトは数千件に上った。アマゾンやイーベイなど電子商取引（EC）企業のサイトも含まれ、世界の小売業に与えた損失は約1500億円超に上るとの試算もある。ウェブコンテンツを素早く配信できる利便性の裏で、サービスを提供する一部の企業
南アフリカ・ヨハネスブルグ出身。講談社「FRIDAY」、文藝春秋「週刊文春」記者を経て、ジャーナリストとして独立。日韓関係、人物ルポ、政治・事件など幅広い分野の記事執筆を行う。著書に『韓国人、韓国を叱る 日韓歴史問題の新証言者たち』（小学館新書）、『完落ち 警視庁捜査一課「取調室」秘録』（文藝春秋）など。スクープの裏側を明かす「元文春記者チャンネル」YouTubeにて配信中。Note https://note.com/akaishi01 Twitter:@red0101a ＤＯＬ特別レポート 内外の政治や経済、産業、社会問題に及ぶ幅広いテーマを斬新な視点で分析する、取材レポートおよび識者・専門家による特別寄稿。 バックナンバー一覧 ファミリーマートで大規模なシステム障害が起きていることが、同社への内部取材で明らかになった。約7000店舗、数千人のアルバイトスタッフの給与支払いに影響が出て、
現地時間2020年7月23日から続いていた、GPS機器やウェアラブル端末を扱うガーミン(Garmin)のシステム障害について、公式にランサムウェアによるサイバー攻撃を受けたものであったことが発表されました。 Garmin issues statement on recent outage | Business Wire https://www.businesswire.com/news/home/20200727005634/en/Garmin%C2%AE-issues-statement-outage/ システム障害は、ガーミンが提供する「Garmin Connect」を中心とした大規模なもので、一時はサーバーステータスの表記がすべて「DOWN」となっていました。 GPS機器大手・ガーミンの全サービスが異例の長期間停止、原因はランサムウェア攻撃か - GIGAZINE 7月28日(火)現
ファミマで「大規模システム障害」が判明、スタッフ数千人の給与支払いに被害（ダイヤモンド・オンライン） - Yahoo!ニュース
ファミリーマートで大規模なシステム障害が起きていることが、同社への内部取材で明らかになった。約7000店舗、数千人のアルバイトスタッフの給与支払いに影響が出て、ファミマ本社は大混乱に陥った。その中で浮かび上がってきたのは、ファミマを完全子会社化した伊藤忠商事とファミマの現場との対立構造だった。（フリージャーナリスト 赤石晋一郎） 【ファミマ、セブン、ローソンの既存店売上高の「比較分析表」はこちら】 ● ファミマで大規模システム障害 約7000店、数千人の給与支払いに影響 ファミリーマートで大規模なシステム障害が起きていることが、同社への内部取材で明らかになった。 トラブルが起きたのはファミマ店舗の人事給与システムで、東日本エリアの加盟店の多くがトラブルによる被害を受けたという。 「人事給与システムにトラブルが起きたことで勤怠（出勤や退勤をはじめとした従業員の出勤状況）データや給与計算、振り
みずほフィナンシャルグループは、ことし8月に発生した大規模なシステム障害の原因について、二重に装置が故障する極めてまれなトラブルを想定していなかったことが復旧の遅れにつながったと、明らかにしました。 ことし8月19日の夜に発生したシステム障害では、みずほ銀行とみずほ信託銀行の全国およそ520店舗で、翌日の朝から正午ごろにかけて、窓口での振り込みや入金などの取り引きができない状態になりました。 みずほは8日、このシステム障害の詳しい原因について調査の結果を明らかにしました。 それによりますと、この障害ではまず、いわゆるメインシステムと各店舗の端末などをつなぐ部分で、2台同時に作動しているハードディスク装置のうちの1台が故障したということです。 残りの1台は、いったん単独で作動を始めましたが、およそ1時間後にこちらの装置も故障したということです。 調査結果では、こうした二重に装置が故障する極め
観光名所「国際大バザール」内にかけられる赤ちょうちん＝中国新疆ウイグル自治区ウルムチ市で2019年6月24日、工藤哲撮影 中国政府が新疆ウイグル自治区でイスラム教徒の少数民族ウイグル族らを監視する大規模システム「一体化統合作戦プラットフォーム」（IJOP）を構築し行動を把握、恣意（しい）的な拘束や施設への大量収容を行っていた。監視カメラの映像や携帯電話の中身などあらゆる個人情報を解析し、多数のウイグル族を潜在的「危険分子」としていた。 この記事は有料記事です。 残り744文字（全文903文字）
マクドナルドで大規模システム障害、手計算で応戦する店員の頑張りも虚しく億単位の売上が吹き飛ぶ : 市況かぶ全力２階建
商品名から先に製品開発してそうな小林製薬、機能性表示食品に未知の成分が混入してしまい18億円かけて自主回収へ
だが、みずほ銀行は発足直後の2002年、東日本大震災直後の2011年3月にも大規模システム障害を起こしている。何故、みずほだけがシステム障害を繰り返すのか。その原因は報告書には表れようのない合併の深層に隠されている。 日本のSEが“蒸発した”と言われるシステム “みずほ”という名称は万葉集の「豊葦原の瑞穂の国」からとられている。みずほ銀行は日本そのものを表象する銀行という意味である。実際、みずほ銀行は上場企業の約7割と取引を持ち、約2400万の個人口座を誇る巨大銀行だ。「資産規模トップの第一勧銀」、「実質的にトップバンクであった富士銀行」、「天下国家を体現する興銀」の3行が統合して誕生した。それぞれ頂点を自負する3行が一緒になったことで、皮肉にも内部の主導権争いは、長くみずほの宿痾となっていく。 その象徴が3行のシステム統合であった。銀行は装置産業である。基幹を司る勘定系システムは、第一勧
アソビューAdvent Calendar 2022の7日目の記事です。 こんにちは。 10月中旬にアソビュー株式会社にフロントエンドエンジニアとして入社いたしまして、入社後およそ2ヶ月ほど経ちました櫻井と申します！ 入社直後ですが、アドベントカレンダーを書くという無茶振り(?)を受け、何を書こうか迷っていたのですが、入社直後にジョインしたプロジェクトが実はスタートしたばかりということもあり、まさに今、プロトタイピングから始めているということについて書こうかなと思います。 はじめに プロトタイプとは？ プロジェクトの状況 概要 体制 ユーザーストーリーマッピング 具体的な進め方 プロトタイピングの目的 適切なコミュニケーション 技術的な検証 よかったこと/わかったこと より実際のサービスに近い機能のイメージがしやすくなる 共有→フィードバックのサイクルが早くなる プロトタイピングを繰り返す
大規模システムにおけるインスタンス基盤障害の対応自動化に関して[DeNA インフラ SRE] | BLOG - DeNA Engineering
こんにちは、IT 基盤部の 萩行 です。大規模ゲームタイトルのインフラを運用しております。 私の所属しているグループでは数千台規模のインスタンスを管理しており、インスタンス数に比例してインスタンスの基盤障害が多く発生しています。 本記事ではインスタンス基盤障害に対して、どういう仕組みで対応を自動化したかをお伝えいたします。 基盤障害対応の自動化以前 これらのインスタンスは、重み付けラウンドロビンの機能を持つ internal DNS を使用して、負荷分散・冗長化を実現しています。 インスタンスの障害時には、独自のヘルスチェッカーが通信不可を検知し、該当インスタンスの重みを 0 にします。その結果、リクエストが故障インスタンスに振り分けられないようになり、サービス影響を数秒程度におさえる仕組みになっています。 しかし、その後の復旧処理に関しては、オペレータが手動で対応していました。 インスタ
![大規模システムにおけるインスタンス基盤障害の対応自動化に関して[DeNA インフラ SRE] | BLOG - DeNA Engineering](https://cdn-ak-scissors.b.st-hatena.com/image/square/517c1260a938563aeea8af27498de5573a67f4c7/height=288;version=1;width=512/https%3A%2F%2Fengineering.dena.com%2Fog.png)
なぜ大規模システム向け「マネージドモニタリング for Zabbix」なのか― IIJだからできる！エンタープライズ向け総合ソリューション | IIJ Engineers Blog
サポートセンター勤務、システム監視運用設計担当を経てIIJ統合運用管理サービス（UOM）を始めとする、アウトソーシングサービスの企画/開発に従事。 IIJの福原です。 サポートセンターの24-365勤務、システム監視運用設計担当を経て、IIJ統合運用管理サービスの企画/開発に従事しています。 今回は「IIJ統合運用管理サービス（UOM） マネージドモニタリング for Zabbix」の開発背景をご紹介します。 時代に合った、新しい運用ソリューションの必要性 「IIJ統合運用管理サービス（以下、UOM）」は「PATROLCLARICE（パトロールクラリス、通称パトクラ）」を使ったSaaS型の監視サービスを提供しています。PATROLCLARICEは、現場のプロフェッショナルエンジニアが求める細かな項目や設定に幅広く対応し、Amazon CloudWatchやAzure Monitorにも対応
リクルートのプロダクト開発チームが明かす、大規模システム改修・新規サービス開発の舞台裏──RECRUIT TECH MEETUP #1 - TECH PLAY Magazine
飲食店のオーダーエントリーシステム『Airレジ ハンディ』、『ホットペッパービューティー』の新ジャンルとなる美容クリニックの予約サービス、宿・ホテル予約サイトの『じゃらんnet』の10年以上続くシステムなど。リクルートが提供するライフスタイル領域（旅行、飲食、ビューティー）のプロダクト開発における様々な取り組みを紹介する。 ■登壇者プロフィール 株式会社リクルート プロダクト統括本部 飲食プロダクト開発G 早川 浩平氏 2016年にリクルートに新卒入社し、海外向け新規サービスのiOSアプリ開発を担当。その後『Airレジ ハンディ』のサーバサイドとフロントエンドの開発を経て、2019年から『Airレジ ハンディ セルフオーダー』の開発の立ち上げと推進に従事。 株式会社リクルート プロダクト統括本部 飲食プロダクト開発G 松尾 裕幸氏 2019年リクルートに新卒入社。『Airレジ ハンディ』の
数千rpsを処理する大規模システムの配信ログをHadoopで分析できるようにする 〜 ショッピングのレコメンドシステム改修
ヤフー株式会社は、2023年10月1日にLINEヤフー株式会社になりました。LINEヤフー株式会社の新しいブログはこちらです。LINEヤフー Tech Blog こんにちは。サイエンス統括本部でYahoo!ショッピングのレコメンドシステムを開発している山口です。 本記事では、システムの配信ログを大規模データの分散処理が可能な社内のApache Hadoop環境（以下Hadoop）に保存できるように、システム改修した取り組みについて紹介します。 今回改修したレコメンドシステムは、毎秒数千のリクエストを処理する大規模なシステムです。レコメンドシステムから直接Hadoop環境に大量のログを送れるようになったことで、配信情報を素早く、そして簡単にログとして保存できるようになり、日々レコメンドの機械学習モデル改善に役立っています。 Yahoo!ショッピングのレコメンドとは Yahoo!ショッピングで
同行では2月から3月にかけて、システム障害が相次いで発生。一部のATMで取引などができなくなり、ATMに挿入した通帳やキャッシュカードが戻ってこないなどの不具合が発生していた。これを受け、外部調査を行い、再発防止策を策定していた。 関連記事 「問題の根底には企業風土」──みずほFG、銀行システム障害の調査報告書を公開 みずほフィナンシャルグループ（FG）は6月15日、2月以降、みずほ銀行のATMで立て続けに発生したシステム障害について、外部調査の報告書を発表。 ATMシステム障害でみずほFGが中間報告 再発防止へ開発体制や情報共有を強化 みずほ銀行のATMでシステム障害が多発していた問題で、みずほフィナンシャルグループ（FG）の坂井辰史社長が記者会見を行い、検証の中間報告と再発防止策を公表した。システムの開発人員の増員や、危機管理上の情報共有の体制強化などを再発防止策に盛り込んだ。 みずほ
“1万9000人リストラ策”の影響も…みずほ銀行「大規模システム障害」が繰り返されるワケ（文春オンライン） - Yahoo!ニュース
みずほフィナンシャルグループ（FG）の坂井辰史社長は、今年度に予定していた全国銀行協会の会長就任を辞退した。システム障害を受け、これまでは会長就任を「当面」見合わせるとしていたが、2月末から頻発したシステム障害の再発防止を優先すると辞退を申し出た。 【写真】この記事の写真を見る（3枚） みずほFGは3月31日に、システム障害を巡る一連の経緯や再発防止策をまとめた中間的な報告書を金融庁に提出。坂井社長は4月5日記者会見を開き、「システム障害に係る対応状況について」と題する原因分析資料を公表した。今後、第三者委員会「システム障害特別調査委員会」等による調査・提言を踏まえて最終報告書をまとめる意向だ。 だが、みずほ銀行は発足直後の2002年、東日本大震災直後の2011年3月にも大規模システム障害を起こしている。何故、みずほだけがシステム障害を繰り返すのか。その原因は報告書には表れようのない合併の
どんなに手を尽くしても、システム障害やセキュリティー事故をゼロにはできない。危機管理広報の専門家によれば、インシデントが発生した際、企業にとって重要なのは、迅速で顧客目線を持った情報開示だという。 その事実を世に知らしめた顕著な例が、みずほ銀行のシステム障害における情報開示である。同行は2021年2月から2022年2月までの約13カ月間に合計11回のシステム障害を起こした。金融庁は2021年11月26日にみずほフィナンシャルグループ（FG）と同行に業務改善命令を発出した際に「社会インフラの一翼を担う金融機関としての役割を十分に果たせなかったのみならず、日本の決済システムに対する信頼性を損ねた」と厳しく指摘するほどの社会的な混乱を招いたといえる。 当時の反省を踏まえて同行は現在、有事の際の情報開示の在り方を見直している。経緯を具体的に見ていこう。 4時間以上もATM前で立ち往生 最初のシステ
お客さまと同じ立場に立ち共にサービスをよくしていく――お客さまのマインドまでも変えていく大規模システムでのUXデザインへのチャレンジ NTTデータでサービスデザイナーとして働いている、HCD-Net認定 人間中心設計スペシャリストの風間みなみ氏。モバイル系の部署に所属し、お客さまの新規サービスや既存サービスの改善に関わっているそうです。人間中心設計の思想に基づき、仮説立案からサービスリリース後の改善まで、お客さまと二人三脚でエンドユーザにサービスを届けています。現場でどのような活躍をされているのか、お話を伺いました。 NTTデータ サービスデザイナー、HCD-Net認定 人間中心設計スペシャリストの風間みなみ氏 ひとつひとつのエンドユーザの声が届いた結果、顧客の中に変化が生まれ、一緒にサービスを良くしていく 当時は、エンドユーザを中心に考えられていない案件のほうが多かったと、風間氏は数年前
みずほ銀行は2021年2月28日、大規模なシステム障害を起こした。ATMやインターネットバンキングで一部取引が不能になり、キャッシュカードや通帳などがATMに取り込まれたまま戻ってこない不具合も多発した。みずほ銀行は2002年と2011年にも大規模なシステム障害を起こしている。信頼回復を期し4000億円以上を投じて勘定系システムを全面刷新したが、「3度目」を防げなかった。 「ATMに通帳が取り込まれたまま出てこない。自宅にも帰れず、どうしたらいいのか」。2月28日午後1時ごろ、東京・品川のみずほ銀行の出張所で、50代の男性会社員は途方に暮れた。 システム障害が発生したのは2月28日午前。店舗内外の自行ATMやインターネットバンキングの「みずほダイレクト」において、一部の取引ができなくなった。キャッシュカードや通帳がATMに取り込まれたまま戻ってこない不具合も各地で発生し、顧客が店舗などに足
MASA on Twitter: "セブンペイの小林社長、みずほ銀行が大規模システムトラブルを起こした2002年当時はみずほ銀行にいたようだけど、いくらなんでも偶然だよね？ https://t.co/36eZgTH0vw https://t.co/vOLmrAsLzc"
セブンペイの小林社長、みずほ銀行が大規模システムトラブルを起こした2002年当時はみずほ銀行にいたようだけど、いくらなんでも偶然だよね？ https://t.co/36eZgTH0vw https://t.co/vOLmrAsLzc
大規模システムの運用により若手が得たスキルや気付き [DeNA インフラ SRE] | BLOG - DeNA Engineering
※こちらは先日実施された DeNA インフラエンジニア / SRE MEETUP で話した内容を Blog 記事化したものです！ はじめに こんにちは。 IT 基盤部の安藤です。 IT 基盤部にて、ゲームプラットフォーム及びオートモーティブ事業のインフラの運用を主に担当しております。 大規模システムの運用を経験し、どんな規模のサービスでも管理できるようになりたい。そう思っているインフラエンジニア、SREの方々は多いのではないでしょうか？ DeNA グループ全体のシステム基盤を横断して管理しているインフラ部門、IT 基盤部。その IT 基盤部では多くの新卒入社エンジニアがゼロから経験を積み、それら大規模なシステムを管理してくための様々な学びを得ています。 本記事では、「そういった大規模システムを管理するための学び」について、若手エンジニアが入社して行った具体的な経験を IT 基盤部配属後にど
![大規模システムの運用により若手が得たスキルや気付き [DeNA インフラ SRE] | BLOG - DeNA Engineering](https://cdn-ak-scissors.b.st-hatena.com/image/square/17277348ccbde1c2eb0408082f1681476e1d14e3/height=288;version=1;width=512/https%3A%2F%2Fengineering.dena.com%2Fblog%2F2022%2F03%2Finfra-meetup-legacy%2Fcover.png)
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
次期全銀システムに影響か、1973年の稼働以来初の大規模システム障害
大規模システムにおけるディレクトリ構成をRDBのカーディナリティを参考に考える - ぷらすのブログ
大規模システム障害、世界数千件に影響 1500億円損失も - 日本経済新聞
ファミマで「大規模システム障害」が判明、スタッフ数千人の給与支払いに被害
ガーミンが大規模システム障害はランサムウェアによるサイバー攻撃であったことを認める
みずほ 大規模システム障害 “二重故障”想定せず復旧遅れ | NHKニュース
中国、大規模システムでウイグル族監視 個人情報で「危険分子」抽出 - 毎日新聞
“1万9000人リストラ策”の影響も…みずほ銀行「大規模システム障害」が繰り返されるワケ | 文春オンライン
プロトタイピングからはじめる大規模システムリニューアルと新機能開発 - asoview! Tech Blog
みずほ銀で大規模システム障害 全店舗で窓口取引できず、ATMは通常通り
ぷらっとホーム、大規模システム向けSyslogサーバーアプライアンス「EasyBlocks Syslog ProLine」を発表
IIJ、Zabbixを利用した大規模システム向け運用管理サービスを提供
みずほ銀行に足りなかった「顧客目線」、大規模システム障害での情報開示に学ぶ
お客さまと同じ立場に立ち共にサービスをよくしていく――お客さまのマインドまでも変えていく大規模システムでのUXデザインへのチャレンジ | gihyo.jp
みずほ銀行で大規模システム障害、「3度目」防げず信頼回復遠のく
「人手不足で断られた」首相肝いりの行政事務統一、間に合わない自治体も 減税の大規模システム改修で負荷増大（西日本新聞） - Yahoo!ニュース
dojozan.com
monroeakira.hatenablog.com
ramendb.supleks.jp
ramendb.supleks.jp
ramendb.supleks.jp
ramendb.supleks.jp