MAY 23

Recent Comment

"Good editorial. I tend to believe that in most things people who are a..."

View all Comments

Compression Could Reduce Data Center Energy Use by 95%

Data center and sexy don't seem to quite work in the same sentence. But greener data centers? Ooh, we've got chills now.

U.S. business servers and data centers suck up the energy equivalent of all the electricity consumed by color televisions. The industry uses about the same amount of electricity as 5.8 million average American households. How to green such a massive sector? Start with better data compression technologies, which is already widely used in backup and secondary storage to decrease the capacity needed for these functions.

Broaden out that concept and apply compression to primary data, such as application servers, email or databases and that will radically reduce data center energy usage. Storwize Inc., a San Jose, CA tech company, has a process to reduce data center energy usage up to 95 per cent.  This means on a 100 TB database, Storwize can compress that to less than 10 TB of physical disk.

Real-time data compression reduces the amount of data written to storage devices and thus reduces CPU, disk, memory and network utlilization on the storage system. It can do this through its patent-pending algorithms that allow write and read operations from any location within the file while avoiding the need to decompress the whole file.

Compressed data doesn't just save energy use, it reduces the real estate required to house the data centres, the energy needed to cool down the space and all the other trappings of physical space that adds up to a heavier footprint on the environment. 

Hits: 9377
Comments (17)Add Comment
0
...
written by sporkthrower, May 23, 2008
One other thing that would help with Data Center energy consumption is if some of the heat to piezo to electricity generators (http://www.sciencedaily.com/re...225026.htm)
were hooked up to the waste heat coming out of data centers. Data centers have to constantly worry about waste heat and expend a huge amount of energy on AC. This would hit both the heat sink, and energy consumption birds with one stone
0
...
written by EV, May 23, 2008
Real-time data compression reduces the amount of data written to storage devices and thus reduces CPU, disk, memory and network utlilization on the storage system. It can do this through its patent-pending algorithms that allow write and read operations from any location within the file while avoiding the need to decompress the whole file.

This smells more of snake oil than anything else. Aside from the impact on disk access times that the compression would have, it will also require more hardware to handle the compression/decompression of the data. This sounds just like whole disk compression, which generally has wiped out any gains as it has been performed by the CPU and so increases CPU cycles.
0
...
written by spfl49, May 23, 2008
Wholelly Crappolla Batman lets invest all of the precious data that mankind has into this patent pending technology
0
...
written by Matt, May 24, 2008
Sorry, I don't buy the PR hype. You need computing power to compress and decompress the data which will eat up power. You can save on storage space, but in most data centers, the disks spin down when not in use anyway.
0
...
written by Bram, May 24, 2008
Wow. Someone didn't think this through very well. Compression = more CPU time = more electricity. Duh.

There's only one place where compression can lead to net energy benefits - and that's in data transmission. Especially for HTTP traffic. Turn on mod_gzip and your HTTP data will shrink dramatically, at limited expense of CPU power (especially if you use a hardware accelerator). This results in a benefit because, face it, when you visit a website the data often has to travel thousands of miles. Every bit saved is in effect a bit of energy saved on a dozen routers, hundreds of switches and many other devices.
0
It's way more complex than what these co
written by Sam Winter, May 24, 2008
"Compression = more CPU time = more electricity. Duh"

It's much more complicated than that. Obviously, data compression requires a net increase in CPU power draw, but you are gaining back all the power required for many HDDs and raid controllers that you would have replaced as the data would be compressed. In that case, it would be fairly straightforward to figure out the NET reduction in total energy expended after gathering all the data on processor power usage, HDD power usage, how many units of storage could be removed, etc.


Now, using normal system CPUs to calculate the compression/decompression algorithms is very inefficient. A much better idea would be to
add low-power, custom designed chips that implement the compression/decompression algorithms in hardware
to the systems. This could be done DIRECTLY within PCIexpress RAID disk controllers that connect the servers to the harddrives. They would be doing real-time compression and decompression every-time a file is read or written, and at much lower power and much higher efficiency than the primary system CPU.
If you coupled this idea with smarter compression algorithms like those mentioned in the article that can access pieces of files without decompressing the entire file, this type of system could potentially create incredible gains in data-center power efficiency while keeping the same data capacity and use levels. At the same time, it could save a lot of money and service more users than a traditional solution. win - win - win.

Anyone know of something like this on the market? I wish I had the time and money to look into this on a serious level.
















0
A little learning is a dangerous thing .
written by Vashti Varton Maalox, May 24, 2008
... drink deep, or taste not the Pierian spring.

"Compression = more CPU time = more electricity. Duh"

Go back to your gaming console, you clueless little troll. Leave the computers for the big kids. I'm surprised you were even able to navigate to this page.

0
...
written by Matt, May 24, 2008
I happen to agree with the troll Vashti.
0
It is not just the increased power....
written by Phillipi, May 25, 2008
Compression also requires higher quality hard drives in order to maintain data integrity. A one bit error in an uncompressed data sokum is neither here nor there, but a one bit error in a compressed sokum could be a disaster.
0
hogwash!
written by eric, May 25, 2008
Rubbish! I manage an 80,000 square foot datacenter. Our annual energy bill is around $6 million. That doesn't account for the 900 gallons of Diesel we burn every hour we are without utility power. I can tell you assuredly that lack of data compression is not the problem. Who are they kidding? Virtualization will do a lot more for lowering energy usage in the datacenter than data compression.

Datacenter capacity planning all boils down to "watts per square foot". Newer datacenters frequently have a power density of 200 watts per square foot. Older datacenters can handle from 75 to 125 watts per square foot. More important than being able to supply that much energy to the floor is being able to remove the resultant heat. Our facility has over 4,000 tons of cooling capacity which accounts for about half of our utility bill. Lighting 80,000 square feet of datacenter costs another $50,000 a year. SoCal Edison is very expensive, even for industrial customers.

Data compression will help by requiring fewer or smaller storage arrays. Virtualization helps even more by eleminating entire servers. Unless you're a Yahoo or other gigantic data warehouse with rack after rack after rack of EMCs or NetApps, CPU, memory, routing and switching generally consume more energy than storage.

To say that data compression alone can cut datacenter energy consumption by 95 percent is hogwash! To be very generous, I would suggest perhaps a 10 percent industry-wide savings.

I agree with Bram, compression would need to be an end-to-end affair in order to truly maximize energy savings.
0
...
written by S, May 27, 2008
I believe some of you people need to think bigger. I used to work for a tier 1 storage vendors and we had hundreds of clients with over 1 petabyte of active storage and a 33% growth rate. Imagine a refrigerator size cabinet full of spinning disk consuming 7 kilowatts an hour, 24x7. Now imagine an air-conditioned room with over 15 of those cabinets, adding another 5 cabinets every year. Now for the really scary part, we had numerous clients with over 20 petabytes! Yes, 300 cabinets and adding another 100 every year. You do the math.

These are the target for this compression technology. If they can retire just half of those cabinets, it’ll provide an enormous power saving/CO2 reduction.
0
...
written by 0x0065, May 29, 2008
& it makes a LOT of assumptions about the data being stored. Try getting 90% compression on a JPEG image database or a PDF document management system. All this assumes all the data is plain old text, aside from the other fairly fundamental problems pointed out.

Sounds like someone left a market speaking advertising executive alone with the copy for too long.
0
researcher
written by Dick, June 15, 2008
Broadband over Narrowband (BoN)compresses H.264 three hundred percent and still looks great. A DVD quality movie is 600 MB. The NY Times article "Charging by the Byte to Curb Internet Traffic" of 6/15/08 tells why this can save many households hundreds of dollars per year.
0
Reiser4
written by Dan, July 31, 2008
As big a flop as Hans Reiser is, his filesystem actually managed to improve performance while using encryption and compression, and it's native to the FS.

Throw that on a box and smoke it. ;)
0
ekaar
written by ali, April 08, 2009
عقارات السعودية - عقارات الرياض - عقارات الخرج - عقارات مكة المكرمة - عقارات جدة - عقارات الطائف - عقارات المدينة المنورة - عقارات ينبع - عقارات الدمام - عقارات الخبر - عقارات الأحساء - عقارات القصيم - عقارات عسير - عقارات حائل - عقارات تبوك - عقارات الباحة - عقارات الحدود الشمالية - عقارات الجوف - عقارات جازان - عقارات نجران - عقارات مصر - عقارات القاهرة - عقارات الجيزة - عقارات حلوان - عقارات 6 اكتوبر - عقارات الاسكندرية - عقارات الساحل الشمالي - عقارات البحيرة - عقارات السويس - عقارات الاسماعلية - عقارات بورسعيد - عقارات البحر الاحمر - عقارات مطروح - عقارات جنوب سيناء - عقارات شمال سيناء - عقارات دمياط - عقارات الدقهلية - عقارات كفر الشيخ - عقارات الشرقية - عقارات الغربية - عقارات القليوبية - عقارات المنوفبة - عقارات الفيوم - عقارات قنا - عقارات المنيا - عقارات اسيوط - عقارات بني سويف - عقارات سوهاج - عقارات الوادي الجديد - عقارات الأقصر - عقارات اسوان - عقارات الامارات - عقارات ابوظبي - عقارات العين - عقارات دبي - عقارات جبل علي - عقارات الشارقة - عقارات رأس الخيمة - عقارات عجمان - عقارات أم القيوين - عقارات الفجيرة - الوطن العربي - عقارات الكويت - عقارات عمان - عقارات قطر - عقارات البحرين - عقارات الاردن - عقارات لبنان - عقارات المغرب - عقارات السودان - عقارات سوريا - وظائف - وظائف في السعودية - وظائف في الامارات - وظائف في مصر - وظائف في الكويت - وظائف في عمان - وظائف في قطر - وظائف في البحرين - وظائف في الاردن - وظائف في لبنان - وظائف في المغرب - وظائف في السودان - وظائف في سوريا - خدمات - العروض الجديدة - الرعاية و الإعلان - الدعم الفني - العقارات العام - شراء شقق - شراء شقة - شقق بالتقسيط - شقة بالتقسيط - شقق تمليك - شقة تمليك - شقق سكنية - شقة سكنية - شقق فندقية - شقة فندقية - شقق للايجار - شقة للايجار - شقق للبيع - شقة للبيع - شقق مفروشة - شقة مفروشة - غير مصنف - مطلوب شقق - مطلوب شقة
اهداف الدوري الأنجليزي
اهداف الدوري الأسباني
اهداف دوري ابطال اوروبا
مهارات ولقطات منوعة
اهداف الدوري السعودي
اهداف تصفيات كأس العالم
اهداف الدوري المصري
اهداف الدوري الالماني
أهداف كأس الخليج
هدف تيوب
عقار نت
عقار نت
عقار نت
عقار نت
عقار نت
عقار نت
0
243223
written by dsdf, April 28, 2009
real estate sky

real estate
buy
rent
sell
property
للبيع
للايجار
شراء
بيع
ايجار
فلل
استوديو
شقة
شقق
مكتب
مكاتب
بيت
ارض
اراضي
فيلا
محلات
محل
عقارات
عقارات
عقار
عقارات
الامارات

عقارات أبو ظبي

عقارات دبي

عقارات الشارقة

عقارات عجمان

عقارات أم القيوين

عقارات رأس الخيمة

عقارات الفجيرة

عقارات مدينة العين

منتدى المقاولات العامة والاستشارات الهندسية

منتدى مواد البناء

منتدى المواد الصحية والكهربائية

منتدى التصميم والديكور
عقارات
مملكة العربية السعودية

عقارات الرياض

عقارات الخرج

عقارات القصيم

عقارات حائل

عقارات باقي المدن بالوسطى

عقارات جدة

عقارات مكة المكرمة

عقارات المدينة المنورة

عقارات الطائف

عقارات ينبع

عقارات باقي المدن بالغربية

عقارات الدمام

عقارات الظهران

عقارات الخبر

عقارات القطيف

عقارات الأحساء

عقارات الجبيل

عقارات حفر الباطن

عقارات باقي المدن بالشرقية

عقارات منطقة تبوك

عقارات منطقة الجوف

عقارات منطقة الحدود الشمالية

عقارات أبها

عقارات الباحة

عقارات جازان

عقارات نجران

عقارات باقي المدن الجنوبية
عقارات
الدول الخليج

عقارات الكويت
عقارات
محافظة الكويت
عقارات
محافظة الجهراء
عقارات
محافظة الاحمدي
عقارات
محافظة الفروانية
عقارات
محافظة حولي
عقارات
محافظة مبارك الكبير

عقارات سلطنة عمان
عقارات
محافظة مسقط
عقارات
محافظة مسندم
عقارات
محافظة ظفار
عقارات
محافظة البريمي
عقارات
منطقة الباطنة
عقارات
منطقة الظاهرة
عقارات
المنطقة الداخلية
عقارات
المنطقة الشرقية
عقارات
المنطقة الوسطى

عقارات قطر
عقارات
الدوحة
عقارات
الريان
عقارات
الخور
عقارات
الوكرة
عقارات
الشمال

عقارات مصر
عقارات
محافظة القاهرة
عقارات
محافظة الجيزة
عقارات
الإسكندرية والساحل الشمالى
عقارات
محافظتى شمال وجنوب سيناء
عقارات
محافظات مدن القناة
عقارات
محافظات وجه بحرى
عقارات
محافظات وجه قبلى

عقارات الأردن
عقارات
محافظة عمان
عقارات
محافظة معان
 عقارات
محافظة مادبا
 عقارات
محافظة إربد
 عقارات
محافظة الزرقاء
 عقارات
محافظة جرش
 عقارات
محافظة البلقاء
 عقارات
محافظة المفرق
 عقارات
محافظة عجلون
 عقارات
محافظة الكرك
 عقارات
محافظة الطفيلة
 عقارات
محافظة العقبة
 منتدى
المقاولات العامة والمواد الانشائية
 منتدى
المقاولات العامة والاستشارات الهندسية
 منتدى
مواد البناء
 منتدى
المواد الصحية والكهربائية
 منتدى
التصميم والديكور
 الأقسام
الفرعية : [ منتدى العام ]
 منتدى
الحوار و النقاشات العقاري
 منتدى
الاستثمار والتمويل المادي
 عقارات
سوريا
 عقارات
محافظة دمشق
 عقارات
محافظة ريف دمشق
 عقارات
محافظة القنيطرة
 عقارات
محافظة درعا
 عقارات
محافظة السويداء
 عقارات
محافظة حمص
 عقارات
محافظة طرطوس
 عقارات
محافظة اللاذقية
 عقارات
محافظة حماة
 عقارات
محافظة إدلب
 عقارات
محافظة حلب
 عقارات
محافظة الرقة
 عقارات
محافظة دير الزور
 عقارات
محافظة الحسكة
 منتدى
المقاولات العامة والمواد الانشائية
 منتدى
المقاولات العامة والاستشارات الهندسية
 منتدى
مواد البناء
 منتدى
المواد الصحية والكهربائية
 منتدى
التصميم والديكور
 الأقسام
الفرعية : [ منتدى العام ]
 منتدى
الحوار و النقاشات العقاري
 منتدى
الاستثمار والتمويل المادي
 عقارات
المغرب
 عقارات
الرباط
 عقارات
الدارالبيضاء الكبرى
 عقارات
الشاوية
 عقارات
دكالة ـ عبدة
 عقارات
فاس ـ بولمان
 عقارات
مكناس ـ تافيلالت
 عقارات
الغرب
 عقارات
طنجة ـ تطوان
 عقارات
تازة ـ الحسيمة
 عقارات
تادلة ـ ازيلال
 عقارات
الشرقية
 عقارات
مراكش ـ تانسيفت
 عقارات
سوس ـ ماسة
 عقارات
كلميم ـ السمارة
 عقارات
العيون بوجدور
 عقارات
وادي الذهب ـ الكويرة
 منتدى
المقاولات العامة والمواد الانشائية
 منتدى
المقاولات العامة والاستشارات الهندسية
 منتدى
مواد البناء
 منتدى
المواد الصحية والكهربائية
 منتدى
التصميم والديكور
 الأقسام
الفرعية : [ منتدى العام ]
 منتدى
الحوار و النقاشات العقاري
 منتدى
الاستثمار والتمويل المادي
 عقارت
باقي الدول العربية


عقارات السودان
 عقارات
ولاية الخرطوم ــ ام درمان
 عقارات
ولاية البحر الأحمر
 عقارات
باقي الولايات السودانية
 الأقسام
الفرعية : [ منتدى العام ]
 منتدى
الحوار و النقاشات العقاري
 منتدى
الاستثمار والتمويل المادي


عقارات لبنان
 عقارات
محافظة بيروت
 عقارات
محافظة جبل لبنان
 عقارات
محافظة الشمال
 عقارات
محافظة البقاع
 عقارات
محافظة النبطية
 عقارات
محافظة الجنوب
 الأقسام
الفرعية : [ منتدى العام ]
 منتدى
إستراحة العقاريين
 منتدى
الاستثمار والتمويل المادي
 عقارت
باقي الدول العربية
 عقارت
باقي الدول
0
well... maybe
written by العاب, May 06, 2009
maybe it could reduce

Write comment

busy
 

Are you an EcoGeek?

We've got to keep 6 billion people happy without destroying our planet. It's the biggest challenge we've ever faced....but we're taking it on. Are you with us?