紧急求助，SS，MYSQL CPU占用高达200%以上，<090707更新>

用的是Godaddy的VPS虚拟主机，不知道是PHP.INI或是HTTPD.CONF文件配置不正确导致MYSQL的CPU占有率持高不下，还是数据库有问题导致的。每reboot一次系统，不出10分钟就宕机，根据TOP命令查看，MYSQL的CPU占用最高时候达到300%。
SS数据库约有1G，生成HTML文件。日PV 2W,IP5000~10000。
之前使用的Hosmonster的主机都没有问题，最近几天刚转移到godaddy的VPS.

数据库目前有800M，其中附件表和采集的日志就占了不少的空间。
新闻数目有35万条左右。

记得以前早期版本，论坛里有人发过一个清理采集日志的文件，可以把采集记录清空，现在找不到那个文件了。
还有，服务器转移后，我附件目录没有转移，放弃掉了，但是数据库表中仍然有10几万的附件记录，有什么办法清理掉？直接清空？

请官方人员或有招数的朋友帮忙解决一下问题，这么好的网站，再这样下去可就废了。。感激。

httpd.conf 配置文件： *号部分为我刻意隐藏的文件路径,#号注释部分已经去掉，方便大家阅读查看

1. ServerTokens OS
   
2. 
   
3. ServerRoot "/etc/httpd"
   
4. 
   
5. PidFile run/httpd.pid
   
6. 
   
7. Timeout 120
   
8. 
   
9. KeepAlive Off
   
10. 
    
11. MaxKeepAliveRequests 100
    
12. 
    
13. KeepAliveTimeout 15
    
14. 
    
15. <IfModule prefork.c>
    
16. StartServers       1
    
17. MinSpareServers    1
    
18. MaxSpareServers    5
    
19. ServerLimit       10
    
20. MaxClients        10
    
21. MaxRequestsPerChild  4000
    
22. </IfModule>
    
23. 
    
24. <IfModule worker.c>
    
25. StartServers       1
    
26. MaxClients        10
    
27. MinSpareThreads    1
    
28. MaxSpareThreads    4
    
29. ThreadsPerChild     25
    
30. MaxRequestsPerChild  0
    
31. </IfModule>
    
32. 
    
33. Listen 80
    
34. 
    
35. LoadModule auth_basic_module modules/mod_auth_basic.so
    
36. LoadModule auth_digest_module modules/mod_auth_digest.so
    
37. LoadModule authn_file_module modules/mod_authn_file.so
    
38. LoadModule authn_alias_module modules/mod_authn_alias.so
    
39. LoadModule authn_anon_module modules/mod_authn_anon.so
    
40. LoadModule authn_dbm_module modules/mod_authn_dbm.so
    
41. LoadModule authn_default_module modules/mod_authn_default.so
    
42. LoadModule authz_host_module modules/mod_authz_host.so
    
43. LoadModule authz_user_module modules/mod_authz_user.so
    
44. LoadModule authz_owner_module modules/mod_authz_owner.so
    
45. LoadModule authz_groupfile_module modules/mod_authz_groupfile.so
    
46. LoadModule authz_dbm_module modules/mod_authz_dbm.so
    
47. LoadModule authz_default_module modules/mod_authz_default.so
    
48. LoadModule ldap_module modules/mod_ldap.so
    
49. LoadModule authnz_ldap_module modules/mod_authnz_ldap.so
    
50. LoadModule include_module modules/mod_include.so
    
51. LoadModule log_config_module modules/mod_log_config.so
    
52. LoadModule logio_module modules/mod_logio.so
    
53. LoadModule env_module modules/mod_env.so
    
54. LoadModule ext_filter_module modules/mod_ext_filter.so
    
55. LoadModule mime_magic_module modules/mod_mime_magic.so
    
56. LoadModule expires_module modules/mod_expires.so
    
57. LoadModule deflate_module modules/mod_deflate.so
    
58. LoadModule headers_module modules/mod_headers.so
    
59. LoadModule usertrack_module modules/mod_usertrack.so
    
60. LoadModule setenvif_module modules/mod_setenvif.so
    
61. LoadModule mime_module modules/mod_mime.so
    
62. LoadModule dav_module modules/mod_dav.so
    
63. LoadModule status_module modules/mod_status.so
    
64. LoadModule autoindex_module modules/mod_autoindex.so
    
65. LoadModule info_module modules/mod_info.so
    
66. LoadModule dav_fs_module modules/mod_dav_fs.so
    
67. LoadModule vhost_alias_module modules/mod_vhost_alias.so
    
68. LoadModule negotiation_module modules/mod_negotiation.so
    
69. LoadModule dir_module modules/mod_dir.so
    
70. LoadModule actions_module modules/mod_actions.so
    
71. LoadModule speling_module modules/mod_speling.so
    
72. LoadModule userdir_module modules/mod_userdir.so
    
73. LoadModule alias_module modules/mod_alias.so
    
74. LoadModule rewrite_module modules/mod_rewrite.so
    
75. LoadModule proxy_module modules/mod_proxy.so
    
76. LoadModule proxy_balancer_module modules/mod_proxy_balancer.so
    
77. LoadModule proxy_ftp_module modules/mod_proxy_ftp.so
    
78. LoadModule proxy_http_module modules/mod_proxy_http.so
    
79. LoadModule proxy_connect_module modules/mod_proxy_connect.so
    
80. LoadModule cache_module modules/mod_cache.so
    
81. LoadModule suexec_module modules/mod_suexec.so
    
82. LoadModule disk_cache_module modules/mod_disk_cache.so
    
83. LoadModule file_cache_module modules/mod_file_cache.so
    
84. LoadModule mem_cache_module modules/mod_mem_cache.so
    
85. LoadModule cgi_module modules/mod_cgi.so
    
86. 
    
87. Include conf.d/*.conf
    
88. 
    
89. User apache
    
90. Group apache
    
91. 
    
92. ServerAdmin root@localhost
    
93. 
    
94. UseCanonicalName Off
    
95. 
    
96. DocumentRoot "*www/html"
    
97. 
    
98. <Directory />
    
99.     Options FollowSymLinks
    
100.     AllowOverride None
     
101. </Directory>
     
102. 
     
103. <Directory "*www/html">
     
104.     Options Indexes FollowSymLinks
     
105.     AllowOverride None
     
106.     Order allow,deny
     
107.     Allow from all
     
108. </Directory>
     
109. 
     
110. <IfModule mod_userdir.c>
     
111.     UserDir disable
     
112. </IfModule>
     
113. 
     
114. DirectoryIndex index.html index.html.var
     
115. 
     
116. AccessFileName .htaccess
     
117. 
     
118. <Files ~ "^\.ht">
     
119.     Order allow,deny
     
120.     Deny from all
     
121. </Files>
     
122. 
     
123. TypesConfig /etc/mime.types
     
124. 
     
125. DefaultType text/plain
     
126. 
     
127. 
     
128. <IfModule mod_mime_magic.c>
     
129. #   MIMEMagicFile /usr/share/magic.mime
     
130.     MIMEMagicFile conf/magic
     
131. </IfModule>
     
132. 
     
133. HostnameLookups Off
     
134. 
     
135. ErrorLog logs/error_log
     
136. 
     
137. LogLevel warn
     
138. 
     
139. LogFormat "%h %l %u %t "%r" %>s %b "%{Referer}i" "%{User-Agent}i"" combined
     
140. LogFormat "%h %l %u %t "%r" %>s %b" common
     
141. LogFormat "%{Referer}i -> %U" referer
     
142. LogFormat "%{User-agent}i" agent
     
143. 
     
144. CustomLog logs/access_log combined
     
145. 
     
146. ServerSignature On
     
147. 
     
148. Alias /icons/ "*www/icons/"
     
149. 
     
150. <Directory "*www/icons">
     
151.     Options Indexes MultiViews
     
152.     AllowOverride None
     
153.     Order allow,deny
     
154.     Allow from all
     
155. </Directory>
     
156. 
     
157. 
     
158. <IfModule mod_dav_fs.c>
     
159.     # Location of the WebDAV lock database.
     
160.     DAVLockDB *lib/dav/lockdb
     
161. </IfModule>
     
162. 
     
163. 
     
164. ScriptAlias /cgi-bin/ "*www/cgi-bin/"
     
165. 
     
166. <Directory "*www/cgi-bin">
     
167.     AllowOverride None
     
168.     Options None
     
169.     Order allow,deny
     
170.     Allow from all
     
171. </Directory>
     
172. 
     
173. IndexOptions FancyIndexing VersionSort NameWidth=* HTMLTable
     
174. 
     
175. AddIconByEncoding (CMP,/icons/compressed.gif) x-compress x-gzip
     
176. 
     
177. AddIconByType (TXT,/icons/text.gif) text/*
     
178. AddIconByType (IMG,/icons/image2.gif) image/*
     
179. AddIconByType (SND,/icons/sound2.gif) audio/*
     
180. AddIconByType (VID,/icons/movie.gif) video/*
     
181. 
     
182. AddIcon /icons/binary.gif .bin .exe
     
183. AddIcon /icons/binhex.gif .hqx
     
184. AddIcon /icons/tar.gif .tar
     
185. AddIcon /icons/world2.gif .wrl .wrl.gz .vrml .vrm .iv
     
186. AddIcon /icons/compressed.gif .Z .z .tgz .gz .zip
     
187. AddIcon /icons/a.gif .ps .ai .eps
     
188. AddIcon /icons/layout.gif .html .shtml .htm .pdf
     
189. AddIcon /icons/text.gif .txt
     
190. AddIcon /icons/c.gif .c
     
191. AddIcon /icons/p.gif .pl .py
     
192. AddIcon /icons/f.gif .for
     
193. AddIcon /icons/dvi.gif .dvi
     
194. AddIcon /icons/uuencoded.gif .uu
     
195. AddIcon /icons/script.gif .conf .sh .shar .csh .ksh .tcl
     
196. AddIcon /icons/tex.gif .tex
     
197. AddIcon /icons/bomb.gif core
     
198. AddIcon /icons/back.gif ..
     
199. AddIcon /icons/hand.right.gif README
     
200. AddIcon /icons/folder.gif ^^DIRECTORY^^
     
201. AddIcon /icons/blank.gif ^^BLANKICON^^
     
202. 
     
203. DefaultIcon /icons/unknown.gif
     
204. 
     
205. ReadmeName README.html
     
206. HeaderName HEADER.html
     
207. 
     
208. IndexIgnore .??* *~ *# HEADER* README* RCS CVS *,v *,t
     
209. 
     
210.   DefaultLanguage zh-CN
     
211. 
     
212. AddLanguage ca .ca
     
213. AddLanguage cs .cz .cs
     
214. AddLanguage da .dk
     
215. AddLanguage de .de
     
216. AddLanguage el .el
     
217. AddLanguage en .en
     
218. AddLanguage eo .eo
     
219. AddLanguage es .es
     
220. AddLanguage et .et
     
221. AddLanguage fr .fr
     
222. AddLanguage he .he
     
223. AddLanguage hr .hr
     
224. AddLanguage it .it
     
225. AddLanguage ja .ja
     
226. AddLanguage ko .ko
     
227. AddLanguage ltz .ltz
     
228. AddLanguage nl .nl
     
229. AddLanguage nn .nn
     
230. AddLanguage no .no
     
231. AddLanguage pl .po
     
232. AddLanguage pt .pt
     
233. AddLanguage pt-BR .pt-br
     
234. AddLanguage ru .ru
     
235. AddLanguage sv .sv
     
236. AddLanguage zh-CN .zh-cn
     
237. AddLanguage zh-TW .zh-tw
     
238. 
     
239. LanguagePriority en ca cs da de el eo es et fr he hr it ja ko ltz nl nn no pl pt pt-BR ru sv zh-CN zh-TW
     
240. 
     
241. ForceLanguagePriority Prefer Fallback
     
242. 
     
243. AddDefaultCharset ISO-8859-1
     
244. AddDefaultCharset off
     
245. 
     
246. AddType application/x-compress .Z
     
247. AddType application/x-gzip .gz .tgz
     
248. 
     
249. AddHandler type-map var
     
250. 
     
251. AddType text/html .shtml
     
252. AddOutputFilter INCLUDES .shtml
     
253. 
     
254. Alias /error/ "*www/error/"
     
255. 
     
256. <IfModule mod_negotiation.c>
     
257. <IfModule mod_include.c>
     
258.     <Directory "*www/error">
     
259.         AllowOverride None
     
260.         Options IncludesNoExec
     
261.         AddOutputFilter Includes html
     
262.         AddHandler type-map var
     
263.         Order allow,deny
     
264.         Allow from all
     
265.         LanguagePriority en es de fr
     
266.         ForceLanguagePriority Prefer Fallback
     
267.     </Directory>
     
268. 
     
269. </IfModule>
     
270. </IfModule>
     
271. 
     
272. BrowserMatch "Mozilla/2" nokeepalive
     
273. BrowserMatch "MSIE 4\.0b2;" nokeepalive downgrade-1.0 force-response-1.0
     
274. BrowserMatch "RealPlayer 4\.0" force-response-1.0
     
275. BrowserMatch "Java/1\.0" force-response-1.0
     
276. BrowserMatch "JDK/1\.0" force-response-1.0
     
277. BrowserMatch "Microsoft Data Access Internet Publishing Provider" redirect-carefully
     
278. BrowserMatch "MS FrontPage" redirect-carefully
     
279. BrowserMatch "^WebDrive" redirect-carefully
     
280. BrowserMatch "^WebDAVFS/1.[0123]" redirect-carefully
     
281. BrowserMatch "^gnome-vfs/1.0" redirect-carefully
     
282. BrowserMatch "^XML Spy" redirect-carefully
     
283. BrowserMatch "^Dreamweaver-WebDAV-SCM1" redirect-carefully
     
284. 
     
285. <Location /server-status>      
     
286. SetHandler server-status
     
287. Order Deny,Allow  
     
288. Deny from all   
     
289. Allow from .xxx.com
     
290. </Location>
     
291. ExtendedStatus On
     
292. 
     
293. <VirtualHost *:80>
     
294. ServerAdmin webmaster@yourdomain.com
     
295. DocumentRoot /www/uchome
     
296. ServerName yourdomain.com
     
297. ServerAlias *.yourdomain.com
     
298. </VirtualHost>

复制代码

my.cnf 配置文件： *号部分为我刻意隐藏的文件路径

1. 
   
2. [mysqld]
   
3. datadir=*/mysql
   
4. socket=*/mysql.sock
   
5. user=mysql
   
6. 
   
7. # Default to using old password format for compatibility with mysql 3.x
   
8. # clients (those using the mysqlclient10 compatibility package).
   
9. old_passwords=1
   
10. 
    
11. [mysqld_safe]
    
12. log-error=*/mysqld.log
    
13. pid-file=*/mysqld.pid
    

复制代码

纯静态的话是否是生成html文件的问题？
如果按照24小时为限制的话，那么2Wpv按照四分之一来算，5000个页面，如果访问时间集中的话是否会因为一时的集中访问，导致大量的页面重新刷新生成，从而占用系统资源？
我没用vps，用的是lunarpages的空间，以前用dede的时候在批量生成的时候被警告，占用了近100%的cpu，换用ss生成的时候没有这样的问题。

后台设置下不占资源的办法

如果你觉得是PHP.INI或者mysql.cnf或者httpd.conf的问题，至少也得把这几个文件贴出来分析吧（节省查阅工作量，把那些注释代码过滤了再贴上来，为了你服务器安全也不要把路径、版本等信息公开），还有考虑下你服务器上有没有执行一些计划任务的情况。
不过数据库量到了1G了，除非是很精通MySQL优化的系统工程师才能把这个MySQL配置好，否则有几条select * from `supe_spacenews` where `message` like '%搜索词%';的搜索语句足够让这个数据库不响应了。
要么你在数据库搜索系统上下功夫，可考虑开源的Sphinx或者张宴开发的mysqlcft；要么干脆禁止全文搜索了。
你可以配置mysql.cnf，记录slow-log，看看是哪些SQL语句让你的MySQL服务器响应缓慢了

如果你觉得是PHP.INI或者mysql.cnf或者httpd.conf的问题，至少也得把这几个文件贴出来分析吧（节省查阅工作量，把那些注释代码过滤了再贴上来，为了你服务器安全也不要把路径、版本等信息公开），还有考虑下你服务器 ...
littlehz 发表于 2009-7-6 00:26

多谢，稍后，我吧MY.CNF和HTTPD.cnf文件拷贝上来给大家看一下，一起帮忙分析一下。

如果你觉得是PHP.INI或者mysql.cnf或者httpd.conf的问题，至少也得把这几个文件贴出来分析吧（节省查阅工作量，把那些注释代码过滤了再贴上来，为了你服务器安全也不要把路径、版本等信息公开），还有考虑下你服务器 ...
littlehz 发表于 2009-7-6 00:26

数据库目前有800M，其中附件表和采集的日志就占了不少的空间。
新闻数目有35万条左右。

记得以前早期版本，论坛里有人发过一个清理采集日志的文件，可以把采集记录清空，现在找不到那个文件了。
还有，服务器转移后，我附件目录没有转移，放弃掉了，但是数据库表中仍然有10几万的附件记录，有什么办法清理掉？直接清空？

my.cnf 文件配置： *号为隐藏的路径

1. 
   
2. [mysqld]
   
3. datadir=*/mysql
   
4. socket=*/mysql.sock
   
5. user=mysql
   
6. 
   
7. # Default to using old password format for compatibility with mysql 3.x
   
8. # clients (those using the mysqlclient10 compatibility package).
   
9. old_passwords=1
   
10. 
    
11. [mysqld_safe]
    
12. log-error=*/mysqld.log
    
13. pid-file=*/mysqld.pid
    

复制代码

这基本是默认配置，几乎没优化，你还是网上搜索一下Apache、MySQL优化的资料吧。可以肯定不是SS效率问题。
我这实验室环境下有一个spacenews的单表在3G左右，itemid数在80万，负载还行，不慢。当然由于是测试环境，也就填充的是无意义的测试数据，而不是正常网站的内容了。生产环境下的我这只有30多M，6000多记录的。
按测试数据SS负载能力应该是没问题，服务器优化多做些吧，MySQL的每个参数配置好，MySQL的各个缓存加大些，服务器上不需要的东西全关闭。加大服务器内存。

这里有使用非like查询语句的例子
https://discuz.dismall.com/redire ... 14&ptid=1328892

当你的数据库容量大的时候就应该掌握非常多的服务器端技术了，只靠现有系统不做优化是不行的。

附件表supe_attachments，如果没有附件文件了，清空内容吧（不是删除表），不过附件表十万条记录不是很影响，主要影响在于资讯表。
当然删除前先备份。

9# littlehz

多谢你的指点和答复，我再慢慢研究研究。