Sop Omcr Ericsson

27
RAKS Page 1 Standard Operating Procedure (SOPs) Monitoring and Escalation OMC-R Ericsson Prepared by: Muhammad NAzir OMCR Ericson South Page

description

Sop Omcr Ericsson

Transcript of Sop Omcr Ericsson

Page 1: Sop Omcr Ericsson

RAKS  Page 1 

 

 

 

 

 

   

Standard Operating Procedure                                                                                 (SOPs) 

Monitoring and Escalation  

                                               OMC-R Ericsson  

 

 

 

 

 

 

 

 

 

 

                                                                                                  

               Prepared by: Muhammad NAzir 

                                                                                                            OMC‐R Ericson South 

Page

Page 2: Sop Omcr Ericsson

RAKS  Page 2 

Table of Contents

Page Cover ................................................................................................... 1 Table of Contents ......................................................................................... 1 Ctrix Neighborhood Installation & Properties ............................................. 3 IP & Server Configuration ........................................................................... 4 Ctrix Login .................................................................................................. 5 OSS RC Workspace Menu .......................................................................... 6 Getting Start ALV(Alarm list viewer) ......................................................... 6 Select NEs .................................................................................................... 7 Network Elements O&M by ........................................................................ 7 View Alarms in ALV .................................................................................. 8 Create ALV Filter for cell logical alarms .................................................... 9

a:Open Filter Menu ....................................................................... 09 b:Name new Filter ......................................................................... 09 c:Select Specific attributes ............................................................. 10 d:Select Predefined Values ........................................................... 10 e:Apply TEST_SOP_FILTER ........................................................ 11 f:View Cell logical Alarms ............................................................ 12

Acknowledge cell logical alarms ............................................................... 13 Getting Start ALB(Alarm log Browser) .................................................... 14

a:Open ALB Menu from OSS workspace Menu ............................ 14 b:Select Time ................................................................................. 14 c:Select NEs(BSCs or BTS-sites) ................................................... 14 d:Select LOG output format ......................................................... 14 e:Initiate Searech ........................................................................... 14 f:Save Alarms ................................................................................. 15

Command Handling(CH) .......................................................................... 15 Basic omcr Commands .............................................................................. 15

a:Check status of BTS .................................................................... 16 b:Check onair/down status ............................................................ 16 c:Check BTS alarms ..................................................................... 17 d:Check E1 RBLT2 status .............................................................. 17 e:Check status of TRX .................................................................... 18 f:Check Check Status of GPRS Link ............................................. 18 g:Check status of C7 links ............................................................. 19

Dangerous Commands .............................................................................. 19 a:Block/Reset BTS ......................................................................... 20 b:Reset DXU .................................................................................. 20 c:LOCAl mode .............................................................................. 21 d:Halt / locked status .................................................................... 21 e:E1 /RBLT2 counter refresh ......................................................... 21

OPS(operation procedure support ............................................................. 22 Escalation Procedure ................................................................................. 24 SMS / Email Format .................................................................................. 25

 

 

Page 3: Sop Omcr Ericsson

RAKS  Page 3 

 

1: Install Ctrix Neighborhood with below Setting Properties  

 

 

 

 

View Ctrix Properties. 

•  

 

 

 

 

 

 

 

 

 

 

 

 

 

Page 4: Sop Omcr Ericsson

RAKS  Page 4 

 

Select /check Server,, server name: uascmpak01. 

ADD IP address: 10.83.255.133. 

 

 

 

 

 

 

 

 

 

 

Page 5: Sop Omcr Ericsson

RAKS  Page 5 

 

 

Start Citrix Meta Frame with user name & password. 

User name: ericfops 

Password: XXXXXX 

 

Citrix Window & User Menu: 

 

Page 6: Sop Omcr Ericsson

RAKS  Page 6 

 

Getting Start  ALV(Alarm LIST VIEWER. 

AlV is used to view active alarms in BSS Network. 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

Page 7: Sop Omcr Ericsson

RAKS  Page 7 

 

Network Element Selection: 

Select NE(Network elements­BSCs) 

South 1 maintain sites of :BSC02,BSC03—BSC09&BSC20,some sites in BSC10. 

South 2 maintain sites of :BSC21,BSC35,some sites in BSC10 

 

 

 

 

 

 

 

 

Page 8: Sop Omcr Ericsson

RAKS  Page 8 

View all alarms present in respective BSCs. 

• Select BSCS 

• Right click, and select View Alarms 

• Here all alarms appear, to sort out site down alarms we create Filter name as Cell logical alarms, it only shows site down alarms and filter out all other(Radio alarms,E1 Alarms, External Alarms)Alarms 

 

 

 

Page 9: Sop Omcr Ericsson

RAKS  Page 9 

Create Filters in ALV to filter out definite Alarms: 

• Click Filter from Edit menu or   Click       located below  Edit menu. 

 

• Select New, & Name the Filter i.e. Test_SOP_Filter. 

 

 

 

 

 

 

 

 

Page 10: Sop Omcr Ericsson

RAKS  Page 10 

• Choice specific Attributes from left column & Select it to Right column. 

 

 

Select Predefined Values against the selected Attributes. 

Selected Attributes: Specific Problem. 

Predefined Values: select cell logical availability from list, & click OK. 

 

Page 11: Sop Omcr Ericsson

RAKS  Page 11 

 

Apply cell logical Filter: 

 

 

 

 

 

 

Page 12: Sop Omcr Ericsson

RAKS  Page 12 

How to Acknowledge Alarms: 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

Page 13: Sop Omcr Ericsson

RAKS  Page 13 

How to use ALB(Alarm log Browser) 

 

 

• Select Time: 

• Select BSCs: 

 

 

 

 

 

Page 14: Sop Omcr Ericsson

RAKS  Page 14 

• Choice Format for the search data. 

• Expanded or RAW data format is normally used for INSPUR 

• Tab Separated Format used for reporting purpose. 

 

• Save Data 

Save LOG Alarms in OSS server in specific user (ericfops) home directory. 

/home/ericfops/cha 

 

 

 

Page 15: Sop Omcr Ericsson

RAKS  Page 15 

 CH (Command Handling). 

• CH is used to RUN different commands to perform jobs within the BTS network. 

• Select BSC and click on Connect menu. 

 

 

2: Here we use some basic commands which are used in OMCR operations. 

RLCRP: is used to check either site is down or onair. 

IF RLCRP print sows cell as BCCH 0 then site is down 

& if BCCH is 1, then site is onair. RLCRP command is used to extract BTS outage report. 

 

 

Page 16: Sop Omcr Ericsson

RAKS  Page 16 

Check detail status of site. 

          1: use RXTCP command to find out TG of site. 

 

 

2: Execute command rxcdp: to print Status of RX, TX.TS, and CF. 

Here RXCDP result is: CONFIG (site is onair) 

 

IF RXCDP result is: BLOCKED (site is down) 

 

 

 

Page 17: Sop Omcr Ericsson

RAKS  Page 17 

3: Execute command rxasp: to print Alarms present on the site. 

 

Check RBLT (E1) status of site). 

4: Execute command rxapp: to print ABis Devise number. 

Divide the Devise number by 32(RBLT2‐6846/32=213RBL2) 

5: Execute command DTSTP: to print ABis path status (RBLS ‐WO   or RBL2‐ ABL). 

 

 

 

 

 

 

Page 18: Sop Omcr Ericsson

RAKS  Page 18 

Check Status of TRX of any site with its all subordinates. 

6: Execute command rxmsp:  

 

 

Check Status of GPRS links of BSC. 

7: Execute command RRGBP:  

1 GPRS link is down as 1127‐NSVCI is block  

2 GPRS link is UP as 1101 & 1112‐NSVCI is Active  

 

 

 

Page 19: Sop Omcr Ericsson

RAKS  Page 19 

Check Status of C7 links status. 

7: Execute command C7ltp:  

SLC 00  of MSC 20 & SLC01 is active  

 

Dangerous Commands: 

 

 Whenever you execute any command end with I,E or C ,grouped as Dangerous commands a Warning menu appear. 

 

 

 

 

 

 

 

 

 

Page 20: Sop Omcr Ericsson

RAKS  Page 20 

How to Block /de Block Site. 

1.  Execute command RXBLI:mo=rxotg‐xxx,subord,force. 

2. Execute rxese: mo=rxotg‐xxx,subord,force then 

3. Execute rxesi: mo=rxotg‐xxx,subord,force then 

4. Execute command RXBLE: mo=rxotg‐xxx,subord,force. 

 

Execute all 4 commands in above sequence, first block TG, the TG out of service, after command rxese completely RUN, execute TG in service & finally run RXBLE to deBlock TG 

How to Block /de Block only DXU. 

1. Execute command RXBLI:MO=RXOCF‐xxx,,force. 

2. Execute command RXBLE:MO=RXOCF‐xxx,, force. 

 

 

Page 21: Sop Omcr Ericsson

RAKS  Page 21 

This command used frequently whenever site is down due to power issue & DXU failed to get operational. Note that always check status of E1 before reset DXU.if you reset DXU when E1 is ABL then DXU status changed to LOCAL mode & cannot get operational when its status changed physically from site. 

In this case site went LOCAL mode E1/RBLT2 is ABL. 

 

 

How to  LOCKED/Halt a site/cells: 

1. RUN command rlstp:cell=xxx;(to check status of site. already locked or onair) 

2. RUN rlstc:cell=xxx4,state=halted;(to halt cell 4 of site xxx) 

3. Run command rlstc:cell=xxx4,state=active;(to active/unlock cell 4 of site xxx) 

How to Blocked E1 of  any site: 

1. RUN command DTBLE:DIP=xxRBLT2; 

2. RUN command DTBLi:DIP=xxRBLT2; 

This command is used to change MBL state of E1 to WO or ABL. 

How to refresh E1 error counter of a site: 

1. RUN command DTQSR:DIP=xxRBLT2,UNACC,DEGR; 

How to refresh E1 error counter of  all sites in BSC: 

2. RUN command DTQSR:DIP=all; 

 

 

 

 

 

 

 

 

 

Page 22: Sop Omcr Ericsson

RAKS  Page 22 

USE  OPS(operational procedure support. 

1. Right click on OSS window, click TOOL                 AXE management                OPS. 

 

        2. OPS blank window open. 

         

        3. Click open from file menu to open sripts, saved in OSS home directory:/home/username/cha/scripts. 

 

 

  

 

 

 

Page 23: Sop Omcr Ericsson

RAKS  Page 23 

4. RUN TRX count script: 

Select specific script from cha directory  &  click on    

 

 

Script output file will saved in :/home/username/cha/response/TRX count. 

]  

 

 

 

 

 

 

 

 

 

 

 

 

Page 24: Sop Omcr Ericsson

RAKS  Page 24 

Escalation Procedure: 

1. Regions & Zones. Ericsson BTS & BSS Equipment use in South region. South 1: O&M by CMPAKFOPS  of BSC02,03,04,05,06,07,08,09,20,& some sites in BSC 21 & BSC10. South 2: MS by PPL of BSC21, BSC35 & some sites in BSC10. 

South 1  reporting & zone Details: 

Region  Zones  Maintained By Responsible Cluster  

Owner of CMPak FOPS South 1  Zone 1  CMPak‐FOPs  Mr Gulraiz 

South 1  Zone 2  CMPak‐FOPs  Mr Mubashir 

South 1  Zone 3  CMPak‐FOPs  Mr Aleem 

South 1  other‐HYD  CMPak‐FOPs  Mr Bux 

South 1  other‐MPK  CMPak‐FOPs  Mr Asif Memon 

South 1  other‐NWB  CMPak‐FOPs  Mr Asif Memon 

South 1  other‐Thatta  CMPak‐FOPs  Mr Asif Memon 

  South 2 reporting & zone Details: 

Region  Zones  Maintained By Responsible Cluster  

Owner of People Logic Responsible Cluster  

Owner of CMPAKFOPS South 2  Sukhar  People Logic  Mr Mateen Shah  Mr Sikandar 

South 2  Quetta  People Logic  Mr Ghazanfar  Mr Umair 

  Outage escalation procedure; 1: Single site down. 2: More than 4 sites down. 3: GPRS link down. 

1:On Call Intimation:  Inform the Vsat or single city / more than 4 sites outage to FOPS CM Engineer along with FOPS cluster owner, if outage not restored after 10 minutes inform the issue to concern Fops manager & after 20—30 minutes if outage not restored informed to NMC manager always (in case of single outage) if more than 5 sites are down then inform manager NMC & FOPS after 10‐‐‐15minutes. 

       2:SMS Generation:          Generate SMS to the FOPS after 10 minutes. 

Open: http://172.20.11.13/grpsms/login.aspx 

 

Mobile No: 923121520010 Password: 123456 

And Submit. 

Page 25: Sop Omcr Ericsson

RAKS  Page 25 

SMS Format: YYYYMMDD_TT 

07 Vsat  Sites are down in South BSC 10 (Quetta)  

ST: HH:MM Hrs 

Reason: To be determined 

Impact: GSM services  are affected in Gawader, Panjgur, Pasni & Turbat 

Info: PPL Helpdesk/Umair 

YYYYMMDD_TT 

40 Sites are down in South BSC 21 (Sukhar)  

ST: HH:MM Hrs 

ET:17:58 Hrs 

Reason: Wateen Dual fiber break. 

Impact: GSM services are affected in Dadu & Sukhar Region 

Info: PPL Helpdesk/Sikandar/Wajid/Bux 

 3: EMAIL Format: 

SYSTEM     GSM SITE  40 Sites are down in South BSC 21 (Sukhar)  START TIME      HH:MM Hrs (D/M/Y)END TIME     REASON          To be determined IMPACT            GSM services  are affected in Dadu Region & Sukhar regionINFO  PPL/Sikandar/Bux/Maaz

  SYSTEM     GSM SITE  07 Vsat Sites are down in South BSC 10 (Quetta)  START TIME      HH:MM Hrs (D/M/Y)END TIME     REASON          To be determined IMPACT            GSM services  are affected in Gawader, PANJGUR, Pasni & TurbatINFO  PPL/Umair 

SYSTEM     GSM SITE  Vsat/Single City Site KRN1483_OLDHPTL is down  in South BSC 10(Quetta). START TIME      HH:MM Hrs (D/M/Y)END TIME     REASON          To be determined IMPACT            GSM services are affected in  Shamali city KharanINFO  PPL/Ajmal 

 EMAIL Receipts: OMCR SOUTH; Complaint Management Center; Group Network Outage South          

Page 26: Sop Omcr Ericsson

RAKS  Page 26 

When outage restored, first call CM Engineer, cluster owner & then FOPS manager & NMC manager & Close SMS and Email with outage reason.  

Close SMS & Email in following formats. YYYYMMDD_TT 

07 Vsat  Sites are ONAIR in South BSC 10 (Quetta)  

ST: HH:MM Hrs 

ET: HH:MM Hrs 

Reason: Vsat modem faulty at Hub site ABC123 

Impact: GSM services were affected in Gawader, PANJGUR, Pasni & Turbat 

Info: PPL Helpdesk/Umair 

YYYYMMDD_TT 

40 Sites are UP in South BSC 21 (Sukhar)  

ST: HH:MM Hrs 

ET: HH:MM Hrs 

Reason: Wateen Dual fiber break. 

Impact: GSM services were affected in Dadu & Sukhar Region 

Info: PPL Helpdesk/Sikandar/Wajid/Bux 

 SYSTEM     GSM SITE  40 Sites are UP in South BSC 21 (Sukhar)  START TIME      HH:MM Hrs (D/M/Y)END TIME   HH:MM Hrs (D/M/Y)REASON          Power issue at Hub site ABC123 IMPACT            GSM services  were affected in Dadu Region & Sukhar regionINFO  PPL/Sikandar/Bux/Maaz

  SYSTEM     GSM SITE  07 Vsat Sites are UP in South BSC 10 (Quetta)  START TIME      HH:MM Hrs (D/M/Y)END TIME   HH:MM Hrs (D/M/Y)REASON          Vsat modem faulty at Hub site ABC123 IMPACT            GSM services were affected in Gawader, Panjgur, Pasni & TurbatINFO  PPL/Umair 

SYSTEM     GSM SITE  Vsat/Single City Site KRN1483_OLDHPTL is onair   in South BSC 10(Quetta). START TIME      HH:MM Hrs (D/M/Y)END TIME   HH:MM Hrs (D/M/Y)REASON          cp loadshedding,non genset site IMPACT            GSM services were affected in  Shamali city KharanINFO  PPL/Ajmal 

         

Page 27: Sop Omcr Ericsson

RAKS  Page 27